Current display Tag: hive

日志追查总结

今天想统计一下无线的resin日志中rtype的数量和比例,然后看一个月以来的趋势,分析resin代码是否有异常。本来只要在统计平台中写hive脚本,很快就可以跑出来,但是hive仓库中resin日志竟然没有入库,更没有进行解析。于是乎,只能手动从hdfs上拉数据然后分析。
在这个过程中,遇到一些问题,在这总结一下,也把解决方法贴出来。
从日志中总是能发现各种各样的问题,任重而道远,还需要一一进行解决。
Read More