hive
文章平均质量分 76
loloxiaoz3
只有偏执狂才能生存
展开
-
使用hive进行日志分析
任务 将一批登陆日志导入到hive中,然后通过hive计算如下数据,并将计算结果存入mongoDB 每小时的登陆用户数(qid消重)每小时通过各渠道登陆各游戏的用户数12月9日10点的新用户 登陆日志的数据结构如下所示: 年 月 时 分 秒 gkey原创 2013-12-11 14:51:12 · 3162 阅读 · 0 评论 -
hive与pig比较
{ftoc} 什么是HIVE hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。hive参考手册 什么是pig pig是在HDFS和MapReduce之上的数据流处理语言(脚本语言),它将数据流处理翻译成多个MapReduce函数,提供更高原创 2014-01-06 16:42:49 · 2495 阅读 · 0 评论