- 博客(2)
- 资源 (1)
- 收藏
- 关注
原创 使用MongoDB中Aggregation统计数据
{ftoc}聚合管道(Aggregation Pipeline)定义聚合管道是MongoDB提供的一种数据统计框架。通过Aggregation操作,能够实现类似于SQL 中Group By操作的功能。由于之前MongoDB中实现聚合操作需使用相对复杂的MapReduce,而聚合管道拥有固定的操作符表达, 使用更为简单。因此,聚合管道能够成为MapReduce
2013-12-29 21:04:54 5328 1
原创 使用hive进行日志分析
任务将一批登陆日志导入到hive中,然后通过hive计算如下数据,并将计算结果存入mongoDB每小时的登陆用户数(qid消重)每小时通过各渠道登陆各游戏的用户数12月9日10点的新用户登陆日志的数据结构如下所示: 年 月 时 分 秒 gkey
2013-12-11 14:51:12 3158
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人