hive使用rank实现topN的查询

本文介绍了如何在Hive中通过Rank函数查询每个cookieid在每天的最高访问次数。首先创建表并导入数据,然后通过group by计算每个cookieid每天的总数,接着使用RANK函数对数据进行排序,最后筛选出pv_rank为1的行,即为每天访问次数最多的cookieid。
摘要由CSDN通过智能技术生成

前置条件:
安装好hive

背景:
hive表中存有cookieid和time两个字段
目标:
通过rank方法查出每个cookieid在哪一天的次数最多

具体步骤如下:

一、创建表

CREATE EXTERNAL TABLE tmp_dh_topN (
cookieid string,
vtime string --day
) ROW FORMAT DELIMITED
FIELDS TERMINATED BY ','
stored as textfile location '/tmp/dh/tmp_dh_topN/';

二、导入数据到表

topN的数据链接: http://download.csdn.net/detail/hua245942641/9355221
数据文件存放在/tmp目录下,把数据导入hive的tmp_dh

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值