Hive基本操作之用户访问次数统计

本文通过示例介绍如何使用Hive进行大数据处理,包括创建表、加载数据、转换日期格式、计算每月访问量及按月累计访问量,以达到分析每个用户每月的累计访问次数。
摘要由CSDN通过智能技术生成

# 前言
根据对用户ID、访问日期、访问次数的若干条数据,分析得出每个用户的累计访问次数,涉及字符串替换、时间函数、开窗、求和等技术。
## 1. 假如有用户访问数据(用户ID,访问日期,访问次数)
|userId|visitDate|visitCount|
| -- | -- | -- |
|u01|2017/1/21|5|
|u02|2017/1/23|6|
|u03|2017/1/22|8|
|u04|2017/1/20|3|
|u01|2017/1/23|6|
|u01|2017/2/21|8|
|u02|2017/1/23|6|
|u01|2017/2/22|4|

## 2. 希望得到每个月用户的访问累计次数

|用户id|月份|小计|累积|
| -------- | -------- | -------- |
|u01|2017-01|11|11|
|u01|2017-02|12|23|
|u02|2017-01|12|12|
|u03|2017-01|8|8|
|u04|2017-01|3|3|

## 3. 启动hive,选库,建表

```
create table action
    (userId string,
    visitDate string,
    visitCount int) 
row format delimited fields terminated by "\t";
```

## 4. 将数据导入表

```
load data local inpath '/data/action.dat' into table ac

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值