sql技巧-滚动窗口分组

本文基于hive1.1.0-cdh5.12.1

将数据按N个一组进行分组

示例数据:

id

0

1

2

3

4

6

7

要求:将id按一个长度为N的滚动窗口分组(N>1),并求出窗口区间(前闭后开)

参考结果:N=3

id

分组

窗口区间

0

1

[0-3)

1

1

[0-3)

2

1

[0-3)

3

2

[3-6)

4

2

[3-6)

5

2

[3-6)

6

3

[6-9)

7

3

[6-9)

参考实现:

set hivevar:win_size=3; --窗口大小
with t as  
(
select  i as id
from (select  7 as days ) t 
LATERAL VIEW 
posexplode(split(repeat(',',days),',')) pe as i, x 
) --构造一个测试表
------------------------SQL-------------------------------
select id
,floor(id/win_size)                 as group_id --除以窗口大小后向下取整,得到分组id
,floor(id/win_size)*win_size        as win_start--【分组id】*【窗口大小】=【窗口起始】
,(floor(id/win_size)+1)*win_size    as win_end  --【窗口起始】+【窗口大小】=(【分组id】+1)*【窗口大小】=【窗口终止(不含)】
,printf('[%d-%d)',floor(id/win_size)*win_size,(floor(id/win_size)+1)*win_size ) as window --使用printf格式窗口区间
from 
(select id,${hivevar:win_size} as win_size from t) t1;

+-----+-----------+------------+----------+----------+--+
| id  | group_id  | win_start  | win_end  | window   |
+-----+-----------+------------+----------+----------+--+
| 0   | 0         | 0          | 3        | [0-3)    |
| 1   | 0         | 0          | 3        | [0-3)    |
| 2   | 0         | 0          | 3        | [0-3)    |
| 3   | 1         | 3          | 6        | [3-6)    |
| 4   | 1         | 3          | 6        | [3-6)    |
| 5   | 1         | 3          | 6        | [3-6)    |
| 6   | 2         | 6          | 9        | [6-9)    |
| 7   | 2         | 6          | 9        | [6-9)    |
+-----+-----------+------------+----------+----------+--+

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

周小科

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值