Hive开窗函数、窗口帧

最新推荐文章于 2022-12-11 19:34:13 发布

It.explorer

最新推荐文章于 2022-12-11 19:34:13 发布

阅读量692

点赞数

分类专栏： hive 文章标签： hive sql

本文链接：https://blog.csdn.net/weixin_58078092/article/details/120738211

版权

本文介绍了Hive中的开窗函数，包括row_number、dense_rank、rank、percent_rank、cume_dist、NTILE及聚合函数的用法，并通过实例展示了如何使用。同时，详细解释了窗口帧的概念、格式和应用场景，包括rows与range的区别。

摘要由CSDN通过智能技术生成

前言

    在sql中有一类函数叫做聚合函数，例如sum()、avg()、max()等等，这类函数可以将多行数据按照规则聚集为一行，一般来讲聚集后的行数是要少于聚集前的行数的。但是，哟偶是我们想要既显示聚集后的数据，这时我们便引入了窗口函数。

    好像给每一份数据开一扇窗户，所以叫开窗函数

用法：

select xxxx,row_number() over (partition by 分组字段 order by 排序字段 desc) as rn from 需要查询的表 group by xxxx

select *,dense_rank() over (partition by clazz order by score desc) as s from new_score;

select *,rank() over (partition by clazz order by score desc) as s from new_score;

select *,percent_rank() over (partition by clazz order by score desc) as s from new_score;

假定升序排序，则使用以下公式确定累积分布：小于等于当前值x的行数 / 窗口或partition分区内的总行数。其中，x 等于 order by 子句中指定的列的当前行中的值。

select *,cume_dist() over (partition by clazz order by score desc) as s from new_score;