HSQL之窗口-聚合-分析函数

最新推荐文章于 2024-08-03 23:10:08 发布

Jeady·

最新推荐文章于 2024-08-03 23:10:08 发布

阅读量1.4k

点赞数 1

本文链接：https://blog.csdn.net/qq_43149023/article/details/104187228

版权

本文介绍了HSQL中的窗口、聚合和分析函数，包括创建Hive表、初始化数据，详细讲解了window函数如lead和lag，以及first_value和last_value的用法。还探讨了聚合函数如count、sum、min、max、avg，和分析函数如row_number、rank、dense_rank、cume_dist、percent_rank、ntile的应用。

摘要由CSDN通过智能技术生成

HSQL之窗口, 聚合和分析函数

HSQL是大数据面试中必须具备的能力, 这里将用一个案例串通这三个常用且难点函数. 学习Hsql, 多敲多练, 方能熟能生巧.

1.创建hive表:

create table window_function_temp(uname string, create_time string,pv string);

2.初始化测试数据:

insert overwrite table dw_tmp.window_function_temp
select 
split(detail,',')[0] as uname
,split(detail,',')[1] as create_time
,split(detail,',')[2] as pv
from
(
    select
    concat('测试用户,2019-10-02,7
    #测试用户,2019-10-05,4
    #测试用户,2019-10-07,5
    #测试用户,2019-10-03,6
    #测试用户,2019-10-04,3
    #测试用户,2019-10-01,3
    #测试用户,2019-10-06,4') as ct_str
) t
lateral view explode(split(ct_str,'#')) t2 as detail;