grouping sets的用法

静听山水

已于 2024-11-07 09:36:12 修改

阅读量1.1w

点赞数 2

分类专栏： # HiveSQL 文章标签： sql

于 2021-02-14 09:51:34 首次发布

本文链接：https://blog.csdn.net/qq_41081716/article/details/113805912

版权

HiveSQL 专栏收录该内容

28 篇文章 0 订阅

订阅专栏

本文深入探讨了Hive中的GroupingSets功能，通过实例展示了如何使用它来生成不同维度的数据，包括全国、省份和城市维度。讲解了如何避免重复组合，并提供了SQL查询示例，用于统计销售数据并按日期、省份和城市聚合。同时，还介绍了如何利用groupingsets生成全国、省份、城市和区县维度的数据，帮助理解这一高级聚合操作在大数据分析中的应用。

摘要由CSDN通过智能技术生成

HIve-Grouping sets用法

grouping sets不需要把所有的列名进行组合，把需要的进行组合就可以了；(dt),(dt, lead_pro_name),(dt, lead_city_name)，这里加了三种情况，分别表示的是每天全国维度，每天省份维度，每天城市维度，如果再加(dt, lead_pro_name，lead_city_name)，这个就是和(dt, lead_city_name)一样的情况了，会造成重复，所以写的时候先考虑清楚，是需要将哪几种维度的放在一起。

select
    dt,
    lead_pro_name,
    lead_city_name,
    case
        when lead_pro_name is null
        and lead_city_name is null then '全国'
        when lead_pro_name is not null
        and lead_city_name is null then '省份'
        when lead_city_name is not null then '城市'
    end as `维度`,
    sum(sale_cnt) as `销量`
from
    wujie.dm_cx_trd_multi_order_di
where
    dt >= date_sub(current_date, 2)
    and is_td_valid_pay = 1
group by
    dt,
    lead_pro_name,
    lead_city_name grouping sets(
        (dt),
        (dt, lead_pro_name),
        (dt, lead_city_name)
    );

同时产生全国，省份，城市，区县维度的数据，注意grouping sets里的（）为全国维度的数据

select
nvl(pro_id,'-999999') pro_id,
nvl(pro_name,'-999999') pro_name,
nvl(city_id,'-999999') city_id,
nvl(city_name,'-999999') city_name,
nvl(county_id,'-999999') county_id,
nvl(county_name,'-999999') county_name

from （select * from table)t

group by
    pro_id,
    pro_name,
    city_id,
    city_name,
    county_id,
    county_name 
grouping sets
   (
        (),
        (pro_id, pro_name),
        (pro_id, pro_name, city_id, city_name),
        (pro_id,pro_name,he.city_id,city_name,county_id,county_name)
    )