概要
GROUPING SETS在SELECT语句中的使用,它扩展了GROUP BY的功能,允许一次性执行多种分组操作,提高了查询效率。hive,spark,presto中都有此函数。以下介绍以sparksql为例;
使用方法介绍
首先需要提醒一点的是,hql中和sparksql中虽然均有grouping sets函数,可是grouping__id顺序确是相反的,一般情况我们习惯了hql中保持一致,需要脚本中增加:set spark.grouping.sets.reference.hive=true;
基本使用,是在group by 维度值后,使用grouping sets ((a,b,c),(a,b),©)像这样;
SELECT a, b, SUM( c ) FROM tab1 GROUP BY a, b GROUPING SETS ( (a,b), a)
###等价于
SELECT a, b, SUM( c ) FROM tab1 GROUP BY a, b
UNION
SELECT a