SemanticException [Error 10025]: Line 4:0 Expression not in GROUP BY key 'device_type'
select
user_id ,
device_num ,
device_type ,
os ,
os_version ,
manufacturer,
carrier ,
network_type,
area_code ,
count(1) launch_count
from dwd_nshop.dwd_nshop_actlog_launch
where bdp_day='20210518'
group by device_num
我们本来是根据device_num进行group by,这样同样的device_num就会到同一个组里面。形成的是一个集合。
但是在hive里面,如果使用select进行查询,查询了某一个具体的一行值,例如这个例子中查询了某一个user_id ,因为一组里面的user_id 可能有很多种,那么就不能知道选择哪个好,处于这样的原因,hive不准进行这样的查询。但是可以搭配聚合函数使用。比如max(user_id )等等。
现在就有集中方法解决这样的问题。
一
搭配聚合函数使用
select max(user_id ),device_num ,max(device_type ),max(os)from sdwd_nshop.dwd_nshop_actlog_launch group by device_num ;
二
使用collect_set(…)[0]
同一组就像一个数组一样,可以通过索引访问。
但是只能选取一组中的某一个。且其他值比如user_id 字段就只能选取一个
select collect_set(user_id )[0],device_num ,collect_set(device_type )[0] from sdwd_nshop.dwd_nshop_actlog_launch group by device_num ;
三
最后一种就是,如果要想关心那个guid字段,就可以干脆将这个字段一个group by
select user_id ,device_num from sdwd_nshop.dwd_nshop_actlog_launch group by user_id ,device_num ;