hive库concat_ws函数实现 一行转多行,多行转一行

首先先说一下,我用的hive库是海致BDP,是一款成熟的hive产品,所以和正常的hive数据库还是又一定区别,不过同组的老哥说语法和hive几乎一样。

分为两步

第一步:把逗号分隔的多个id从一行分隔成多行

利用lateral view explode( )函数,把一行拆成多列

select fi.id,fi.film_star,s_film_star
from film_info fi
lateral view explode(split(film_star,',')) t as s_film_star

第二步:把多行id与字典表进行关联,拿到对应值,并把多行对应值捏成一行

1.hive库不支持子查询,所以把拆成多行的数据用temp表暂存

2.然后用拆分出来的表对字典表关联,拿到需要用的值

3.利用concat_ws( )、collect_set( )函数,通过group by分组,捏成一行

TEMP actor_l = 
select fi.id,fi.film_star,s_film_star
from film_info fi
lateral view explode(split(film_star,',')) t as s_film_star

select 
max(actor_l.id) as film_id,
max(actor_l.film_star) as film_star,
concat_ws(',', collect_set(actor.actor_name)) as actor_name
from actor_l -- 上面的temp表
left join actor on actor.id = actor_l.s_film_star -- 需要获取信息的表
group by actor_l.id

然后拿着film_id去关联就可以了

大功告成!

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值