hive中行转列,列转行的场景及实现

本文介绍了Hive在处理数据时行转列和列转行的常见场景及实现方法。具体包括从table1查询出table2时利用concat_ws()和collect_set()函数,从table2查询出table1时使用explode()、split()和LATERAL VIEW函数。还给出了用户人群标签统计的场景,并举例说明了列转行的处理方法,强调了explode()函数在处理List格式数据时的作用。
摘要由CSDN通过智能技术生成

hive行转列,列转行的应用场景:

1、 需要取“订单号”对应的所有商品“SKU号”,商品“sku号”放在一列,即从table1查询出table2;
2、 当商品“sku号”均在一列的时候,需要查询每个“sku号”对应的“订单号”,即从table2查询出table1。

3、场景:在hive表中,一个用户会有多个人群标签,List格式(逗号分隔如要转成List),有时我们需要统计一个人群标签下有少用户,这是就需要使用行转列。

示例如下:(场景一,场景二)

实现方法:
1、从table1查询出table2:

SELECT sale_ord_id, concat_ws(',', collect_set(item_sku_id)) AS item_sku_id
FROM table1
WHERE dt = sysdate(-1)
GROUP BY sale_ord_id


关键点:concat_ws()  、 collect_set() 函数的使用


2、从table2查询出table1:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

MrZhangBaby

请博主喝杯奶茶

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值