hive中explode函数的用法

hive中explode函数的用法

explode函数是一个炸裂函数他可以做一下转换

将这个表格
+--------------+-----------------------------+
| movie.movie  |       movie.category        |
+--------------+-----------------------------+
| 《疑犯追踪》       | ["悬疑","动作","科幻","剧情"]       |
| 《Lie to me》  | ["悬疑","警匪","动作","心理","剧情"]  |
| 《战狼2| ["战争","动作","灾难"]            |
+--------------+-----------------------------+
转换成这个表格
+--------------+-----+
|    movie     | ty  |
+--------------+-----+
| 《疑犯追踪》       | 悬疑  |
| 《疑犯追踪》       | 动作  |
| 《疑犯追踪》       | 科幻  |
| 《疑犯追踪》       | 剧情  |
| 《Lie to me》  | 悬疑  |
| 《Lie to me》  | 警匪  |
| 《Lie to me》  | 动作  |
| 《Lie to me》  | 心理  |
| 《Lie to me》  | 剧情  |
| 《战狼2| 战争  |
| 《战狼2| 动作  |
| 《战狼2| 灾难  |
+--------------+-----+

用法为

select
movie,
ty
from
movie
lateral view explode(category) t as ty
;

前提为建表语句

1.建表的时候必须将要炸裂的字段搞成array格式,或者map格式
2.这个字段必须用collection items terminated by ‘,’ 进行切分才能炸裂

create table movie (
movie  string,
category array<string>
)
row format delimited fields terminated by '\t'
collection items terminated by ',';
load data local inpath '/root/mov.txt' overwrite into table movie;

如果不是这种格式我们要不重新建一个表,要不将格式类行进行转换!

  • 2
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Hexplode函数和split函数都是用于拆分数组类型或map类型字段的函数,它们都属于UDTF(用户自定义表达式函数)。explode函数可以将一个数组或map类型的字段拆分成多行,而split函数则是用来将字符串按照指定的分隔符拆分成数组。你可以通过使用explode函数配合split函数来实现拆分字符串并展开成多行的操作。例如,可以使用以下语句来拆分字符串"nice|good|well"并展开成多行: select explode(split("nice|good|well","\\|")); 这样会将"nice"、"good"和"well"分别展开成三行。 此外,还有其他类似的函数,如lateral view和posexplode函数也可以实现类似的功能。lateral view用于在查询进行表达式的展开操作,而posexplode函数可以将数组类型或map类型字段拆分成多行,并同时保留原始索引。它们的具体用法和区别可以参考引用的内容。 总结来说,Hiveexplode函数和split函数都是用于拆分数组类型或map类型字段的函数,可以将一个字段拆分成多行。使用这些函数可以方便地对数据进行处理和分析。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [Hive函数](https://blog.csdn.net/qq_51691017/article/details/127422213)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [【Hive】split()、explode()、lateral view用法和区别](https://blog.csdn.net/qq_32727095/article/details/120367400)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值