Hive行列式转换

最新推荐文章于 2022-11-08 16:33:13 发布

TT15751097576

最新推荐文章于 2022-11-08 16:33:13 发布

阅读量213

点赞数

分类专栏：大数据基础篇文章标签： Hive行列式转换

本文链接：https://blog.csdn.net/TT15751097576/article/details/102829235

版权

本文介绍了Hive中的行转列和列转行操作。利用`concat`和`concat_ws`函数实现字符串连接，`collect_set`用于字段去重汇总。对于列转行，`explode`函数用于拆分array或map结构，而`lateral view`配合UDTF如`split`和`explode`，可以将一列数据转化为多行，并进行后续的聚合操作。

摘要由CSDN通过智能技术生成

Hive行转列

coacat(string A/col,string B/col…):返回输入字符串连接后的结果，支持人一个输入字符串；

//查询语句
select concat(deptid,dname) from dept;
//返回结果就是连接多个列
select concat(deptid,",",dname) from dept;

concat_ws(separator,str1,str2,…):他是一个特殊的形式 concat( )

select concat_ws(","ename,job,hiredate) from emp;
//返回结果就是将和多个列合并在一行，用逗号分割

collect_set(col):函数只接受基本数据类型，它的主要作用就是将某个字段的值进行去重汇总（列），产生新的array类型的字段

//准备数据文件
[root@bigdata ~]# vi person_info.txt
孙悟空	白羊座	A
大海	射手座	A
宋宋	白羊座	B
猪八戒	白羊座	A
凤姐	射手座	A
//创建数据表
create table person_info(
name string,
cinstellation string,
blood_type string)
row formaat delimited fields terminated by "\t";
//导入数据
load data inpath '/opt/db/person_info.txt' into table person_info;
//查询数据
hive> select * from person_info;
OK
孙悟空	白羊座	A
大海	射手座	A
宋宋	白羊座	B
猪八戒	白羊座	A
凤姐	射手座	A
//拼接函数
hive> select concat_ws("