hive中实现行转列_hive中的列转行和行转列

1、列转行

1.1 相关函数的说明：

concat(string1,string,...)　　//连接括号内字符串，数量不限。

concat_ws(separator,string1,string2,...)　　//连接括号内字符串，数量不限，连接符为separator。

collect_set(col)　　//此函数只接受基本类型，主要是将字段的值进行去重汇总，产生array类型字段。

1.2 例子：

创建表：create table person_info(

name string,

constellation string,

blood_type string

)row format delimited fields terminated by '\t';

上传数据：

load data local inpath ‘/home/hdc/constellation.txt’ into table person_info;

查询语句：

select t.base,concat_ws('|',collect_set(t.name)) name

from(

select name,concat(costellation,',',blood_type) base

from person_info

)t

group by t.base;

2、行转列

2.1 相关函数：

explode(col_name)：将hive中的一列中复杂的array或者map分成多行

lateral view：侧视图配合explode(或者其他的UDTF)，一个语句生成把单行数据拆解成多行后的数据结果集。　　//LATERAL VIEW explode(split(goods_id,','))goods相当于一个虚拟表

2.2 例子：

创建表：create table movie_info(

name string,

categroy array

)row format delimited fields terminated by '\t';

collection items terminated by ',';

上传数据：

load data local inpath '/home/hdc/movie.txt' into table movie_info;

查询语句：

select name,category_type

from movie_info lateral view explode(categroy) temp_table as category_type;

解析：表movie_info与虚表temp_table进行笛卡尔乘积其中temp_table表中的字段为category_type

explode还有如下用法：

select distinct(t2.videoid), t3.category

from (

select explode(relatedid) as videoid

from (

select *

from video_orc

order by views desc

limit 50) t1

)t2