hive常用操作(持续更新)

日期操作

操作1：将int类型日期（如：20200114）转化为日期类型的日期（如：2020-01-14）

step1 创建表并写入数据

create table tb (dt INT);
insert into tb values (20180701);
insert into tb values (20180715);

step2 日期转化

select dt,
from_unixtime(unix_timestamp(cast(dt as string),'yyyyMMdd'),'yyyy-MM-dd') as a,--方式1
concat(substr(cast(dt as string),1,4), '-',substr(cast(dt as string),5,2), '-',substr(cast(dt as string),7,2)) as b --方式2
from tb;

命令说明：
方式1：cast将int类型的dt转换为字符串，unix_timestamp将转化后的字符串转换为时间戳（这里需要自定义，yyyyMMdd必须对应前面cast转换后的字符串对应的日期格式），from_unixtime从时间戳中提取’yyyy-MM-dd’格式的日期
方式2：cast转换成字符串后进行拆分（substr）和拼接（concat）

操作2：日期增减操作

日期增加
date_add(string startdate, int days)
日期减少
date_sub (string startdate, int days)
注意，startdate需要转换成日期格式，一般是’yyyy-MM-dd’格式

记录操作

操作1：将某id下的多行记录转成一行

select r.user_id,concat_ws(' ',collect_set(r.product_type_name)) as product_type_name
from r
group by r.user_id

上述命令将user_id下的购买的全部产品类型名称汇成一行（并通过collect_set对一个user_id下的产品类型名称进行去重）