大数据之Hive之函数

系统内置函数

1.查看系统自带的函数

show functions;

2.显示自带的函数的用法

desc function upper;

3.详细显示自带的函数的用法

desc function extended upper;

常用内置函数

1.空字符串赋值
(1)函数说明
nvl:给值为NULL的数据复制,
格式:NVL(value,default_value)
功能:如果value为NULL,则NVL函数返回default_value的值.否则返回value的值,如果两个参数都为NULL,则返回NULL.

2.行转列
1)相关函数说明(可以是一行转一列,多行转一列)
concat(string A/col, ASstring B/col…): 返回输入字符串连接后的结果,支持任意个输入字符串;
concat_ws(separator,str1,str2,…): 它是一个特殊形式的concat().第一个参数 剩余参数间的分隔符.分隔符可以是与剩余参数一样的字符串.如果分隔符是null,返回值也将为null,这个函数会跳过分隔符参数后的任何 NULL 和空字符串。分隔符将被加到被连接的字符串之间;
注意:concat_ws must be “string or array”
collect_set(col):函数只接受基本数据类型,它的主要作用是将某字段的值进行去重汇总,产生array类型字段.
collect_list(col):函数只接受基本数据类型,它的主要作用是将某阻断的值进行不去重汇总,=产生array类型字段.

3.列转行(一列转多行)
1)函数说明
Split(str,separator):将字符串按照后面的分隔符切割,转换成字符array.
explode(col):将hive一列中复杂的array或者map结构拆分成多行.
LATERAL VIEW
用法:LATERAL VIEW udtf(expression) tableAlias As columnAlias