Hive中的高级函数

最新推荐文章于 2024-06-28 13:16:40 发布

L.Z..

最新推荐文章于 2024-06-28 13:16:40 发布

阅读量963

点赞数

文章标签： hive

本文链接：https://blog.csdn.net/weixin_54379276/article/details/117360012

版权

本文详细介绍了SQL中的几个关键函数和操作，包括NVL函数用于空值处理，CASE WHEN THEN ELSE END用于条件判断，IF函数进行简单的条件赋值，以及如何实现行转列和列转行。此外，还讲解了窗口函数的应用，如LAG和LEAD函数，以及RANK、DENSE_RANK和ROW_NUMBER的区别。这些函数和操作在数据处理和分析中具有重要作用。

摘要由CSDN通过智能技术生成

一.空字段赋值

1 ）函数说明

NVL：给值为NULL的数据赋值，它的格式是NVL( value，default_value)。它的功能是如果value为NULL，则NVL函数返回default_value的值，否则返回value的值，如果两个参数都为NULL ，则返回NULL。

2 ）样例

select comm,nvl(comm,mqrid) from emp; 如果员工的comm为Null,则用领导的id来代替

二. CASE WHEN THEN ELSE END

1 ）函数说明

case (字段名) when (值) then value else value end

2 ）样例

select dept_id,

sum(case sex when ' 男 ' then 1 else 0 end) male_count,

sum(case sex when ' 女 ' then 1 else 0 end) female_count

from

emp_sex; 第一个sum函数: 如果员工的性别为男,则赋值为1,其他为0

第二个sum函数: 如果员工的性别为女,则赋值为1,其他为0

case pay when '支付宝' then 1 when '微信' then 2 when '信用卡' then 3 else 0 end;

三. if

1 ）函数说明

与case when then else end 作用类似,if用于两个值,case用于多个值

2 ）样例

if(sex='男' , 1 , 0) ; 如果sex字段为'男',值为1,否则为0

四. 行转列

1 ）相关函数说明 ( 可以是一行转一列，多行转一列 )

CONCAT(string A/col, string B/col…)：返回输入字符串连接后的结果，支持任意个输入字符串;

CONCAT_WS(separator, str1, str2,...)：它是一个特殊形式的 CONCAT()。第一个参数剩余参数间的分隔符。分隔符可以是与剩余参数一样的字符串。如果分隔符是 NULL，返回值也将为 NULL。这个函数会跳过分隔符参数后的任何 NULL 和空字符串。分隔符将被加到被连接的字符串之间;

注意： CONCAT_WS must be "string or array<string>"

COLLECT_SET(col)：函数只接受基本数据类型，它的主要作用是将某字段的值进行去重汇总，产生array类型字段。

COLLECT_LIST(col)：函数只接受基本数据类型，它的主要作用是将某字段的值进行不去重汇总，产生array类型字段。

2 ）样例

select concat(emp, '-' , sal , '-' , deptno) from emp; 张三-5000-11 将员工名和工资和员工id拼接

李四-5500-12

...

concat_ws('-', ename , cast(empno as string)); 第一个为分隔符'-', 后面接的是string类型,不是string类型的需要用cast进行强制转换

collect_set( 对结果进行去重 ) collect_set(name) 将name字段的值进行去重汇总,形成array字段

collect_list(对结果不去重) 将name字段的值不进行去重汇总,形成array字段