Impala常用函数

已于 2023-01-31 13:25:29 修改
阅读量3.5k 收藏 6
点赞数 1
分类专栏： 大数据 文章标签： sql 数据库 大数据
于 2023-01-30 11:52:51 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ZYN7979/article/details/128799927
版权

Impala

字符串函数

1、去除字符串之前和之后的任意个数的空格

​ btrim(string a)

[master:21000] > select btrim('    hello ') as btrim;
+-------+
| btrim |
+-------+
| hello |
+-------+

2、返回字符串的长度，两个函数功能相同

​ char_length(string a)

​ character_length(string a)

--char_length得到hello world的长度
[master:21000] > select char_length('hello world') as char_length;
+-------------+
| char_length |
+-------------+
| 11          |
+-------------+
--通过函数character_length得到hello world的长度
[master:21000] > select character_length('hello world') as character_length;
+------------------+
| character_length |
+------------------+
| 11               |
+------------------+

3、拼接多个字符串

​ concat(string a,string b…)

--连接hello和world两个字符串
[master:21000] > select concat('hello','world') as concat;
+------------+
| concat     |
+------------+
| helloworld |
+------------+
--连接hello、world、cauchy三个字符串
[master:21000] > select concat('hello','world','cauchy') as concat;
+------------------+
| concat           |
+------------------+
| helloworldcauchy |
+------------------+

4、拼接多个字符串，由指定分隔符分割

​ concat_ws(string sep,string a,string b…)

--通过'-'连接两个字符串
[master:21000] > select concat_ws('-','hello','world') as concat_ws;
+-------------+
| concat_ws   |
+-------------+
| hello-world |
+-------------+

5、 返回参数字符串的字符长度

​ length(string a)

--得到字符串'abcdefg'的长度
[master:21000] > select length('abcdefg') as length;
+--------+
| length |
+--------+
| 7      |
+--------+

6、返回参数字符串，并从左侧删除任何前导空格

​ ltrim(string a)

--删除字符串'  hello  '左侧的所有空格
[master:21000] > select ltrim('  hello  ') as ltrim;
+---------+
| ltrim   |
+---------+
| hello   |
+---------+

7、返回参数字符串，并从右侧删除任何后置空格

​ rtrim(string a)

--删除字符串'  hello  '右侧的所有空格
[master:21000] > select rtrim('  hello  ') as rtrim;
+---------+
| rtrim   |
+---------+
|   hello |
+---------+

8、去掉字符串中所有前导和后置空格

​ trim(string a)

--去掉'  hello world  '的前导和后置空格
[master:21000] > select trim('  hello world  ') as trim;
+-------------+
| trim        |
+-------------+
| hello world |
+-------------+

9、 返回true或者false，表示字符串是否包含正则表达式的值

​ regexp_like(string source,string pattern,[string options])

options参数：

  • c： 区分大小写匹配（默认）
  • i：不区分大小写
  • m：多行匹配
  • n：换行符匹配
--判断字符'foo'是否包含'f'
[master:21000] > select regexp_like('foo','f');
+-------------------------+
| regexp_like('foo', 'f') |
+-------------------------+
| true                    |
+-------------------------+
--判断字符'foo'是否包含'F'
[master:21000] > select regexp_like('foo','F');
+-------------------------+
| regexp_like('foo', 'f') |
+-------------------------+
| false                   |
+-------------------------+
--判断字符'foo'是否包含'f',设置参数不区分大小写
[master:21000] > select regexp_like('foo','F','i');
+------------------------------+
| regexp_like('foo', 'f', 'i') |
+------------------------------+
| true                         |
+------------------------------+

10、以delimiter字符串作为拆分项，取第n个字符串返回

​ split_part(string source,string delimiter,bigint n)

--以','为分隔符拆分'x,y,z'并返回第1个字符串
[master:21000] > select split_part('x,y,z',',',1);
+-----------------------------+
| split_part('x,y,z', ',', 1) |
+-----------------------------+
| x                           |
+-----------------------------+
--以','为分隔符拆分'x,y,z'并返回第2个字符串
[master:21000] > select split_part('x,y,z',',',2);
+-----------------------------+
| split_part('x,y,z', ',', 2) |
+-----------------------------+
| y                           |
+-----------------------------+
--以','为分隔符拆分'x,y,z'并返回第3个字符串
[master:21000] > select split_part('x,y,z',',',3);
+-----------------------------+
| split_part('x,y,z', ',', 3) |
+-----------------------------+
| z                           |
+-----------------------------+

11、 截取字符串，返回左边的n个字符

​ strleft(string a,int num_chars)

--从左边截取字符串'hello world'，返回长度为4的字符串
[master:21000] > select strleft('hello world',4) as strleft;
+---------+
| strleft |
+---------+
| hell    |
+---------+

12、截取字符串，返回右边的n个字符

​ strright(string a,int num_chars)

--从右边截取字符串'hello world'，返回长度为4的字符串
[master:21000] > select strright('hello world',4) as strright;
+----------+
| strright |
+----------+
| orld     |
+----------+

13、返回从指定点开始的字符串部分,可选地指定最大长度

​ substr(string a,int start,[int len])

​ substring(string a,int start,[int len])

--截取字符串'hello world'，从第6位开始
[master:21000] > select substr('hello world',6) as substr;
+--------+
| substr |
+--------+
|  world |
+--------+
--截取字符串'hello world'，从第6位开始，长度为3
[master:21000] > select substr('hello world',6,3) as substr;
+--------+
| substr |
+--------+
|  wo    |
+--------+
--截取字符串'hello world'，从第6位开始
[master:21000] > select substring('hello world',6) as substring;
+-----------+
| substring |
+-----------+
|  world    |
+-----------+
--截取字符串'hello world'，从第6位开始，长度为3
[master:21000] > select substring('hello world',6,3) as substring;
+-----------+
| substring |
+-----------+
|  wo       |
+-----------+

时间函数

1、当前时间戳

​ now()

​ current_timestamp()

-- now()
[master:21000] > select now();
+-------------------------------+
| now()                         |
+-------------------------------+
| 2023-01-16 10:07:07.628604000 |
+-------------------------------+
-- current_timestamp()
[master:21000] > select current_timestamp();
+-------------------------------+
| current_timestamp()           |
+-------------------------------+
| 2023-01-16 10:08:22.152984000 |
+-------------------------------+

2、时间戳取整

Impala 2.11 之前的取整当前时间的写法:
select trunc(now(), 'YEAR') --取整到年份, 得到当年 1 月 1 日 0 点 0 分
select trunc(now(), 'MONTH') --取整到月份, 得到当月 1 日 0 点 0 分
select trunc(now(), 'DD') --取整到日期, 得到当天 0 点 0 分
select trunc(now(), 'DAY') --取整到星期, 得到本星期第一天的 0 点 0 分
select trunc(now(), 'HH24') --取整到小时, 得到当前小时的 0 分
select trunc(now(), 'MI') --取整到分钟, 得到当前分钟 0 秒


Impala 2.11 之后增加了 date_trunc() 函数, 下面是几个取整的写法:
date_trunc('year',now())
date_trunc('month',now())
date_trunc('week',now())
date_trunc('day',now())
date_trunc('hour',now())
date_trunc('minute',now())
date_trunc() 的语法和 date_part() 类似, 下面是完整的时间 part 列表:
microseconds
milliseconds
second
minute
hour
day
week
month
year
decade
century
millennium

3、时间戳提取

​ date_part(‘year’, now())

​ extract(now(), ‘year’)

​ extract(year from now())

​ year(now())

-- date_part('year', now())
[master:21000] > select date_part('year', now());
+--------------------------+
| date_part('year', now()) |
+--------------------------+
| 2023                     |
+--------------------------+
-- date_part('day', now())
[master:21000] > select date_part('day', now());
+-------------------------+
| date_part('day', now()) |
+-------------------------+
| 16                      |
+-------------------------+
-- extract(now(), 'year')
[master:21000] > select extract(now(), 'year');
+------------------------+
| extract(now(), 'year') |
+------------------------+
| 2023                   |
+------------------------+
-- extract(year from now())
[master:21000] > select extract(year from now());
+--------------------------+
| extract(year from now()) |
+--------------------------+
| 2023                     |
+--------------------------+
-- year(now())
[master:21000] > select year(now());
+--------------+
| year(now())  |
+--------------+
| 2023         |
+--------------+
-- month(now())
[master:21000] > select month(now());
+--------------+
| month(now()) |
+--------------+
| 1            |
+--------------+
-- -- day(now())
[master:21000] > select day(now());
+--------------+
| day(now())   |
+--------------+
| 16           |
+--------------+

4、时间加减

时间戳可以直接加减 interval n days/months/years/hours/minutes .

也可以使用下面的函数:
years_add(timestamp t, int n)
years_sub(timestamp t, int n)
months_add(timestamp t, int n)
months_sub(timestamp t, int n)
days_add(timestamp t, int n)
days_sub(timestamp t, int n)
hours_add(timestamp t, int n)
hours_sub(timestamp t, int n)
minutes_add(timestamp t, int n)
minutes_sub(timestamp t, int n)
-- years_add(now(),2)
[master:21000] > select years_add(now(),2);
+-------------------------------+
| years_add(now(), 2)           |
+-------------------------------+
| 2025-01-16 10:35:30.402209000 |
+-------------------------------+

也可以用下面两个通用的函数:
date_add(time, interval N months)
date_sub(time, interval N hours)

-- date_add(time, interval N year)
[master:21000] > select date_add(now(),interval 1 years);
+-----------------------------------+
| date_add(now(), interval 1 years) |
+-----------------------------------+
| 2024-01-16 10:45:26.244200000     |
+-----------------------------------+
-- date_sub(time, interval N year)
[master:21000] > select date_sub(now(),interval 1 years);
+-----------------------------------+
| date_sub(now(), interval 1 years) |
+-----------------------------------+
| 2022-01-16 10:45:49.260996000     |
+-----------------------------------+

5、获取月份最后一天

​ last_day(timestamp t)

[master:21000] > select last_day(now());
+---------------------+
| last_day(now())     |
+---------------------+
| 2023-01-31 00:00:00 |
+---------------------+

6、获取月份间隔

[master:21000] > select months_between('2023-06-18', '2023-01-18');
+--------------------------------------------+
| months_between('2023-06-18', '2023-01-18') |
+--------------------------------------------+
| 5                                          |
+--------------------------------------------+

7、获取时间间隔天数

​ datediff(end time,start time)

-- datediff(end time,start time)
[master:21000] > select datediff('2023-01-18 10:47:24', '2023-01-16 15:47:16');
+--------------------------------------------------------+
| datediff('2023-01-18 10:47:24', '2023-01-16 15:47:16') |
+--------------------------------------------------------+
| 2                                                      |
+--------------------------------------------------------+

8、获取前昨天日期

yyyyMMdd格式

substr(regexp_replace(cast(date_sub(now(),1) as string),‘-’,‘’),1,8)

-- substr(regexp_replace(cast(date_sub(now(),1) as string),'-',''),1,8)
[dn02:21000] > select substr( regexp_replace(cast(date_sub(now(),2) as string),'-',''),1,8);
+---------------------------------------------------------------------------+
| substr(regexp_replace(cast(date_sub(now(), 2) as string), '-', ''), 1, 8) |
+---------------------------------------------------------------------------+
| 20230129                                                                  |
+---------------------------------------------------------------------------+

yyyy-MM-dd格式

substr(cast(date_sub(now(),1) as string),1,10)

-- substr(cast(date_sub(now(),1) as string),1,10)
[dn02:21000] > select substr(cast(date_sub(now(),1) as string),1,10);
+---------------------------------------------------+
| substr(cast(date_sub(now(), 1) as string), 1, 10) |
+---------------------------------------------------+
| 2023-01-30                                        |
+---------------------------------------------------+
ZYN7979
关注
  • 1
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Impala 数值函数大全(转载)
weixin_33955681的博客
09-18 4062
　　官网：https://www.cloudera.com/documentation/enterprise/latest/topics/impala_math_functions.html 　　转载链接1：https://blog.csdn.net/qq_24699959/article/details/79863664 　　转载链接2：https://blog.csdn.net/qq_24...
impala常用数值函数大全（超详细）
hua_ge_zui_liang的博客
09-29 1万+
本文目录数值函数函数列表 数值函数 Impala中数学函数用来执行数值计算，比如基本加法，减法，乘法和除法及更复杂的运算 函数列表 abs(numeric_type a) ==>返回参数的绝对值 --得到-12的绝对值 [master:21000] > select abs(-12) as abs; +-----+ | abs | +-----+ | 12 | +-----+ --得到-12.5的绝对值 [master:21000] > select abs(-12.5) as a
【impala001】impala内置函数手册总结（更新中）
最新发布
kngines
05-18 196
1.熟悉、梳理、总结下impala相关知识体系。 2.日常研发过程中使用较少，随着时间的推移，很快就忘得一干二净，所以梳理总结下，以备日常使用参考 3.欢迎批评指正，跪谢一键三连！
Impala的函数大全和自定义函数
互联网知识分享
08-07 3251
Impala还支持自定义函数（，简称UDF），允许用户根据自己的需求编写自定义的函数，以扩展Impala的功能。下面将介绍如何创建和使用自定义函数。创建自定义函数需要编写一个Java或C++程序，并将其编译成动态链接库（DLL）或共享对象（SO以Java为例，首先需要定义一个类，实现Impala的UDF接口。然后，编写函数逻辑，即实现UDF接口的evaluate方法。示例代码：转存失败重新上传取消importUDF;public。
【IMPALA】函数大全
开染坊的白猫
08-26 1053
数学函数：https://blog.csdn.net/qq_24699959/article/details/80162946
asp中自定义截取字段函数StrLeft()
haiyeer的专栏
11-01 1956
function StrLeft(Str,StrLen)  dim L,T,I,C  if Str="" then    StrLeft=""    exit function  end if  Str=Replace(Replace(Replace(Replace(Str," "," "),""",Chr(34)),">",">"),"<","  L=Len(
impala 的资源管理
qqqq0199181的博客
01-15 4205
Admission control 是impala的一个功能，它的作用是给SQL查询加限制，防止集群繁忙的时候资源使用到达峰值或者内存溢出。Admission control为查询设置并发上限以及内存使用限制。在限制之外的查询将会进入等待队列，正在执行的查询结束之后，队列中的查询才会启动。 在2.5及2.5以上的版本中，可以为每个队列设置限制，而不是只能为全局设置限制。通过这种方式可以在稳定的负载...
Impala String函数大全
热门推荐
柯西柯西Cauchy
04-13 4万+
Impala字符串函数 Impala中字符串函数主要应用于 varchar、char、string类型，如果把varchar或者char类型的值传递给字符串函数，返回将是一个string类型的值 函数列表 base64encode(string str) base64decode(string str) 加密和解密,返回值为4字节的倍数，可以用来存储特殊字符串 --将h...
impala:阿帕奇·黑帕拉（Apache Impala）
04-07
广泛的分析SQL支持，包括窗口函数和子查询。 使用即时生成代码，以生成专门针对每个查询的快速闪电代码。 支持最常用的Hadoop文件格式，包括和 。 支持行业标准的安全协议，包括Kerberos，LDAP和TLS。 Apache许可的...
Impala：针对Hadoop实时查询； Apache Impala的镜像
02-19
广泛的分析SQL支持，包括窗口函数和子查询。 使用即时生成代码，以生成针对每个查询专门定制的CPU效率高的代码。 支持最常用的Hadoop文件格式，包括项目。 Apache许可的100％开源。 有关Impala的更多信息 要了解...
PHP获取真实IP函数和中文截取函数
01-07
以下是一个常用的PHP函数，用于获取用户的真实IP： ```php function getRealIp() { $ip = ''; if (!empty($_SERVER['HTTP_CLIENT_IP'])) { // 客户端IP $ip = $_SERVER['HTTP_CLIENT_IP']; } elseif (!empty($_...
大数据 虚拟机 Linux VM复习题库:题库包括了60题选择题、10题填空题、10题判断题、2题简答题，助你度过期末复习
07-02
常用`INSERT OVERWRITE`插入数据，`LOAD DATA`加载数据，根据场景选择合适方式。 12. **Hive SQL JOIN关键词**： 支持INNER JOIN、LEFT JOIN、RIGHT JOIN、OUTER JOIN、CROSS JOIN等多种JOIN类型。 13. **Hive...
14、大数据(3题)1
08-03
在大数据环境中，常用的工具有Hive和Impala。Hive是基于Hadoop的数据仓库工具，它提供了SQL接口来处理大数据，适合离线分析。而Impala是基于Hive的实时分析引擎，能够提供更快的查询速度，支持实时或者近实时的数据...
impala sql语法
weixin_45237107的博客
08-30 1612
impala sql语法
[数据库基础]-- 字符串截取函数substr、substring以及 case when函数使用
欢迎来到我的博客，一起探索代码里的世界！
03-01 1万+
使用说明： 1、使用： substr使用范围：oracle、mysql、sqlserver substring使用范围：mysql、sqlserver   2、举例： 现有表：t_user  name、age字段 查询需求：如果name字段中的第5个字符有“张”，那么替换为“张三”、如果有“李”，那么替换为“李四” 语句： select case substring(name,5...
impala常用时间函数大全（超详细）
hua_ge_zui_liang的博客
09-29 1万+
本文目录时间函数 时间函数 当前时间戳 now() current_timestamp() 当前时间戳相对于 linux epoch 的秒数 unix_timestamp() , 不带参数, 则返回 '1970-01-01 00:00:00' UTC 到现在的秒数 转换到相对于 linux epoch 的秒数 unix_timestamp(now()+ interval 3 days), 如果传入 timestamp 参数, 返回该时间戳相对于 linux epoch 的秒数 unix_timestam
Impala的分析函数(基于impala2.12)
jmx_bigdata的博客
03-03 4421
分析函数又称为开窗函数，是一种特殊的内置函数。分析函数不会仅限于对每个group by的分组产生一个结果，它操作的是一个窗口(window),输入的行是排序和分组的，可以通过over()语句使用灵活的条件。impala的分析函数是从impala2.0.0开始添加的。分析函数经常被用于金融和科学领域，用来分析趋势、离群点以及大数据集的分桶分析。 1.over从句 当调用分析函数时，比如LEAD(...
impala正弦函数
04-10
Impala是一种开源的分布式SQL查询引擎，用于在大规模数据集上进行高性能的交互式分析。Impala支持许多内置函数，包括正弦函数。 Impala的正弦函数用于计算给定角度的正弦值。它采用一个参数，即角度，并返回一个介于-1和1之间的值。Impala中的正弦函数使用标准的三角函数定义来计算正弦值。 以下是Impala中正弦函数的示例用法： ``` SELECT SIN(0) AS sin_value; ``` 这将返回0，因为0度的正弦值为0。 ``` SELECT SIN(90) AS sin_value; ``` 这将返回1，因为90度的正弦值为1。 ``` SELECT SIN(45) AS sin_value; ``` 这将返回0.70710678118，因为45度的正弦值约为0.707。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值