ClickHouse常用函数整理

最新推荐文章于 2024-05-15 14:14:04 发布
最新推荐文章于 2024-05-15 14:14:04 发布
阅读量1.1k 收藏 6
点赞数 4
分类专栏： SQL Clickhouse ck 文章标签： clickhouse ck 数据仓库 数据库架构 数据库开发
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43705670/article/details/122625295
版权
SQL 同时被 3 个专栏收录
10 篇文章 0 订阅
订阅专栏
Clickhouse
1 篇文章 0 订阅
订阅专栏
ck
1 篇文章 0 订阅
订阅专栏

ClickHouse常用函数整理

1. 日期类函数

1.1 时间或日期截取函数（to）—— 返回非日期
函数用途举例结果
toYear()取日期或时间日期的年份toYear(toDateTime(‘2018-12-11 11:12:13’)) toYear(toDate(‘2018-12-11’))
toMonth()取日期或时间日期的月份toMonth(toDateTime(‘2018-12-11 11:12:13’)) toMonth(toDate(‘2018-12-11’))返回 12 返回 12
toDayOfMonth()取日期或时间日期的天（1-31）toMonth(toDayOfMonth(‘2018-12-11 11:12:13’)) toMonth(toDayOfMonth(‘2018-12-11’))返回 11 返回 11
toDayOfWeek()取日期或时间日期的星期（星期一为1，星期日为7）。toDayOfWeek(toDateTime(‘2018-12-11 11:12:13’)) toDayOfWeek(toDate(‘2018-12-11’))返回 2 返回 2
toHour()取时间日期的小时toHour(toDateTime(‘2018-12-11 11:12:13’))返回 11
toMinute()取时间日期的分钟toMinute(toDateTime(‘2018-12-11 11:12:13’))返回 12
toSecond()取时间日期的秒toSecond(toDateTime(‘2018-12-11 11:12:13’))返回 13
toMonday()取时间日期最近的周一（返回日期）toMonday(toDate(‘2018-12-11’)) toMonday(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-10 返回 2018-12-10
toTime()将时间日期的日期固定到某一天，保留原始时间toTime(toDateTime(‘2018-12-11 11:12:13’))返回 1970-01-02 11:12:13
1.2 时间或日期截取函数（toStartOf）—— 返回日期
函数用途举例结果
toStartOfMonth()取日期或时间日期的月份的第一天，返回日期toStartOfMonth(toDateTime(‘2018-12-11 11:12:13’)) toStartOfMonth(toDate(‘2018-12-11’))返回 2018-12-01 返回 2018-12-01
toStartOfQuarter()取日期或时间日期的季度的第一天，返回日期toStartOfQuarter(toDateTime(‘2018-12-11 11:12:13’)) toStartOfQuarter(toDate(‘2018-12-11’))返回 2018-10-01 返回 2018-10-01
toStartOfYear()取日期或时间日期的年份的第一天，返回日期toStartOfYear(toDateTime(‘2018-12-11 11:12:13’))toStartOfYear(toDate(‘2018-12-11’))返回 2018-01-01 返回 2018-01-01
toStartOfMinute()截取时间日期到分钟（之后归零），返回日期toStartOfMinute(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 11:12:00
toStartOfFiveMinute()截取时间日期到最近的5的倍数分钟（之后归零），返回日期toStartOfFiveMinute(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 11:10:00
toStartOfFifteenMinutes()截取时间日期到最近的15的倍数分钟（之后归零），返回日期toStartOfFifteenMinutes(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 11:00:00
toStartOfHour()截取时间日期到小时（之后归零），返回日期toStartOfHour(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 11:00:00
toStartOfDay()截取时间日期到天（之后归零），返回日期toStartOfDay(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 00:00:00
timeSlot()将时间日期中，分钟大于等于30的归于30，分钟数小于30的归为00timeSlot(toDateTime(‘2018-12-11 11:33:13’)) timeSlot(toDateTime(‘2018-12-11 11:33:13’))返回 2018-12-11 11:00:00 返回 2018-12-11 11:30:00
1.3 日期或时间日期生成函数
函数用途举例结果
now()生成当前时间日期now()返回 2018-12-13 10:10:12
today()生成今天的日期today()返回 2018-12-13
yesterday()生成昨天的日期yesterday()返回 2018-12-12
1.4 formatDateTime(Time, Format[, Timezone])
函数用途举例
%Cyear divided by 100 and truncated to integer (00-99)20
%dday of the month, zero-padded (01-31)2
%DShort MM/DD/YY date, equivalent to %m/%d/%y01/02/2018
%eday of the month, space-padded ( 1-31)2
%Fshort YYYY-MM-DD date, equivalent to %Y-%m-%d2018/1/2
%Hhour in 24h format (00-23)22
%Ihour in 12h format (01-12)10
%jday of the year (001-366)2
%mmonth as a decimal number (01-12)1
%Mminute (00-59)33
%nnew-line character (’\n’)
%pAM or PM designationPM
%R24-hour HH:MM time, equivalent to %H:%M22:33
%Ssecond (00-59)44
%thorizontal-tab character (’\t’)
%TISO 8601 time format (HH:MM:SS), equivalent to %H:%M:%S22:33:44
%uISO 8601 weekday as number with Monday as 1 (1-7)2
%VISO 8601 week number (01-53)1
%wweekday as a decimal number with Sunday as 0 (0-6)2
%yYear, last two digits (00-99)18
%YYear2018
%%a % sign%

2. 类型转化类函数

2.1 精度保留（非四舍五入）
函数用途举例结果
toDecimal32(‘whdwjfew’,8)将数值型或者含有非数字的字符串进行精度保留toDecimal32(23.12291, 3)toDecimal32(’_23.12291’, 3)
toDecimal64(‘whdwjfew’,8)将数值型或者含有非数字的字符串进行精度保留toDecimal64(23.12291, 3)toDecimal64(’_23.12291’, 3)
toDecimal128(‘whdwjfew’,8)将数值型或者含有非数字的字符串进行精度保留toDecimal128(23.12291, 3)toDecimal128(’_23.12291’, 3)
2.2 字符串转化为整数（非整数的字符串返回0）
函数用途举例结果
toUInt8OrZero()将无符号整数字符型转化为整数型，否则返回0toUInt8OrZero(‘123’) toUInt8OrZero(‘123.12’)返回 123 返回 0
toInt8OrZero()将整数字符型转化为整数型，否则返回0toInt8OrZero(‘123’) toInt8OrZero(’-123’)返回 123 返回 -123
toFloat32OrZero()将数值字符串型转化为数值型，注意：从toFloat32OrZero开始，丢32的没有对应的函数 toFloat32OrZero(‘-123’)toFloat32OrZero(‘123.123’)返回 -123 返回 123.123
2.3 日期与时间日期转化
函数用途举例结果
toDate()将字符型日期转化为日期型toDate(‘2018-12-24’)返回 2018-12-24
toDateTime()将字符型时间日期转化为时间日期型toDateTime(‘2018-12-24 10:10:00’)返回 2018-12-24 10:10:00
toUnixTimestamp()将DateTime转换成Unix时间戳toUnixTimestamp(now())返回 1589618717
2.4 转化为字符型
函数用途举例结果
toString()将数值型、字符型、日期等转化为字符型toString(‘2018-12-24’) toString(‘123’)返回 2018-12-24 返回 123
2.5 查看数据类型
函数用途举例结果
toTypeName()返回数据的类型toTypeName(toString(‘123’)) toTypeName(toDate(‘2018-12-24’))返回 String 返回 Date

3. 字符串操作

3.1 基本字符串操作
函数用途举例结果
empty()判断字符串是空为1，否则为0empty(’’)empty(‘123a’)返回 1返回 0
notEmpty()判断字符串是非空为1，否则为0notEmpty(’’)notEmpty(‘123a’)返回 0返回 1
length()返回字符串的长度length(’’)length(‘123a’)返回 0返回 4
lower()将字符串转为小写lower(‘aBc’)返回 abc
upper()将字符串转为大写upper(‘aBc’)返回 ABC
reverse()将字符串反转reverse(‘abc’)返回 cba
substring(s, offset, length)字符串截取substring(‘123abcABC’, 2, 3)返回 23a
appendTrailingCharIfAbsent(s, c)如果字符串s非空，则将s后追加一个字符c(s最后一个字符与c不同)，否则不处理appendTrailingCharIfAbsent(‘123abc’, ‘b’)appendTrailingCharIfAbsent(‘123abc’, ‘c’)返回 123abcb返回 123abc
3.2 字符串查找
函数用途举例结果
match(haystack,pattern)字符串正则匹配，返回0或1match(‘avhsca’,'vh’)返回 1
extract(haystack,pattern)返回匹配到的第一个子串extract(‘iioomAj12123124OOBJB’, ‘\d+’)返回 12123124
extractAll(haystack,pattern)返回匹配到的所有子串，输出列表extractAll(‘iioomAj12123124OOBJ123B’, ‘\d+’)返回 [12123124,123]
like(haystack,pattern)匹配到的数据返回1，否则返回0like(‘avhsca’,’%vh%’)like(‘avhsca’,’%vabjh%’)返回 1返回 0
notLike(haystack, pattern)与like()函数相反notLike(‘avhsca’,’%vh%’)notLike(‘avhsca’,’%vabjh%’)返回 0返回 1
3.3 字符串替换
函数用途举例结果
replaceOne(haystack,pattern,replacement)替换第一个匹配到的patternreplaceOne(‘asd123cbbj464sd’, ‘sd’, ‘-’)返回 a-123cbbj464sd
replaceAll(haystack,pattern,replacement)替换所有匹配到的patternreplaceOne(‘asd123cbbj464sd’, ‘sd’, ‘-’)返回 a-123cbbj464-
replaceRegexpOne(haystack, pattern, replacement)正则匹配替换第一个匹配到的patternreplaceRegexpOne(‘Hello, World!’, ‘o’, '- ')返回 Hell- , World!
replaceRegexpAll(haystack,pattern,replacement)正则匹配替换所有匹配到的patternreplaceRegexpAll(‘Hello, World!’, ‘^’, 'here: ')replaceRegexpAll(‘Hello, World!’, ‘o’, '-- ')返回 here: Hello, World! 返回 Hell-- , W-- rld!
3.4 字符串分割
函数用途举例结果
splitByChar(separator, s)以单个字符分割字符串splitByChar(’-’, ‘qw-asaf-asfqw-2312-asd’)返回 [‘qw’,‘asaf’,‘asfqw’,‘2312’,‘asd’]
splitByString(separator, s)以单个或多个字符分割字符串splitByString(’-’, ‘qw-asaf-asfqw-2312-asd’)splitByString(’-a’, ‘qw-asaf-asfqw-2312-asd’)返回 [‘qw’,‘asaf’,‘asfqw’,‘2312’,‘asd’]返回 [‘qw’,‘saf’,‘sfqw-2312’,‘sd’]
3.5 字符串拼接
函数用途举例结果
concat(s1,s2,…)将字符串拼接concat(‘123’, ‘abc’, ‘ABC’)返回 123abcABC

4. 条件语句

函数用途举例结果
if(cond,then,else)条件输出 if(1 > 2, ‘正确’, ‘错误’)返回 错误
multiIf(cond_1, then_1, cond_2, then_2…else)多条件输出 multiIf(1 > 2, ‘正确’, 2 < 0, ‘正确’, ‘错误’)返回 错误

5.数学函数

函数用途举例结果
e()返回e的值e()返回 2.718281828459045
pi()返回pi的值pi()返回 3.141592653589793
exp(x)返回e的x次方exp(1)返回 2.718281828459045
exp2(x)返回2的x次方exp2(2)返回 4
exp10(x)返回10的x次方exp10(1)返回 10
log(x)返回log以e为底的对数值log(e())返回 1
log2(x)返回log以2为底的对数值log2(2)返回 1
log10(x)返回log以10为底的对数值log10(100)返回 2
sqrt(x)对x开平方sqrt(4)返回 2
cbrt(x)对x开立方cbrt(8)返回 2
pow(x, y)返回x的y次方pow(2, 3)返回 8

6. 舍入函数

函数用途举例结果
floor(x[, N])向下取数floor(123.883, 1)floor(123.883, -1)返回 123.8返回 120
ceil(x[, N])向上取数ceil(123.883, 1)ceil(123.883, -1)返回 123.9返回 130
round(x[, N])四舍五入round(123.883, 1)round(123.883, -1)返回 123.9返回 120

7. URL操作函数

函数用途举例结果
protocol()返回URL的协议类型protocol(‘http://www.baidu.com.cn’)返回 http
domain()返回URL的域名domain(‘http://www.baidu.com.cn’)返回 www.baidu.com.cn
domainWithoutWWW()返回URL不带www的域名domainWithoutWWW(‘http://www.baidu.com.cn’)返回 baidu.com.cn
topLevelDomain()返回顶级域名topLevelDomain(‘http://www.baidu.com.cn’)返回 cn
firstSignificantSubdomain()Returns the “first significant subdomain”. firstSignificantSubdomain(‘http://www.baidu.com.cn’)返回 baidu
cutToFirstSignificantSubdomain()Returns the part of the domain that includes top-level subdomains up to the “first significant subdomain” (see the explanation above). cutToFirstSignificantSubdomain(‘http://www.baidu.com.cn’)返回 baidu.com.cn
path()返回URL的路径path(‘https://www.baidu.com/s?wd=SQL中的split’)返回 /s
pathFull()返回URL的完整路径pathFull(‘https://www.baidu.com/s?wd=SQL中的split’)返回 /s?wd=SQL%E4%B8%AD%E7%9A%84split
queryString()返回URL的参数（查询字符串）queryString(‘https://www.baidu.com/s?wd=SQL中的split’)返回 wd=SQL%E4%B8%AD%E7%9A%84split
extractURLParameters()以列表的形式返回URL的参数extractURLParameters(‘https://www.baidu.com/s?wd=SQL中的split&ur=qwguq’)返回 [‘wd=SQL%E4%B8%AD%E7%9A%84split’,‘ur=qwguq’]
extractURLParameterNames()以列表的形式返回URL的参数名extractURLParameterNames(‘https://www.baidu.com/s?wd=SQL中的split&ur=qwguq’)返回 [‘wd’,‘ur’]
cutQueryString()返回URL？（参数）前面的内容cutQueryString(‘https://www.baidu.com/s?wd=SQL中的split&ur=qwguq’)返回 https://www.baidu.com/s

8. IP操作函数

函数用途举例结果
IPv4StringToNum(s)将IPV4转为数值，非IPV4的转化为0IPv4StringToNum(‘23.217.198.69’)IPv4StringToNum(‘adwh.124.qwfqw’)
IPv4NumToString(num)将数值转为IPV4IPv4NumToString(400148037)

9. 表操作

9.1 表连接操作
函数用途举例结果
LIMITN查询N条数据，一般跟ORDER BY 连用ORDER BY hit DESC LIMIT 10按照hit列降排取前10
LIMIT N BY Clause 按照Clause列查询N条数据，一般跟ORDER BY 连用SELECT date， domain, count(1) AS hit from db.tb where…GROUP BY date， domain,ORDER BY hit DESC LIMIT 10 BY date取每天TOP10的域名
9.2 字典操作
函数用途举例结果
dictGetString()字典映射dictGetString(‘ck_abc_dic’, ‘ck_value’, tuple(_abc))
枕上~诗书闲
关注
  • 4
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
clickHouse数据库函数的使用
m0_71553626的博客
10-19 1937
clickHouse数据库函数的使用
Clickhouse 时间日期函数
03-19
ClickHouse是一个开源的列式数据库管理系统，它提供了丰富的时间日期函数来处理和操作时间和日期数据。以下是ClickHouse中常用的时间日期函数的简介： 1. toDate(date_expression)：将日期表达式转换为日期类型。...
浅谈ClickHouse聚合和窗口函数
weixin_59801183的博客
11-02 2817
ClickHouse是一个高性能、列式存储的分布式数据库，广泛应用于实时数据分析、大数据处理等场景。在ClickHouse中，聚合函数和窗口函数是两类非常重要的函数，它们可以帮助我们对数据进行汇总、统计和分析。本文将详细介绍ClickHouse中的聚合函数（如count、sum、avg等）和窗口函数（如row_number、rank、dense_rank等）以及其他高级功能进行高级数据分析。
Clickhouse 基础知识 - 函数
最新发布
制心入境
05-15 68
【代码】Clickhouse 基础知识 - 函数。
clickhouse中使用concat()函数无法拼接问题
weixin_39976528的博客
12-30 3394
clickhouse数据库中的concat()函数无法实现拼接的原因是：两个字段的属性不一致
ClickHouse函数整理（详细）
杜海的博客
09-17 2511
1、日期类函数 1.1 时间或日期截取函数（to）—— 返回非日期 函数 用途 举例 结果 toYear() 取日期或时间日期的年份 toYear(toDateTime(‘2018-12-11 11:12:13’)) toYear(toDate(‘2018-12-11’)) 返回 2018 返回 2018 toMonth() 取日期或时间日期的月份 toMonth(toDateTime(‘2018-12-11 11:12:13’)) toMonth
ClickHouse类型转换函数
热门推荐
努力努力再努力！的博客
07-27 2万+
ClickHouse类型转换函数 数值类型转换常见的问题：当你把某个值从一个类型转换为另外一个类型的时候，你需要注意的是这是一个不安全的操作，可能导致数据的丢失。数据丢失一般发生在你将一个大的数据类型转换为小的数据类型的时候，或者你把两个不同的数据类型相互转换的时候。 1. toInt(8|16|32|64) 转换一个输入值为Int类型。这个函数包括： toInt8(expr) — 结果为Int8数据类型。 toInt16(expr) — 结果为Int16数据类型。 toInt32(expr) — 结果为
ClickHouse
dwjlyl
01-09 2226
CK函数，架构
javascript常用函数归纳整理
10-25
主要介绍了javascript常用函数,归纳整理了一些常用的函数便于大家查询参考,需要的朋友可以参考下
Python常用函数整理
01-21
Python常用命令 # 1. 显示所有列 pd.set_option('display.max_columns', None) # 2. 显示所有行 pd.set_option('display.max_rows', None) # 3. 设置value的显示长度为100，默认为50 pd.set_option('max_colwidth',...
常用函数整理
08-21
"常用函数整理"这个主题意味着我们将探讨一个收集了各种常用功能的函数库，这些功能可能涵盖了多个编程领域。 首先，函数库的一个关键优点是代码重用。通过将常用操作封装到函数中，我们可以避免重复工作，提高开发...
sql-函数大全-常用函数整理.doc
03-29
SQL Server 是Microsoft 公司推出的关系型数据库管理系统。具有使用方便可伸缩性好与相关软件集成程度高等优点，可运行在Microsoft Windows ...文档整理了一些常用的SQL函数，在开发中如果可以用上的话可以提高不少效率
Clickhouse 的group_concat 实现
vkingnew 的技术博客
08-01 1万+
MySQL的group_concat 函数经常实用，功能蛮强大的。 MySQL创建表： create table kpi(emp_no varchar(8),performance varchar(32),month varchar(32)); clickhouse 创建表： create table kpi(emp_no varchar(8),performance varchar(32),month varchar(32)) engine=Memory; 分别在MySQL和Clickhous
clickhouse学习笔记-4-函数基础
hjklnmyuiop的博客
04-30 288
一、字符串 转为字符串 toString(13131) 截取 substring('123456', 2, 3); // 234 二、整型 取整——FLOOR toDecimal32('1.42', 2) // 字符串转定点类型 1.42 三、日期 日期的截取 toYear(toDateTime('2018-12-11 11:12:13')) // 2018 toDate('2019-12-15 11:12:13') // 2019
【案例卡】clickhouse：多行数据拼接在一行
积跬步，慕至千里的博客
11-07 3138
groupArray 是 ClickHouse 提供的一种聚合函数，用于在 GROUP BY查询中将行组的某个列的值组合成一个数组。groupArray 函数在分析数据时非常有用，它可以将行组中的数据合并成数组形式，方便后续的处理和分析。
ClickHouse 常用函数
weixin_45568892的博客
02-14 2507
clickhouse工作笔记
【入门篇】ClickHouse 数据类型
日拱一卒无有尽，功不唐捐终入海
09-16 2339
字符串型用于存储文本数据。空值和非空值的使用场景：在某些情况下，数据可能不完整或者不能获取某些字段，可以使用 Nullable 类型存储数据。以下是一篇可能的博文的详细目录，这篇博文将介绍 ClickHouse 的数据类型和表的结构设计。String和FixedString的差别：String类型可以存储任意长度的字符串，而FixedString类型则需要在定义时指定字符串的长度。Tuple和Nested的定义和使用：Tuple类型可以存储一组不同类型的值，而Nested类型则可以存储一组结构相同的数据。
clickhouse 常用json函数
07-27
ClickHouse是一个开源的列式数据库管理系统，它具有高性能和可伸缩性。下面是一些常用的ClickHouse JSON函数： 1. `JSONExtractScalar(json, key1, [key2, ...])`: 从JSON字符串中提取标量值。可以根据给定的键路径获取嵌套的值。 示例：`SELECT JSONExtractScalar('{"name":{"first":"John","last":"Doe"}}', 'name', 'first')` 2. `JSONExtract(json, key1, [key2, ...])`: 从JSON字符串中提取一个JSON对象或数组。可以根据给定的键路径获取嵌套的对象或数组。 示例：`SELECT JSONExtract('{"name":{"first":"John","last":"Doe"}}', 'name')` 3. `JSONHas(json, key1, [key2, ...])`: 检查JSON字符串中是否存在指定的键路径。 示例：`SELECT JSONHas('{"name":{"first":"John","last":"Doe"}}', 'name', 'first')` 4. `JSONLength(json)`: 返回JSON字符串中顶层对象或数组的长度。 示例：`SELECT JSONLength('[1,2,3]')` 5. `JSONType(json)`: 返回JSON字符串的类型，可以是对象、数组、字符串、数字、布尔值或Null。 示例：`SELECT JSONType('{"name":"John"}')` 6. `JSONArray(*args)`: 将给定参数合并为一个JSON数组。 示例：`SELECT JSONArray(1, 'two', true)` 7. `JSONObject(keys, values)`: 将给定的键和值合并为一个JSON对象。 示例：`SELECT JSONObject(['name', 'age'], ['John', 25])` 这只是一些常见的JSON函数，ClickHouse还提供了其他更多的JSON函数，可以根据具体需求查阅ClickHouse文档以获得详细信息。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值