ClickHouse函数整理

最新推荐文章于 2024-07-04 10:12:03 发布
最新推荐文章于 2024-07-04 10:12:03 发布
阅读量1k 收藏 4
点赞数 2
文章标签： p2p linq 网络协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cxs812760493/article/details/119144214
版权

1. 日期类函数

1.1 时间或日期截取函数（to）—— 返回非日期

函数用途举例结果
toYear()取日期或时间日期的年份toYear(toDateTime(‘2018-12-11 11:12:13’)) toYear(toDate(‘2018-12-11’))返回 2018 返回 2018
toMonth()取日期或时间日期的月份toMonth(toDateTime(‘2018-12-11 11:12:13’)) toMonth(toDate(‘2018-12-11’))返回 12 返回 12
toDayOfMonth()取日期或时间日期的天（1-31）toMonth(toDayOfMonth(‘2018-12-11 11:12:13’)) toMonth(toDayOfMonth(‘2018-12-11’))返回 11 返回 11
toDayOfWeek()取日期或时间日期的星期（星期一为1，星期日为7）。toDayOfWeek(toDateTime(‘2018-12-11 11:12:13’)) toDayOfWeek(toDate(‘2018-12-11’))返回 2 返回 2
toHour()取时间日期的小时toHour(toDateTime(‘2018-12-11 11:12:13’))返回 11
toMinute()取时间日期的分钟toMinute(toDateTime(‘2018-12-11 11:12:13’))返回 12
toSecond()取时间日期的秒toSecond(toDateTime(‘2018-12-11 11:12:13’))返回 13
toMonday()取时间日期最近的周一（返回日期）toMonday(toDate(‘2018-12-11’)) toMonday(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-10 返回 2018-12-10
toTime()将时间日期的日期固定到某一天，保留原始时间toTime(toDateTime(‘2018-12-11 11:12:13’))返回 1970-01-02 11:12:13

1.2 时间或日期截取函数（toStartOf）—— 返回日期

函数用途举例结果
toStartOfMonth()取日期或时间日期的月份的第一天，返回日期toStartOfMonth(toDateTime(‘2018-12-11 11:12:13’)) toStartOfMonth(toDate(‘2018-12-11’))返回 2018-12-01 返回 2018-12-01
toStartOfQuarter()取日期或时间日期的季度的第一天，返回日期toStartOfQuarter(toDateTime(‘2018-12-11 11:12:13’)) toStartOfQuarter(toDate(‘2018-12-11’))返回 2018-10-01 返回 2018-10-01
toStartOfYear()取日期或时间日期的年份的第一天，返回日期toStartOfYear(toDateTime(‘2018-12-11 11:12:13’))toStartOfYear(toDate(‘2018-12-11’))返回 2018-01-01 返回 2018-01-01
toStartOfMinute()截取时间日期到分钟（之后归零），返回日期toStartOfMinute(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 11:12:00
toStartOfFiveMinute()截取时间日期到最近的5的倍数分钟（之后归零），返回日期toStartOfFiveMinute(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 11:10:00
toStartOfFifteenMinutes()截取时间日期到最近的15的倍数分钟（之后归零），返回日期toStartOfFifteenMinutes(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 11:00:00
toStartOfHour()截取时间日期到小时（之后归零），返回日期toStartOfHour(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 11:00:00
toStartOfDay()截取时间日期到天（之后归零），返回日期toStartOfDay(toDateTime(‘2018-12-11 11:12:13’))返回 2018-12-11 00:00:00
timeSlot()将时间日期中，分钟大于等于30的归于30，分钟数小于30的归为00timeSlot(toDateTime(‘2018-12-11 11:33:13’)) timeSlot(toDateTime(‘2018-12-11 11:33:13’))返回 2018-12-11 11:00:00 返回 2018-12-11 11:30:00

1.3 日期或时间日期生成函数

函数用途举例结果
now()生成当前时间日期now()返回 2018-12-13 10:10:12
today()生成今天的日期today()返回 2018-12-13
yesterday()生成昨天的日期yesterday()返回 2018-12-12

1.4 formatDateTime(Time, Format[, Timezone])

Function formats a Time according given Format string. N.B.: Format is a constant expression, e.g. you can not have multiple formats for single result column.

Supported modifiers for Format: ("Example" column shows formatting result for time 2018-01-02 22:33:44)

ModifierDescriptionExample
%Cyear divided by 100 and truncated to integer (00-99)20
%dday of the month, zero-padded (01-31)2
%DShort MM/DD/YY date, equivalent to %m/%d/%y01/02/2018
%eday of the month, space-padded ( 1-31)2
%Fshort YYYY-MM-DD date, equivalent to %Y-%m-%d2018/1/2
%Hhour in 24h format (00-23)22
%Ihour in 12h format (01-12)10
%jday of the year (001-366)2
%mmonth as a decimal number (01-12)1
%Mminute (00-59)33
%nnew-line character ('\n')
%pAM or PM designationPM
%R24-hour HH:MM time, equivalent to %H:%M22:33
%Ssecond (00-59)44
%thorizontal-tab character ('\t')
%TISO 8601 time format (HH:MM:SS), equivalent to %H:%M:%S22:33:44
%uISO 8601 weekday as number with Monday as 1 (1-7)2
%VISO 8601 week number (01-53)1
%wweekday as a decimal number with Sunday as 0 (0-6)2
%yYear, last two digits (00-99)18
%YYear2018
%%a % sign%

附相关文档：
parseDateTimeBestEffort
将数字类型参数解析为Date或DateTime类型。 与toDate和toDateTime不同，parseDateTimeBestEffort可以进行更复杂的日期格式。 有关详细信息，请参阅链接：复杂日期格式。

parseDateTimeBestEffortOrNull
与parseDateTimeBestEffort相同，但它遇到无法处理的日期格式时返回null。

parseDateTimeBestEffortOrZero
与parseDateTimeBestEffort相同，但它遇到无法处理的日期格式时返回零Date或零DateTime。

2. 类型转化类函数

2.1 精度保留（非四舍五入）

函数用途举例结果
toDecimal32(‘whdwjfew’,8)将数值型或者含有非数字的字符串进行精度保留toDecimal32(23.12291, 3)toDecimal32(’_23.12291’, 3)返回 23.122 返回 0.000
toDecimal64(‘whdwjfew’,8)将数值型或者含有非数字的字符串进行精度保留toDecimal64(23.12291, 3) toDecimal64(’_23.12291’, 3)返回 23.122 返回 0.000
toDecimal128(‘whdwjfew’,8)将数值型或者含有非数字的字符串进行精度保留toDecimal128(23.12291, 3) toDecimal128(’_23.12291’, 3)返回 23.122 返回 0.000

2.2 字符串转化为整数（非整数的字符串返回0）

函数用途举例结果
toUInt8OrZero()将无符号整数字符型转化为整数型，否则返回0toUInt8OrZero(‘123’) toUInt8OrZero(‘123.12’)返回 123 返回 0
toInt8OrZero()将整数字符型转化为整数型，否则返回0toInt8OrZero(‘123’) toInt8OrZero(’-123’)返回 123 返回 -123
toFloat32OrZero()将数值字符串型转化为数值型，注意：从toFloat32OrZero开始，丢32的没有对应的函数toFloat32OrZero(‘-123’)toFloat32OrZero(‘123.123’)返回 -123 返回 123.123

2.3 日期与时间日期转化

函数用途举例结果
toDate()将字符型日期转化为日期型toDate(‘2018-12-24’)返回 2018-12-24
toDateTime()将字符型时间日期转化为时间日期型toDateTime(‘2018-12-24 10:10:00’)返回 2018-12-24 10:10:00
toUnixTimestamp()将DateTime转换成Unix时间戳toUnixTimestamp(now())返回 1589618717

2.4 转化为字符型

函数用途举例结果
toString()将数值型、字符型、日期等转化为字符型toString(‘2018-12-24’) toString(‘123’)返回 2018-12-24 返回 123

2.5 查看数据类型

函数用途举例结果
toTypeName()返回数据的类型toTypeName(toString(‘123’)) toTypeName(toDate(‘2018-12-24’))返回 String 返回 Date

3. 字符串操作

3.1 基本字符串操作

函数用途举例结果
empty()判断字符串是空为1，否则为0empty(’’)empty(‘123a’)返回 1返回 0
notEmpty()判断字符串是非空为1，否则为0notEmpty(’’)notEmpty(‘123a’)返回 0返回 1
length()返回字符串的长度length(’’)length(‘123a’)返回 0返回 4
lower()将字符串转为小写lower(‘aBc’)返回 abc
upper()将字符串转为大写upper(‘aBc’)返回 ABC
reverse()将字符串反转reverse(‘abc’)返回 cba
substring(s, offset, length)字符串截取substring(‘123abcABC’, 2, 3)返回 23a
appendTrailingCharIfAbsent(s, c)如果字符串s非空，则将s后追加一个字符c(s最后一个字符与c不同)，否则不处理appendTrailingCharIfAbsent(‘123abc’, ‘b’)appendTrailingCharIfAbsent(‘123abc’, ‘c’)返回 123abcb返回 123abc

3.2 字符串查找

函数用途举例结果
match(haystack,pattern)字符串正则匹配，返回0或1match(‘avhsca’,'vh’)返回 1
extract(haystack,pattern)返回匹配到的第一个子串extract(‘iioomAj12123124OOBJB’, ‘\d+’)返回 12123124
extractAll(haystack,pattern)返回匹配到的所有子串，输出列表extractAll(‘iioomAj12123124OOBJ123B’, ‘\d+’)返回 [12123124,123]
like(haystack,pattern)匹配到的数据返回1，否则返回0like(‘avhsca’,’%vh%’)like(‘avhsca’,’%vabjh%’)返回 1返回 0
notLike(haystack, pattern)与like()函数相反notLike(‘avhsca’,’%vh%’)notLike(‘avhsca’,’%vabjh%’)返回 0返回 1

3.3 字符串替换

函数用途举例结果
replaceOne(haystack,pattern,replacement)替换第一个匹配到的patternreplaceOne(‘asd123cbbj464sd’, ‘sd’, ‘-’)返回 a-123cbbj464sd
replaceAll(haystack,pattern,replacement)替换所有匹配到的patternreplaceOne(‘asd123cbbj464sd’, ‘sd’, ‘-’)返回 a-123cbbj464-
replaceRegexpOne(haystack, pattern, replacement)正则匹配替换第一个匹配到的patternreplaceRegexpOne(‘Hello, World!’, ‘o’, '- ')返回 Hell- , World!
replaceRegexpAll(haystack,pattern,replacement)正则匹配替换所有匹配到的patternreplaceRegexpAll(‘Hello, World!’, ‘^’, 'here: ')replaceRegexpAll(‘Hello, World!’, ‘o’, '-- ')返回 here: Hello, World! 返回 Hell-- , W-- rld!

3.4 字符串分割

函数用途举例结果
splitByChar(separator, s)以单个字符分割字符串splitByChar(’-’, ‘qw-asaf-asfqw-2312-asd’)返回 [‘qw’,‘asaf’,‘asfqw’,‘2312’,‘asd’]
splitByString(separator, s)以单个或多个字符分割字符串splitByString(’-’, ‘qw-asaf-asfqw-2312-asd’)splitByString(’-a’, ‘qw-asaf-asfqw-2312-asd’)返回 [‘qw’,‘asaf’,‘asfqw’,‘2312’,‘asd’]返回 [‘qw’,‘saf’,‘sfqw-2312’,‘sd’]

3.5 字符串拼接

函数用途举例结果
concat(s1,s2,…)将字符串拼接concat(‘123’, ‘abc’, ‘ABC’)返回 123abcABC

4. 条件语句

函数用途举例结果
if(cond,then,else)条件输出if(1 > 2, ‘正确’, ‘错误’)返回 错误
multiIf(cond_1, then_1, cond_2, then_2…else)多条件输出multiIf(1 > 2, ‘正确’, 2 < 0, ‘正确’, ‘错误’)返回 错误

5.数学函数

函数用途举例结果
e()返回e的值e()返回 2.718281828459045
pi()返回pi的值pi()返回 3.141592653589793
exp(x)返回e的x次方exp(1)返回 2.718281828459045
exp2(x)返回2的x次方exp2(2)返回 4
exp10(x)返回10的x次方exp10(1)返回 10
log(x)返回log以e为底的对数值log(e())返回 1
log2(x)返回log以2为底的对数值log2(2)返回 1
log10(x)返回log以10为底的对数值log10(100)返回 2
sqrt(x)对x开平方sqrt(4)返回 2
cbrt(x)对x开立方cbrt(8)返回 2
pow(x, y)返回x的y次方pow(2, 3)返回 8

6. 舍入函数

函数用途举例结果
floor(x[, N])向下取数floor(123.883, 1)floor(123.883, -1)返回 123.8返回 120
ceil(x[, N])向上取数ceil(123.883, 1)ceil(123.883, -1)返回 123.9返回 130
round(x[, N])四舍五入round(123.883, 1)round(123.883, -1)返回 123.9返回 120

7. URL操作函数

函数用途举例结果
protocol()返回URL的协议类型protocol(‘http://www.baidu.com.cn’)返回 http
domain()返回URL的域名domain(‘http://www.baidu.com.cn’)返回 www.baidu.com.cn
domainWithoutWWW()返回URL不带www的域名domainWithoutWWW(‘http://www.baidu.com.cn’)返回 baidu.com.cn
topLevelDomain()返回顶级域名topLevelDomain(‘http://www.baidu.com.cn’)返回 cn
firstSignificantSubdomain()Returns the “first significant subdomain”.firstSignificantSubdomain(‘http://www.baidu.com.cn’)返回 baidu
cutToFirstSignificantSubdomain()Returns the part of the domain that includes top-level subdomains up to the “first significant subdomain” (see the explanation above).cutToFirstSignificantSubdomain(‘http://www.baidu.com.cn’)返回 baidu.com.cn
path()返回URL的路径path(‘https://www.baidu.com/s?wd=SQL中的split’)返回 /s
pathFull()返回URL的完整路径pathFull(‘https://www.baidu.com/s?wd=SQL中的split’)返回 /s?wd=SQL%E4%B8%AD%E7%9A%84split
queryString()返回URL的参数（查询字符串）queryString(‘https://www.baidu.com/s?wd=SQL中的split’)返回 wd=SQL%E4%B8%AD%E7%9A%84split
extractURLParameters()以列表的形式返回URL的参数extractURLParameters(‘https://www.baidu.com/s?wd=SQL中的split&ur=qwguq’)返回 [‘wd=SQL%E4%B8%AD%E7%9A%84split’,‘ur=qwguq’]
extractURLParameterNames()以列表的形式返回URL的参数名extractURLParameterNames(‘https://www.baidu.com/s?wd=SQL中的split&ur=qwguq’)返回 [‘wd’,‘ur’]
cutQueryString()返回URL？（参数）前面的内容cutQueryString(‘https://www.baidu.com/s?wd=SQL中的split&ur=qwguq’)返回 百度安全验证

8. IP操作函数

函数用途举例
IPv4StringToNum(s)将IPV4转为数值，非IPV4的转化为0IPv4StringToNum(‘23.217.198.69’)
IPv4StringToNum(‘adwh.124.qwfqw’)
IPv4NumToString(num)将数值转为IPV4IPv4NumToString(400148037)

9. 表操作

9.1 表连接操作

函数用途举例结果
LIMITN查询N条数据，一般跟ORDER BY 连用ORDER BY hit DESC LIMIT 10按照hit列降排取前10
LIMIT N BY Clause按照Clause列查询N条数据，一般跟ORDER BY 连用SELECT date， domain, count(1) AS hit from db.tb where…GROUP BY date， domain,ORDER BY hit DESC LIMIT 10 BY date取每天TOP10的域名

9.2 字典操作

函数用途举例结果
dictGetString()字典映射dictGetString(‘ck_abc_dic’, ‘ck_value’, tuple(_abc))

10. 参考来源

ClickHouse函数整理（详细）_思过留痕-CSDN博客_clickhouse 函数

ClickHouse常用函数整理 - 莫测Jack - 博客园

cxscode
关注
  • 2
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
使用ClickHouse JDBC官方驱动，踩坑无数
lisu061714112的专栏
11-28 1万+
这个问题我在网上查原因说是由于Zookeeper压力过大，表变成只读状态，导致ClickHouse插入数据失败。写入数据频率过高。Zookeeper中的集群节点挂掉。而我们项目出现这个问题的原因是第一个：写入数据频率过高。但是在网上搜资料的过程中，我又发现了另外一个问题：我们项目用了JDBC驱动，但ClickHouse官方并不推荐。。证实了官网确实不建议使用驱动：而应该改成驱动，并且推荐使用0.3.2以上的版本：于是，后面几天开始了ClickHouse的JDBC驱动升级之旅。
clickhouse复杂时间格式转换
Sojer的读书笔记
03-12 1万+
1、如果只用toDateTime，你需要拼接成一个完全按照YYYY-MM hh:mm:ss格式的字符串给它，否则，它会当你是一个从1970年偏移的毫秒去转换 SELECT 20191231235959 as expire_date, toDateTime(20191231235959), concat(toString(floor(20191231235959/10000000000)), '-...
Clickhouse常用函数总结
晓晓的天空
03-02 3920
Clickhouse常用函数总结
二百四十三、ClickHouse——截取ClickHouse表中时间戳字段的时分秒部分
最新发布
tiantang2renjian的博客
07-04 655
截取ClickHouse表中时间戳字段的时分秒部分
ClickHouse函数整理（详细）
杜海的博客
09-17 2571
1、日期类函数 1.1 时间或日期截取函数（to）—— 返回非日期 函数 用途 举例 结果 toYear() 取日期或时间日期的年份 toYear(toDateTime(‘2018-12-11 11:12:13’)) toYear(toDate(‘2018-12-11’)) 返回 2018 返回 2018 toMonth() 取日期或时间日期的月份 toMonth(toDateTime(‘2018-12-11 11:12:13’)) toMonth
ClickHouse 常用函数
weixin_45568892的博客
02-14 2623
clickhouse工作笔记
【数据库】clickHouse常用函数
开发随笔-猫咪酱
01-20 6599
官方文档 时间日期函数 | ClickHouse文档 比较好的总结 ClickHouse常用转换函数整理_从未完美过的博客-CSDN博客_clickhouse 整型转字符串
Python基础函数使用知识
confusingggg的博客
10-03 701
1.Python中ASCII码的数字和字符的转换 将ASCII字符转换为对应的数值即‘a’–>65，使用ord函数,ord(‘a’) 使用chr函数，将数值转换为对应的ASCII字符，chr(65)。 2.Python中字符和数字的转换 将字符转为数字类型，使用eval()。如:eval(“123”)等价于数字123。 将数值转为字符类型，使用str()。如:str(123)等价于字符"123"。 特别提醒：数值类型使用eval()会报错，如:eval(123),这是错误的， 同理，str()也是如此
ClickHouse整理
hiddpy的博客
04-11 1187
1、什么是ClickHouse？ ClickHouse是一个用于联机分析（OLAP）的列式数据库管理系统（DBMS）。 在传统的行式数据库（如mysql）系统中，数据按如下顺序存储： Row WatchID JavaEnable Title GoodEvent EventTime #0 89354350662 1 Investor Relations 1 2016-05-18 05:19:20 #1 90329509958 0 Contact us 1 2016-05-18 08:10:
Clickhouse学习整理
Foools的博客
03-23 1827
前言 吃水不忘挖井人，我看的视频课：https://www.bilibili.com/video/BV1Yh411z7os?spm_id_from=333.337.search-card.all.click 我看的参考书是下面这本，整体介绍很全面，但是不用全都读，需要的地方看一看就好，有几章废话很多…但是整体质量不错 Clickhouse学习笔记 clickhouse：列式存储数据库，C++编写，主要用于在线分析处理查询（OLAP），支持SQL，多主架构（客户端访问任何一个节点效果相同） 适合的场景：大体
ClickHouse的SQL函数及Update、Delete操作
胜利的曙光的博客
10-09 3463
ClickHouse的SQL中常用函数整理及update、delete操作使用。
Clickhouse 日期时间 格式转换
热门推荐
vkingnew 的技术博客
07-27 5万+
中文 和秒的计量 英文缩写 英文全称 毫秒 0.001s ms millisecond 微妙 0.000 001s us microsecond 纳秒 0.000 000 001s ns nanosecond Clickhouse最多只支持到纳秒，多数情况下只需要计算到微妙级别的即可。 Clickhouse> select now() dt,now64(3) ms,now64(6) us,now64(9)...
clickhouse（十、 特殊函数应用 ）
yyoc97的专栏
07-23 3829
文章目录分组取每组前n条分组、汇总同时计算表重命名 分组取每组前n条 数据分析分组展示N行想必大家都不陌生，clickhouse也很方便的提供了相关的查询语法：LIMIT n BY express，我们以系统表为例，用到的属性有数据库名、表名、表大小。 -- 数据库分组取每个库下最大的三个表 SELECT database, table, formatReadableSize(sum(data_compressed_bytes)) AS bytes FROM system.parts GR
ClickHouse 根据时间粒度进行实时时间范围查询，绘制点位曲线图
qq_51058430的博客
07-22 2292
ClickHouse 根据时间粒度进行实时时间范围查询，绘制点位曲线图
clickhouse 数据类型转换
weixin_38424594的博客
03-17 2万+
1. 数值/日期类转换 1.1 常规类型转换 1.2 -OrZero系列 1.3 -OrNull系列 2. 字符串转换 3. 通用的转换函数CAST(x, t) 4. 时间相关转换 1. 数值/日期类转换 1.1 常规类型转换 大类 细类 描述 toInt(8|16|32|64) toInt8(expr) 转换为有符号的整数，转换向零舍入（截断数字的小数位）。nan和inf未定义。 toInt16(expr) toInt32(expr) t.
clickhouse查询数据补全
杜海的博客
10-15 3703
ClickHouse数据查询:https://cookcode.blog.csdn.net/article/details/108886972 上面文章中写了一些基本的clickhouse的查询，但是如果数据查询补全的话，有一个查询没有教怎么用，这篇文章主要是讲： [WITH FILL] [FROM expr] [TO expr] [STEP expr] 这一段的使用方式 1.正常查询数据为 SELECT metric, toStartOfInterval(timesta...
CLICKHOUSE 的时间函数
期待着的博客
05-11 1717
本月第一天 SELECT toStartOfMonth(toDate('2022-05-10')) 加一天 addDays(toDate('2022-05-10'),1) yyyymmdd 转yyyy-mm-dd 20220501 转2022-05-10 toDate(parseDateTimeBestEffort('20220510')) 本年第一天 toStartOfYear(date('2022-05-10'))
clickhouse函数大全
05-26
下面是 ClickHouse 的常用函数大全： 1. 数学函数 - abs(x)：返回 x 的绝对值。 - ceil(x)：返回不小于 x 的最小整数。 - floor(x)：返回不大于 x 的最大整数。 - exp(x)：返回 e 的 x 次方。 - log(x)：返回 x 的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值