【用户画像】Clickhouse位图函数实践总结

最新推荐文章于 2024-06-04 08:48:13 发布
最新推荐文章于 2024-06-04 08:48:13 发布
阅读量3k 收藏 27
点赞数 1
分类专栏： OLAP引擎 # clickhouse 文章标签： 大数据 clickhouse bitmap 位图函数 位图bitmap
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41018861/article/details/118611771
版权

文章目录

1 位图概念

说到位图我们就不得不从位算开始，虽然大部分语言都有提供位运算，但是，并没有提供一种类似于位数组的类型，要使用这些位运算，我们只能通过数字类型来实现，比如Java中的int/long等类型。而这些数字类型的数组，我们一般可以称之为“位图”（BitMap）。
位图bitmap 是一种非常常用的结构，在索引，数据压缩等方面有广泛应用。所谓的 bitmap 就是用一个 bit 位来标记某个元素对应的 value， 而 key 即是该元素。由于采用了 bit 为单位来存储数据，因此在存储空间方面，可以大大节省。

2 位图函数

2.1 位图函数作用

位图函数用于对两个位图对象进行计算，对于任何一个 位图函数，它都将返回一个 位图对象，例如and，or，xor，not等等。比如：x y就是位图对象，f就是位图函数，f(x,y)就是位图对象。
在这里插入图片描述

2.2 位图函数构造方法

位图对象有两种构造方法。一个是由聚合函数groupBitmapState构造的，另一个是由Array Object构造的。同时还可以将位图对象转化为数组对象。

我们使用RoaringBitmap实际存储位图对象，当基数小于或等于32时，它使用Set保存。当基数大于32时，它使用RoaringBitmap保存。这也是为什么低基数集的存储更快的原因。

2.3 位图函数的基本分类

在这里插入图片描述

2.4 位图函数基本使用

2.4.1 数据准备

CREATE TABLE test.bit_map
(
    `user_id` UInt64
)
ENGINE = MergeTree
ORDER BY user_id
SETTINGS index_granularity = 8192

数据如下：

┌─user_id─┐
│       1 │
│       2 │
│       3 │
│       4 │
│       5 │
│       6 │
│       7 │
│       8 │
│       9 │
│      10 │
│      11 │
└─────────┘

2.4.2 构造位图

2.4.2.1 groupBitmapState
  • 参数类型： 函数的参数必须为UInt64。
  • 返回值类型 ： AggregateFunction(groupBitmap,UInt64)
  • 使用实例：
SELECT groupBitmapState(toUInt64(user_id)) as a,
       toTypeName(a)
from test.bit_map;

在这里插入图片描述

2.4.2.2 bitmapBuild
  • 参数类型： 无符号整数数组array。
  • 返回值类型： 位图对象AggregateFunction(groupBitmap, UInt64)。
  • 使用实例：
SELECT bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))) AS user_bit_map,
       toTypeName(user_bit_map)
FROM test.bit_map

在这里插入图片描述

2.4.3 位图对象转化为数组对象

2.4.3.1 bitmapToArray(bitmap)
  • 作用： 将位图转换为整数数组。
  • 参数类型： bitmap-位图对象 AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 整数数组
  • 使用实例：
SELECT
    bitmapToArray(groupBitmapState(toUInt64(user_id))) AS user_bit_map,
    toTypeName(user_bit_map)
FROM test.bit_map

在这里插入图片描述

2.4.4 位图对象的属性

2.4.4.1 bitmapContains
  • 语法：
bitmapContains(haystack, needle)
  • 作用： 检查位图是否包含指定元素
  • 参数类型： haystack - 位图对象， AggregateFunction(groupBitmap, UInt64) 。needle - 元素，类型UInt32。
  • 返回值： 返回值为1,0。包含为1，反之为0。本质在这里可以理解为boolean类型，或者枚举类型。
  • 使用实例：
SELECT bitmapContains(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(9))AS user_bit_map,
       toTypeName(user_bit_map)
FROM test.bit_map

在这里插入图片描述

2.4.4.2 bitmapCardinality
  • 语法：
bitmapCardinality(bitmap)
  • 作用： 返回一个UInt64类型的数值，表示位图对象的基数。
  • 参数类型： bitmap – 位图对象， AggregateFunction(groupBitmap, UInt64) 。
  • 返回值： UInt64,可以理解为位图对象数组中元素的个数。
  • 使用实例：
SELECT bitmapCardinality(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id))))) AS user_bit_map,
       toTypeName(user_bit_map)
FROM test.bit_map

在这里插入图片描述

2.4.4.3 bitmapMin
  • 语法：
bitmapMin(bitmap)
  • 作用： 返回位图中的最小值。
  • 参数类型： bitmap – 位图对象， AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回一个UInt64类型的数值，表示位图中的最小值。如果位图为空则返回UINT32_MAX。
  • 使用实例：
SELECT bitmapMin(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id))))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type,
       bitmapMin(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(nan))))) AS user_bit_map_1,
       toTypeName(user_bit_map) AS user_bit_map_1_type
FROM test.bit_map

在这里插入图片描述

2.4.4.4 bitmapMax
  • 作用： 返回位图中的最大值。
  • 语法：
bitmapMax(bitmap)
  • 参数类型： bitmap – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回一个UInt64类型的数值，表示位图中的最大值。如果位图为空则返回0。
  • 使用实例：
SELECT bitmapMax(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id))))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type,
       bitmapMax(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(nan))))) AS user_bit_map_1,
       toTypeName(user_bit_map) AS user_bit_map_1_type
FROM test.bit_map

在这里插入图片描述

2.4.5 位图转换为新位图

2.4.5.1 bitmapSubsetInRange
  • 语法：
bitmapSubsetInRange(bitmap, range_start, range_end)
  • 作用： 返回一个新的子位图。
  • 参数类型： bitmap – 位图对象， AggregateFunction(groupBitmap, UInt64) 。range_start – 范围起始点（含），类型为UInt32。range_end – 范围结束点（不含）,类型UInt32。
  • 返回值类型： 返回一个新的子位图。
  • 使用实例：
SELECT bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.5.2 bitmapSubsetLimit
  • 语法：
bitmapSubsetLimit(bitmap, range_start, limit)
  • 作用： 将位图指定范围（起始点和数目上限）转换为另一个位图
  • 参数： bitmap – 位图对象，AggregateFunction(groupBitmap, UInt64) 。range_start – 范围起始点（含），类型为UInt32。limit – 子位图基数上限，类型为UInt32。
  • 返回值类型： 返回一个新的子位图，AggregateFunction(groupBitmap, UInt64) 。
  • 使用实例：
SELECT bitmapSubsetLimit(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6 位图运算

2.4.6.1 bitmapHasAny
  • 作用： 与hasAny(array，array)类似，判断两个位图对象是包含相同的元素。
  • 语法：
bitmapHasAny(bitmap,bitmap)
  • 参数类型： bitmap – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 如果位图有任何公共元素则返回1，否则返回0。
    对于空位图，返回0。
  • 使用实例：
SELECT bitmapHasAny(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(1),toUInt32(7))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.2 bitmapHasAll
  • 作用： 与hasAll(array，array)类似，判断第一个位图是否包含第二个位图的所有元素。
  • 语法：
bitmapHasAll(bitmap,bitmap)
  • 参数类型： bitmap – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 如果第一个位图包含第二个位图的所有元素，则返回1，否则返回0。如果第二个参数是空位图，则返回1。
  • 使用实例：
SELECT bitmapHasAll(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.3 bitmapAnd 与
  • 作用： 为两个位图对象进行与操作，返回一个新的位图对象。
  • 语法：
bitmapAnd(bitmap1,bitmap2)
  • 参数类型： bitmap1 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。bitmap2 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回一个新的位图对象。类型为AggregateFunction(groupBitmap, UInt64) 。
  • 使用实例：
SELECT bitmapAnd(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.4 bitmapOr 或
  • 作用： 为两个位图对象进行或操作，返回一个新的位图对象
  • 语法：
bitmapOr(bitmap1,bitmap2)
  • 参数类型： bitmap1 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。bitmap2 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回一个新的位图对象。类型为AggregateFunction(groupBitmap, UInt64) 。
  • 使用实例：
SELECT bitmapOr(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.5 bitmapXor 异或
  • 作用： 为两个位图对象进行异或操作，返回一个新的位图对象。
  • 语法：
bitmapXor(bitmap1,bitmap2)
  • 参数类型： bitmap1 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。bitmap2 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回一个新的位图对象。类型为AggregateFunction(groupBitmap, UInt64) 。
  • 使用实例：
SELECT bitmapXor(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.6 bitmapAndnot
  • 作用： 计算两个位图的差异，返回一个新的位图对象。
  • 语法：
bitmapAndnot(bitmap1,bitmap2)
  • 参数类型： bitmap1 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。bitmap2 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回一个新的位图对象。类型为AggregateFunction(groupBitmap, UInt64) 。
  • 使用实例：
SELECT bitmapAndnot(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.7 bitmapAndCardinality
  • 作用： 为两个位图对象进行与操作，返回结果位图的基数。
  • 语法：
bitmapAndCardinality(bitmap1,bitmap2)
  • 参数类型： bitmap1 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。bitmap2 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回结果位图的基数。类型为UInt64。
  • 使用实例：
SELECT bitmapAndCardinality(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.8 bitmapOrCardinality
  • 作用： 为两个位图进行或运算，返回结果位图的基数。
  • 语法：
bitmapOrCardinality(bitmap1,bitmap2)
  • 参数类型： bitmap1 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。bitmap2 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回结果位图的基数。类型为UInt64。
  • 使用实例：
SELECT bitmapOrCardinality(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map
2.4.6.9 bitmapXorCardinality
  • 作用： 为两个位图进行异或运算，返回结果位图的基数。
  • 语法：
bitmapXorCardinality(bitmap1,bitmap2)
  • 参数类型： bitmap1 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。bitmap2 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回结果位图的基数。类型为UInt64。
  • 使用实例：
SELECT bitmapXorCardinality(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.10 bitmapAndnotCardinality
  • 作用： 计算两个位图的差异，返回结果位图的基数。
  • 语法：
bitmapAndnotCardinality(bitmap1,bitmap2)
  • 参数类型： bitmap1 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。bitmap2 – 位图对象，AggregateFunction(groupBitmap, UInt64) 。
  • 返回值类型： 返回结果位图的基数。类型为UInt64。
  • 使用实例：
SELECT bitmapAndnotCardinality(bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(6),toUInt32(10)),bitmapSubsetInRange(bitmapBuild(bitmapToArray(groupBitmapState(toUInt64(user_id)))),toUInt32(7),toUInt32(9))) AS user_bit_map,
       toTypeName(user_bit_map) AS user_bit_map_type
FROM test.bit_map

在这里插入图片描述

2.4.6.11 bitmapTransform
  • 作用： 将位图中的值数组转换为另一个值数组，结果是一个新的位图。
  • 语法：
bitmapTransform(bitmap, from_array, to_array)
  • 参数介绍：
  1. bitmap – 位图对象，类型为AggregateFunction(groupBitmap, UInt64) 。
  2. from_array – 类型为Array(UInt32)。对于范围[0,from_array.size()]中的idx，如果bitmap包含from_array[idx]，则将其替换为to_array[idx]。注意，如果from_array和to_array之间有公共元素，则结果取决于数组排序。
  3. to_array – 类型为Array(UInt32), 它的大小应该与from_array相同。
  • 返回值类型：
    返回结果位图对象。类型为AggregateFunction(groupBitmap, UInt64) 。
  • 使用实例：
SELECT bitmapToArray(bitmapTransform(bitmapBuild([1, 2, 3, 4, 5, 6, 7, 8, 9, 10]), cast([5,999,2] as Array(UInt32)), cast([2,888,20] as Array(UInt32)))) AS res

在这里插入图片描述

位图总结：

通过以上我们了解到位图对象有两种构造方法。其一是由聚合函数groupBitmapState构造的，其二是由Array Object构造的。同时还可以将位图对象转化为数组对象。对于任何一个位图函数，计算结果都将返回一个位图对象。带有Has的判断函数返回的数值是逻辑值0或者1；其中带有Cardinality后缀的函数返回的数值是运算后的结果位图的基数；其他的位图运算返回的是结果位图，例如And，Or，Xor，Andnot等。到此我们关于clickhouse位图的讲解就结束了，希望可以帮到大家。

扫地增
关注
  • 1
    点赞
  • 踩
  • 27
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 3
    评论
专栏目录
ClickHouse 实战：位图 Bitmap 函数
SmartSi
05-19 738
ClickHouse 是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。在处理大规模数据分析时，它提供了一个高性能的解决方案。ClickHouse 提供了一系列用于位图索引和计算的函数，这些功能特别适用于处理大量的分布式聚合。位图通常用于高效地表示一组元素的存在情况，例如，记录用户的行为或者在集合运算中快速确定唯一值等场景。
ClickHouse Bitmap用户画像存储方案性能测试
b379685397的博客
11-15 3499
一、环境准备 机器性配置： 4H8G JDK 1.8 二、测试流程： 1、制造测试数据 造了350个用户标签，用户userId约25亿，从以下几个角度验证计算性能 ┌─ln───────────────────┬─lv───────────┬───────uv─┐ │ 测试 │ 测试1 │ 0 │ │ 手机型号 │ vivo │ 95 │ │ 手机型号 │ 华为...
clickhouse 七（位图函数）
写bug的小哥哥
11-30 5452
位图函数用于对两个位图对象进行计算，对于任何一个位图函数，它都将返回一个位图对象，例如and，or，xor，not等。位图对象有两种构造方法。一个是由聚合函数groupBitmapState构造的，另一个是由Array Object构造的。同时还可以将位图对象转化为数组对象。我们使用RoaringBitmap实际存储位图对象，当基数小于或等于32时，它使用Set保存。当基数大于32时，它使用RoaringBitmap保存。这也是为什么低基数集的存储更快的原因。 1 位图的构建与转化 bitmapBu.
ClickHouse 实现用户画像（标签）系统实践
最新发布
奔跑的蜗牛的博客
06-04 1205
本文介绍一个ClickHouse应用案例—用户画像系统。将从用户画像的需求出发，结合ClickHouse的特点，设计用户画像的系统架构，最终实现用户画像系统。本案例以单机版ClickHouse为基础，ClickHouse超强的单机性能，使得用户画像系统能够轻松承担千万级别的用户画像业务。对于很多中小型企业来说，单机版的ClickHouse已经足以满足业务需求。一个设计良好的ClickHouse表，即使是单机的，也能支撑数以亿计的数据量。
ClickHouse中的 Bitmap
OWMBL的博客
06-25 3330
bitmap在clickhouse中是一种AggregateFunction的数据类型。clickhouse使用RoaringBitmap实际存储位图对象，当基数小于或等于32时，它使用Set保存。当基数大于32时，它使用RoaringBitmap保存。这也是为什么低基数集的存储更快的原因。
clickhouse 在客群和画像中的应用
secret2316352792的博客
06-16 684
clickhouse 基于标签高表的雾化视图在客群和画像中的应用 说明： 注意： 基于ClickHouse标签高表对客群进行画像洞察的画像应用 对客群进行画像洞察，求出客群下面不同的标签对应的客群画像 基于ClickHouse JDBC对BitMap的插入操作 测试 ClickHouse 版本号 21.8.12.29，经测试 在 21.8.12.1 的版本中插入失败。.........
clickhouse之bitmap
普普通通程序猿的博客
08-29 6334
1. bitmap知多少 2. clickhouse中的bitmap函数 3. clickhouse+bitmap的使用场景
clickhouse聚合函数之groupBitmap
鸭梨的博客
01-17 1万+
用途 官方点就是计算基数,直白点就是统计不重复的个数 参数为Uint类型,就是不是负数的整数 返回值为Uint64类型 案例 测试数据 UserID 1 1 2 3 SELECT groupBitmap(UserID) as num FROM t; 结果 num 3 再举个例子,比如我们有用户id uid, string类型,相要统计其个数,则 SELECT groupBitmap(toUInt64(uid)) as num from usertable; +----+ |num | +----+
4. ClickHouse在苏宁用户画像场景的实践_用户画像_clickhouse_
10-02
总结，ClickHouse在苏宁用户画像场景的实践中，以其高性能、低延迟的特点，成为构建和分析用户画像的重要工具。通过深入挖掘用户数据，苏宁能够提供更精准的个性化服务，增强用户粘性和商业价值。同时，面对挑战，...
Spark+ES+ClickHouse 构建DMP用户画像视频教程
03-18
分享一套用户画像视频教程——Spark+ES+ClickHouse 构建DMP用户画像，已完结，共8章。 行业竞争越来越激烈，精细化经营成为各企业取胜的秘籍。用户画像系统作为提供精准用户数据的重要来源，已经成为企业必备的核心...
Spark+ES+ClickHouse 构建DMP用户画像
12-22
在构建大数据分析平台时，"Spark+ES+ClickHouse 构建DMP用户画像"是一个高效且实用的组合。这个系统的核心目标是通过收集、整合和分析用户数据，生成详细的用户画像，以便企业进行精准营销和个性化推荐。下面将详细...
【用户画像】将数据迁移到ClickHouse（源码实现）、位图的介绍（bitmap）、位图在用户分群中的应用、位图的使用
weixin_43923463的博客
11-04 2412
函数arrayJoin宽表转Bitmap表需要行转列，要用arrayJoin把多列数组炸成行。把聚合列的数字值聚合成Bitmap的聚合函数bitmapAnd求两个Bitmap值的交集bitmapOr求两个Bitmap值的并集bitmapXor求两个Bitmap值的差集(异或)把Bitmap转换成数值数组把一列中多个bitmap值进行并集聚合。（连续值）求Bitmap包含的值个数更多其他函数可以参考官网。
用户画像(一)：clickhouse AggregateFunction(groupBitmap, UInt64)
写bug的小哥哥
12-16 2226
1.groupBitmap 用于存储UInt64数值，且自动去重，这对于我们存储uid非常的适合。 2.使用 通过配置宽表，我们可以得出一些基本的画像规则，用来制定一些常用的标签属性，如性别，地理位置，星座等。 --字符型标签 select uid, case when birthday in ('1970-01-01', '1990-03-21', '2000-01-01') then '未知' when birthday >= toDate
clickhouse的函数列表
weixin_57205390的博客
03-03 2303
argMax(arg，val) → 计算最大值的arg值。argMin(arg，val) → 计算最小值的arg值。isNotNull() → 检查参数是否不为 NULL，为NULL返回0，否则1。NullIf() → 如果参数相等，返回NULL,参数不相等，返回第一个值。isNull() → 检查参数是否为NULL ，为NULL返回1，否则0。ifNull() → 如果第一个参数为NULL，则返回第二个参数的值。toTime() → 将时间日期的日期固定到某一天，保留原始时间。
Clickhouse 时间日期函数
yueyue__的博客
09-06 1783
Clickhouse 时间日期函数 注：所有的时间日期函数都可以在第二个可选参数中接受时区参数。示例：Asia / Yekaterinburg。在这种情况下，它们使用指定的时区而不是本地（默认）时区。 SELECT toDateTime('2016-06-15 23:00:00') AS time, toDate(time) AS date_local, toDate(time, 'Asia/Yekaterinburg') AS date
ClickHouse 创建数据库建表视图字典 SQL
Ajekseg的博客
07-30 2864
本节介绍ClickHouse中进行数据库、表结构的定义和管理。
clickhouse-位图函数
weixin_41794750的博客
10-22 466
位图函数总结 位图函数构造方法 由聚合函数groupBitmapState 由 Array object 构造的 groupBitmapState 参数类型: 函数的参数必须为UInt64 返回值类型：AggregateFunction(groupBitmap,UInt64) 示例： select groupBitmapState(uid) as user_bit,toTypeName(user_bit) from ycsb_test.users_online group by date; bi
clickhouse数据库中使用map、json和array的用法
热门推荐
liaomingwu的专栏
08-19 1万+
在定义表的字段类型的时候，可以指定map类型，在clickhouse中json数据的存储是通过map类型来实现的。clickhouse还支持数组类型。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

扫地增

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值