Clickhouse中使用Bitmap表

最新推荐文章于 2024-12-26 11:13:15 发布

神龙龙

最新推荐文章于 2024-12-26 11:13:15 发布

阅读量2.7k

点赞数 2

分类专栏：大数据文章标签： bitmap

本文链接：https://blog.csdn.net/qq_43597431/article/details/118575784

版权

这篇博客介绍了如何在Clickhouse中创建和使用Bitmap表。通过AggregatingMergeTree引擎，利用AggregateFunction(groupBitmap, UInt64)来处理Bitmap字段。文章详细阐述了数据转换过程，包括将宽表数据保存、字段组合、使用arrayJoin操作，以及如何用groupBitmapState进行聚合，最终将结果插入Bitmap表。虽然Bitmap的结构无法直接显示，但它在聚合用户ID方面非常有效。" 138458357,19462164,HTML+JS实现贪吃蛇游戏教程,"['HTML', 'JavaScript', '前端框架']

摘要由CSDN通过智能技术生成

建表

create table user_tag_merge 
(   uid UInt64,
	gender String,
	agegroup String,
	favor String
)engine=MergeTree()
order by (uid);

准备数据

insert into user_tag_merge values(1,'M','90后','sm');
insert into user_tag_merge values(2,'M','70后','sj');
insert into user_tag_merge values(3,'M','90后','ms');
insert into user_tag_merge values(4,'F','80后','sj');
insert into user_tag_merge values(5,'F','90后','ms');

Bitmap表

create table user_tag_value_string
 ( 
    tag_code String,
	tag_value String ,
	us AggregateFunction(groupBitmap,UInt64)
)engine=AggregatingMergeTree()
 partition by  (tag_code) 
 order by (tag_value);