![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
标签画像系统
文章平均质量分 89
本专栏主要用于记录基于标签画像系统的技术选型与相关场景调优
weixin_42754420
这个作者很懒,什么都没留下…
展开
-
【标签画像】标签加工引擎核心流程
关于clickhouse在标签画像系统中的使用原创 2023-09-11 21:54:13 · 123 阅读 · 0 评论 -
【标签画像】ClickHouse的Join调优
例如在对客户进行圈群时,筛选当日女性支付次数超过10次的客户群,则需要join客户和消费明细两张表,但是对于数据量级过亿甚至百亿的消费明细数据表,通过clickhouse做join表聚合查询时他需要把集群表(ck有本地表和集群表之分,普通查询会分发到本地聚合,然后汇总到执行服务)的全量数据读取到内存,从而使ck的内存爆炸(当前只做单表加工优化,集群表见下一篇),所以需要单独加工后统一合并至宽表,虽然宽表多则几百个字段,但是对于ck这种列示存储的OLAP数据库来说不在话下。原创 2023-09-10 18:57:30 · 295 阅读 · 0 评论