【Clickhouse】生成环境运行一段时间后不合并分区了的解决过程

1、前言

程序运行一段时间后,突然发现不合并分区了。查看服务日志(/var/log/clickhouse-server/clickhouse-server.log)
看到有大量类似如下的日志:
在这里插入图片描述

2、解决过程

看日志的提示,大概是没有足够的线程去合并分区了。
网上找了一遍,找到了一个参数文章
ClickHouse的MergeTree 参数调整01
调整了两个参数:
background_pool_size,number_of_free_entries_in_pool_to_execute_mutation
重启完后,又可以合并分区了。可运行了一段时间后又出现不合并分区的情况了。

没办法,继续看日志。后面发现有大量删除表分区的的日志。好吧,看看这个表的存储结构,一看吓一跳,好多的分区。再看更是恐怖,一个分区只有一条数据。

原来是一个同事写的flink程序消费数据,来一条数据写一条导致clickhouse后台在不断的合并分区导致。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 2
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值