ZooKeeper 避坑实践:SnapCount 设置不合理导致磁盘爆满,服务不可用

本文详细分析了ZooKeeper因SnapCount设置不合理导致磁盘满载的问题,探讨了数据文件生成机制、关键参数如snapCount和autopurge配置,提出了解决磁盘问题的最佳实践,包括调整参数以平衡快照频率和服务恢复时间,以及MSE ZooKeeper提供的额外保障措施。
摘要由CSDN通过智能技术生成

背景

在 ZooKeeper 的日常使用过程中,一个令人头疼的问题就是节点的磁盘容量问题,如果由于过大的 TPS 或者不适当的清理策略会导致集群中数据文件,日志文件的堆积,最终导致磁盘爆满,Server 宕机。近期就在线上发现某用户的一个集群在一个时间段内的 TPS 暴增。

1.png

导致磁盘中 snapshot 和 transaction log 文件非常多。

2.png

最终导致磁盘被写满,节点服务不可用。

3.png

本篇通过深入解读 ZooKeeper 数据文件生成机制,以及 ZooKeeper 中和数据文件生成相关的参数,探究一下 解决 ZooKeeper 磁盘问题的最佳实践。

分析

ZooKeeper 中生成的数据文件有哪些?

首先我

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值