zookeeper3.4.5自动清理日志

最新推荐文章于 2023-09-04 20:07:36 发布
最新推荐文章于 2023-09-04 20:07:36 发布
阅读量689 收藏
点赞数
分类专栏： 大数据与云计算

从3.4.0开始，zookeeper提供了自动清理snapshot和事务日志的功能，

通过配置 autopurge.snapRetainCount 和 autopurge.purgeInterval 这两个参数能够实现定时清理了。

这两个参数都是在zoo.cfg中配置的，将其前面的注释去掉，根据需要修改日志保留个数：

 

autopurge.purgeInterval  这个参数指定了清理频率，单位是小时，需要填写一个1或更大的整数，默认是0，表示不开启自己清理功能。

autopurge.snapRetainCount 这个参数和上面的参数搭配使用，这个参数指定了需要保留的文件数目。默认是保留3个。

 

最后欢迎大家访问我的个人网站：1024s

崔世勋
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【zookeeper】zookeeper 性能优化与配置详解 一些踩坑建议
九师兄
09-15 4799
ZooKeeper的功能特性通过ZooKeeper配置文件来进行控制管理（ zoo.cfg配置文件）。ZooKeeper这样的设计其实是有它自身的原因的。通过前面对ZooKeeper的配置可以看出，对ZooKeeper集群进行配置的时候，它的配置文档是完全相同的（对于集群伪分布模式来说，只有很少的部分是不同的）。这样的配置方使得在部署ZooKeeper服务的时候非常地方便。另外，如果服务器使用不同的配置文件，必须要确保不同配置文件中的服务器列表相匹配。
zookeeper3.4.6配置实现自动清理日志
reblue520的专栏
08-25 640
在使用zookeeper过程中，我们知道，会有dataDir和dataLogDir两个目录，分别用于snapshot和事务日志的输出（默认情况下只有dataDir目录，snapshot和事务日志都保存在这个目录中，正常运行过程中，ZK会不断地把快照数据和事务日志输出到这两个目录，并且如果没有人为操作的话，ZK自己是不会清理这些文件的，需要管理员来清理，这里介绍4种清理日志的方法。在这4种...
dubbo+zookeeper缓存方案
06-03
dubbo+zookeeper缓存方案 dubbo+zookeeper缓存方案dubbo+zookeeper缓存方案dubbo+zookeeper缓存方案
zookeeper的配置文件说明
全菜工程师小辉的博客
06-01 6155
单机配置 zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个tickTime时间就会发送一个心跳。tickTime以毫秒为单位 tickTime=2000 zookeeper监听端口 clientPort=2181 允许连接的客户端数目，0为不限制,通过IP来区分不同的客户端 maxClientCnxns=60 用于存放内存数据库快照的文件夹，同时用于集...
Clickhouse zookeeper 参数优化
vkingnew 的技术博客
04-21 3325
在clickhouse集群中，经常遇到和zookeeper压力相关的问题，可以试试如下方法： 1，建表语句设置use_minimalistic_part_header_in_zookeeper = 1，降低clickhouse在ZK上存储的数据量 2，合理调整zk内存使用上限 3，zoo.cfg配置文件中增加参数：(效果较为明显) MaxSessionTimeout=120000 forceSync=no auto.
Zookeeper源码解析-自动清理事务日志、快照日志功能分析
恐龙弟旺仔的博客
10-20 1291
前言： 自Zookeeper-3.4.0版本开始，就提供了自动清理事务日志和快照日志的功能。 我们可以想一下，如果不清理这些日志会怎样？貌似短期也不会怎样，但是由于这些日志是直接落入当前磁盘的，所以长期以往，磁盘肯定会被占满，导致zookeeper服务无法正常提供。 本文就介绍下这个自动清理日志的功能。 1.配置自动清理 配置的方式很简单，就是在zoo.cfg中添加以下两个配置即可，示例如下： # 保存3个快照，3个日志文件 autopurge.snapRetainCount=3 # 间隔
zookeeper3.4.5.rar
06-02
zookeeper3.4.5.rar
zookeeper3.4.5
01-08
修改过的zookeeper3.4.5.能够在windows系统下运行。
ZOOKEEPER3.4.5
09-22
ZOOKEEPER-3.4.5 服务治理管理，搭配DUBBO分布式部署应用
zookeeper3.4.5:原始解析-源码解析
03-24
zookeeper3.4.5:原始解析
ZooKeeper基础
Things change, roll with them.
10-26 981
镜像用的是ubuntu14，可以替换成我们用的统一基础镜像，后续的升级版本或者新增的配置可以修改Dockerfile和启动脚本。当前用statefulset实现，使用的镜像启动脚本：https://github.com/kow3ns/kubernetes-zookeeper/blob/master/docker/scripts/start-zookeeper。Docker镜像：https://github.com/31z4/zookeeper-docker/tree/master/3.8.0。
zookeeper日志清理
weixin_30561177的博客
10-23 1155
环境　　Red Hat Enterprise Linux Server release 7.3 (Maipo)　　jdk1.7.0_80 zookeeper-3.4.11 一、事务日志和快照日志1.事务日志和快照日志概述配置文件：/home/cluster/zookeeper/conf/zoo.cfg事务日志目录：dataDir=/home/cluster/zookeeper/z...
zookeeper autopurge.purgeInterval没有生效
04-27 1582
检查参数是否写错了 purgeInterval purgeInteval gcr.io/google_samples/k8szk:v1镜像中zkGenConfig.sh文件，配置参数写错了 ...
1.zookeeper 配置文件详解
qq_37776015的博客
11-06 1203
server.id=host:port1:port2 例：server.1=192.168.45.130:2888:3888 id：是一个数字，代表这个zookeeper的id   也是         需要在dataDir所指定的目录下新建一个myid文件内容为id值（echo 1 >> data） host：这个zookeeper的ip地址 port1：选举leader选...
zookeeper 集群操作
快乐的小三菊的博客
07-06 2159
zookeeper 集群操作，包括集群部署、选举机制、客户端命令操作、客户端 API 操作以及客户端向服务端写数据流程等内容
zoo.cfg
chenxiduan4748的博客
07-22 249
# The number of milliseconds of each tick tickTime=2000 # The number of ticks that the initial # synchronization phase can take initLimit=10 # The...
【zookeeper】zookeeper日常运维
margu_168的博客
09-04 1260
本文将分享一些zookeeper在日常使用中一些维护经验。
Zookeeper 在linux下安装：3种安装模式
yiguang_820的博客
03-16 413
目录： 单机安装 下载 上传、解压 修改环境变量 修改配置文件 启动 验证 伪分布式安装 下载 上传、解压 修改环境变量 修改配置文件 启动 验证 全分布式安装（准备3台虚拟机测试） 下载（3台虚拟机同操作） 上传、解压（3台虚拟机同操作） 修改环境变量（3台虚拟机同操作） 修改配置文件 启动 验证 一.单机安装 ...
zookeeper-3.4.5-cdh5.16.2.tar.gz
最新发布
01-20
zookeeper-3.4.5-cdh5.16.2.tar.gz 是一个压缩文件，其中包含的是 ZooKeeper 分布式协调服务的安装包。ZooKeeper 是一个开源的分布式应用程序协调服务，它为分布式系统提供了高度可靠的协调功能。 在这个压缩文件中，"zookeeper-3.4.5" 表示 ZooKeeper 的版本号为 3.4.5，而 "cdh5.16.2" 则表示此版本是基于 Cloudera 发行版 5.16.2。Cloudera 是一个提供基于 Apache Hadoop 的大数据解决方案的公司，他们针对 ZooKeeper 进行了一些修改和适配，以便更好地与其它 Cloudera 软件产品集成。 .tar.gz 是一个常见的压缩格式，通常用于在 Linux 系统中打包和分发文件。使用该格式，文件被打包成一个.tar 文件，然后使用 gzip 压缩算法进行压缩，最终生成一个.tar.gz 文件。 为了使用这个安装包，我们可以按照以下步骤进行操作： 1. 首先，我们需要解压缩.tar.gz 文件。可以使用命令 "tar -zxvf zookeeper-3.4.5-cdh5.16.2.tar.gz" 解压缩该文件。执行完该命令后，会生成一个目录，其中包含了 ZooKeeper 安装包的所有文件。 2. 进入解压后的目录，在其中可以找到 ZooKeeper 的配置文件、示例配置文件和一些其他的脚本文件。 3. 根据自己的需求，修改配置文件。一般需要修改的配置包括 ZooKeeper 服务器集群的地址和端口，以及一些日志和存储文件的路径。 4. 配置完毕后，可以启动 ZooKeeper 服务器。通过运行脚本文件 "bin/zkServer.sh"，以指定的模式（例如单机模式、主从模式等）启动服务器。 5. 一旦服务器启动，您就可以使用 ZooKeeper 客户端与其进行交互了。客户端提供了一组命令，可以帮助您管理分布式系统中的节点和数据。 总之，zookeeper-3.4.5-cdh5.16.2.tar.gz 是一个用于安装和部署 ZooKeeper 的文件压缩包，通过解压缩、配置和启动等步骤，您可以在您的分布式系统中使用 ZooKeeper 提供的协调功能。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值