最新Zookeeper3

do not use /tmp for storage, /tmp here is just

example sakes.

dataDir=/data01/zookeeper-3.6.2/dataDir
dataLogDir=/data01/zookeeper-3.6.2/dataLogDir
forceSync=no

the port at which the clients will connect

clientPort=2181
server.1=dn01:2888:3888
server.2=dn02:2888:3888
server.3=dn03:2888:3888

the maximum number of client connections.

increase this if you need to handle more clients

#maxClientCnxns=60

Be sure to read the maintenance section of the

administrator guide before turning on autopurge.

http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance

The number of snapshots to retain in dataDir

#autopurge.snapRetainCount=3

Purge task interval in hours

Set to “0” to disable auto purge feature

#autopurge.purgeInterval=1

Metrics Providers

https://prometheus.io Metrics Exporter

#metricsProvider.className=org.apache.zookeeper.metrics.prometheus.PrometheusMetricsProvider
#metricsProvider.httpPort=7000
#metricsProvider.exportJvmInfo=true
metricsProvider.className=org.apache.zookeeper.metrics.prometheus.PrometheusMetricsProvider
#暴露给promethues的监控端口
metricsProvider.httpPort=7000
metricsProvider.exportJvmInfo=true
admin.enableServer=true
#暴露给四字命令如mntr等的监控端口,3.5.0以上版本支持
admin.serverPort=8080


部分注释:



tickTime:ZK中的一个时间单元。ZK中所有时间都是以这个时间单元为基础,进行整数倍配置的。例如,session的最小超时时间是2*tickTime

initLimit:Follower在启动过程中,会从Leader同步所有最新数据,然后确定自己能够对外服务的起始状态。Leader允许F在

initLimit 时间内完成这个工作。通常情况下,我们不用太在意这个参数的设置。如果ZK集群的数据量确实很大了,F在启动的时候,从Leader上同步数据的时间也会相应变长,因此在这种情况下,有必要适当调大这个参数了。

syncLimit:在运行过程中,Leader负责与ZK集群中所有机器进行通信,例如通过一些心跳检测机制,来检测机器的存活状态。如果L发出心跳包在syncLimit之后,还没有从F那里收到响应,那么就认为这个F已经不在线了。注意:不要把这个参数设置得过大,否则可能会掩盖一些问题。

dataDir:存储快照文件snapshot的目录。默认情况下,事务日志也会存储在这里

dataLogDir:事务日志输出目录。

clientPort:客户端连接server的端口,即对外服务端口

server.1=dn01:2888:3888:这里的1是一个数字,与myid文件中的id是一致的。右边可以配置两个端口,第一个端口用于F和L之间的数据同步和其它通信,第二个端口用于Leader选举过程中投票通信。


zookeeper集群是clickhouse实现分布式集群的重要组件,需要提前搭建好。由于clickhouse数据量极大,避免给zookeeper带来太大的压力,最好给clickhouse单独部署一套集群,不要和其他业务公用。


### 7.增加用户权限(如果zk升级,不安装ckman,此步骤可以忽略)


添加admin 一行数据  
 vim /etc/sudoers



Same thing without a password

%wheel ALL=(ALL) NOPASSWD: ALL

admin ALL=(ALL) NOPASSWD: ALL


### 8.拷贝ZK3.4.6元数据信息至ZK3.6.2元数据目录下


日志:/data01/zookeeper-3.4.6/dataLogDir 根据选择性拷贝或者不拷贝即可;  
 主要是拷贝/data01/zookeeper-3.4.6/dataDir目录信息;  
 特别注意myid与server id与老版本保持一致,dataDir与dataLogDir与老版本保持一致。



cp -r /data01/zookeeper-3.4.6/dataDir /data01/zookeeper-3.6.2/dataDir
cp -r /data01/zookeeper-3.4.6/dataLogDir /data01/zookeeper-3.6.2/dataLogDir


## 二 配置环境变量及启动ZK


### 1.配置ZK环境变量


vim /etc/profile



export ZK_HOME=/opt/zookeeper-3.6.2
export PATH= P A T H : PATH: PATH:ZK_HOME/bin


### 2.环境变量生效



source /etc/profile


### 3.进一步验证ZK可用性(如果坚信自己安装无误,此步骤可省略)


命令行模式



[root@dn01 ~]# zkCli.sh


新增目录



[zk: localhost:2181(CONNECTED) 0] create /test
Created /test


获取指定路径上的数据



[zk: localhost:2181(CONNECTED) 0] get /test
null


删除指定路径上的数据



[zk: localhost:2181(CONNECTED) 1] delete /test
[zk: localhost:2181(CONNECTED) 2] get /test
org.apache.zookeeper.KeeperException$NoNodeException: KeeperErrorCode = NoNode for /test


### 4.割接ZK版本(逐一操作升级)


查看zookeeper状态,先从follower开始升级,最后升级leader。



zkServer.sh status


#### 1)停止老版本服务并查看zk状态



cd /opt/zookeeper-3.4.6/bin
./zkServer.sh stop
./zkServer.sh status


#### 2)启动ZK测试新版本服务


手动启动ZooKeeper,确认是否存在任何错误信息。可以在命令行中输入’./zkServer.sh start-foreground’,这将以前台模式启动ZooKeeper,并将所有日志输出到终端上,以便更好地调试。



zkServer.sh start-foreground


观察启动日志加载的环境变量是否是3.6.2,如果不是,需要重新登录服务器,因为环境变量在当前窗口未生效。


#### 3)正常启动ZK新版本服务


如果前者测试启动无误,可以正常启动



zkServer.sh start


#### 4)查看ZK状态



zkServer.sh status


#### 5)查看ZK升级后数据是否还在



数据没变,则说明升级成功!


### 5.编写 zookeeper.service 文件便于ZK自启动(根据个人需求,否则可以忽略此步骤)



[Unit]
Description=zookeeper.service
After=network.target

[Service]
Type=forking
Environment=ZOO_LOG_DIR=/data01/zookeeper-3.6.2/dataLogDir/
Environment=JAVA_HOME=/usr/java/jdk1.8
ExecStart=/opt/zookeeper-3.4.6/bin/zkServer.sh start
ExecStop=//opt/zookeeper-3.4.6/bin/zkServer.sh stop
ExecReload=/opt/zookeeper-3.4.6/bin/zkServer.sh restart
PIDFile=/data01/zookeeper-3.6.2/dataDir/zookeeper_server.pid
User=root

[Install]
WantedBy=multi-user.target


### 6.设置ZK开机自启动(接步骤6,根据个人需求,否则可以忽略此步骤)


设置开机自启



systemctl daemon-reload
systemctl enable zookeeper
systemctl start zookeeper


开启端口



firewall-cmd --zone=public --add-port=2181/tcp --permanent


## 三 回滚


升级过程中如果出现问题,无法解决,需要执行回滚操作。  
 以下步骤为逐一操作某一台服务(先停止,再启动)!!!


### 1.停止当前3.6.2版本ZK进程(逐一操作降级)


先从follower开始降级,最后降级leader。



![img](https://img-blog.csdnimg.cn/img_convert/1c01cb3c478840d4fcb4c309d45ebabd.png)
![img](https://img-blog.csdnimg.cn/img_convert/79f053f53f570fa7b0ae8b982a022eed.png)
![img](https://img-blog.csdnimg.cn/img_convert/214256af6171d7c0dbf865bf966a6068.png)

**既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!**

**由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新**

**[需要这份系统化资料的朋友,可以戳这里获取](https://bbs.csdn.net/topics/618545628)**

668)]
[外链图片转存中...(img-PzjA9d20-1714821651669)]
[外链图片转存中...(img-4aPY9Pvq-1714821651669)]

**既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!**

**由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新**

**[需要这份系统化资料的朋友,可以戳这里获取](https://bbs.csdn.net/topics/618545628)**

  • 25
    点赞
  • 20
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值