单机部署zookeeper集群

一、集群部署

1、环境

系统	CentOS 7.6
jdk	jdk1.8.0_162
zookeeper	zookeeper-3.6.2

2、zookeeper集群规划

zookeeper节点	客户端连接端口	交换信息端口	选举通信端口	数据目录	事务日志目录
2181	2181	2661	3661	./2181/zkdata	./2181/zklogs
2182	2182	2662	3662	./2182/zkdata	./2182/zklogs
2183	2183	2663	3663	./2183/zkdata	./2183/zklogs

3、环境准备

1. 创建目录

cd /data/test
mkdir -p 2181/zkdata
mkdir -p 2181/zklogs
mkdir -p 2182/zkdata
mkdir -p 2182/zklogs
mkdir -p 2183/zkdata
mkdir -p 2183/zklogs

2. 解压安装包

tar -zxvf zookeeper-3.6.2.tar.gz -C 2181/
tar -zxvf zookeeper-3.6.2.tar.gz -C 2182/
tar -zxvf zookeeper-3.6.2.tar.gz -C 2183/

3. 修改配置文件
   vi 2181/zookeeper-3.6.2/conf/zoo.cfg

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/data/test/2181/zkdata
dataLogDir=/data/test/2181/zklogs
clientPort=2181
maxClientCnxns=300
server.1=192.168.192.128:2661:3661
server.2=192.168.192.128:2662:3662
server.3=192.168.192.128:2663:3663

其他两节点注意修改 dataDir、dataLogDir、clientPort 为对应的值

4. 配置服务器编号

echo 1 > 2181/zkdata/myid
echo 2 > 2182/zkdata/myid
echo 3 > 2183/zkdata/myid

4、操作 zookeeper

① 启动各个节点

./2181/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2181/zookeeper-3.6.2/conf start
./2182/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2182/zookeeper-3.6.2/conf start
./2183/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2183/zookeeper-3.6.2/conf start

或

./2181/zookeeper-3.6.2/bin/zkServer.sh start
./2182/zookeeper-3.6.2/bin/zkServer.sh start
./2183/zookeeper-3.6.2/bin/zkServer.sh start

②查看进程是否启动

jps

③查看状态

./2181/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2181/zookeeper-3.6.2/conf status
./2182/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2182/zookeeper-3.6.2/conf status
./2183/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2183/zookeeper-3.6.2/conf status

④连接 zookeeper

./2183/zookeeper-3.6.2/bin/zkCli.sh -server 192.168.192.128:2181

⑤退出客户端

[zk: 192.168.192.128:2181(CONNECTED) 0] quit

⑥停止 zookeeper

./2181/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2181/zookeeper-3.6.2/conf stop
./2182/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2182/zookeeper-3.6.2/conf stop
./2183/zookeeper-3.6.2/bin/zkServer.sh --config /data/test/2183/zookeeper-3.6.2/conf stop

二、常用命令

1、创建普通节点

1. 永久节点 + 不带序号

[zk: localhost:2181(CONNECTED) 7] create /test
Created /test
[zk: localhost:2181(CONNECTED) 8] create /test/disorder disorder
Created /test/disorder

2. 永久节点 + 带序号

[zk: localhost:2181(CONNECTED) 13] create -s /test/order order1
Created /test/order0000000002
[zk: localhost:2181(CONNECTED) 14] create -s /test/order order2
Created /test/order0000000003
[zk: localhost:2181(CONNECTED) 15] create -s /test/order order3
Created /test/order0000000004

2、创建短暂节点

1. 短暂节点 + 不带序号

[zk: localhost:2181(CONNECTED) 17] create -e /test/tmp tmp1
Created /test/tmp

2. 短暂节点 + 带序号

[zk: localhost:2181(CONNECTED) 1] create -e -s /test/tmp tmp2
Created /test/tmp0000000006
[zk: localhost:2181(CONNECTED) 2] create -e -s /test/tmp tmp3
Created /test/tmp0000000007

3、查看节点

[zk: localhost:2181(CONNECTED) 12] ls /test/tmp0000000006
[]
[zk: localhost:2181(CONNECTED) 13] ls -s /test/tmp0000000006
[]
cZxid = 0x200000014
ctime = Thu Aug 24 17:09:06 CST 2023
mZxid = 0x200000014
mtime = Thu Aug 24 17:09:06 CST 2023
pZxid = 0x200000014
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x100012134830002
dataLength = 4
numChildren = 0
[zk: localhost:2181(CONNECTED) 14]

4、获得节点的值

[zk: localhost:2181(CONNECTED) 3] get /test/tmp0000000006
tmp2
[zk: localhost:2181(CONNECTED) 3]
[zk: localhost:2181(CONNECTED) 3]
[zk: localhost:2181(CONNECTED) 4] get -s /test/tmp0000000006
tmp2
cZxid = 0x200000014
ctime = Thu Aug 24 17:09:06 CST 2023
mZxid = 0x200000014
mtime = Thu Aug 24 17:09:06 CST 2023
pZxid = 0x200000014
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x100012134830002
dataLength = 4
numChildren = 0
[zk: localhost:2181(CONNECTED) 5]

5、修改节点数据值

[zk: localhost:2181(CONNECTED) 17] set /test/disorder disorder2

三、知识

1、配置文件详解

配置项	默认值	配置描述
tickTime	2000	通信心跳时间，Zookeeper服务器与客户端心跳时间，单位毫秒
initLimit	10	Leader 和 Follower 初始连接时能容忍的最多心跳数（tickTime的数量）
syncLimit	5	Leader 和 Follower 之间通信时间如果超过 syncLimit * tickTime ，Leader 认为 Follwer 死掉，从服务器列表中删除 Follwer
dataDir	/tmp/zookeeper	保存 zookeeper 中的数据
dataLogDir	默认指定在dataDir目录下	zookeeper事务日志的存储路径
clientPort	2181	客户端连接端口，zookeeper 会监听这个端口，接受客户端的访问请求
server.A=B:C:D		server.序号=IP:内部同步端口:选举端口

server.A=B:C:D
A：是一个数字，表示这个是第几号服务器；集群模式下配置一个文件 myid，这个文件在 dataDir 目录下，这个文件里面有一个数据就是 A 的值，Zookeeper 启动时读取此文件，拿到里面的数据与 zoo.cfg 里面的配置信息比较从而判断到底是哪个 server。
B：是这个服务器的地址。
C：是这个服务器 Follower 与集群中的 Leader 服务器交换信息的端口。
D：是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的 Leader，而这个端口就是用来执行选举时服务器相互通信的端口。

2、选举机制

假设ZooKeeper由5台服务器组成

SID：服务器ID。用来唯一标识一台ZooKeeper集群中的机器，每台机器不能重复，和myid一致。

ZXID：事务ID。ZXID是一个事务ID，用来标识一次服务器状态的变更。在某一时刻，集群中的每台机器的ZXID值不一定完全一致，这和ZooKeeper服务器对于客户端“更新请求”的处理逻辑有关。

Epoch：每个Leader任期的代号。没有Leader时同一轮投票过程中的逻辑时钟值是相同的。每投完一次票这个数据就会增加

1. 首次启动

①服务器1启动，发起一次选举。服务器1投自己一票。此时服务器1票数一票，不够半数以上（3票），选举无法完成，服务器1状态保持为 LOOKING

②服务器2启动，再发起一次选举。服务器1和2分别投自己一票并交换选票信息：此时服务器1发现服务器2的myid比自己目前投票推举的（服务器1）大，更改选票为推举服务器2。此时服务器1票数0票，服务器2票数2票，没有半数以上结果，选举无法完成，服务器1，2状态保持 LOOKING

③服务器3启动，发起一次选举。此时服务器1和2都会更改选票为服务器3。此次投票结果：服务器1为0票，服务器2为0票，服务器3为3票。此时服务器3的票数已经超过半数，服务器3当选Leader。服务器1，2更改状态为 FOLLOWING，服务器3更改状态为 LEADING

④服务器4启动，发起一次选举。此时服务器1，2，3已经不是LOOKING状态，不会更改选票信息。交换选票信息结果：服务器3为3票，服务器4为1票。此时服务器4服从多数，更改选票信息为服务器3，并更改状态为FOLLOWING

⑤服务器5启动，同4一样更改状态为FOLLOWING

2. 非首次启动

①当ZooKeeper集群中的一台服务器出现以下两种情况之一时，就会开始进入Leader选举
• 服务器初始化启动。
• 服务器运行期间无法和Leader保持连接。

②当一台机器进入Leader选举流程时，当前集群也可能会处于以下两种状态：
• 集群中存在Leader。
对于第一种已经存在Leader的情况，机器试图去选举Leader时，会被告知当前服务器的Leader信息，对于该机器来说，仅仅需要和Leader机器建立连接，并进行状态同步即可。

• 集群中不存在Leader。
ZooKeeper由5台服务器 SID分别为1、2、3、4、5，ZXID分别为8、8、8、7、7，并且此时SID为3的服务器是Leader。某一时刻3和5服务器出现故障，因此开始进行Leader选举。

SID	EPOCH	ZXID	SID
SID1	1	8	1
SID2	1	8	2
SID4	1	7	4

选举Leader规则：
①EPOCH大的直接胜出
②EPOCH相同，事务id大的胜出
③事务id相同，服务器id大的胜出

3、节点类型

持久（Persistent）：客户端和服务器端断开连接后，创建的节点不删除
（1）持久化目录节点：客户端与Zookeeper断开连接后，该节点依旧存在
（2）持久化顺序编号目录节点：客户端与Zookeeper断开连接后，该节点依旧存
在，只是Zookeeper给该节点名称进行顺序编号

短暂（Ephemeral）：客户端和服务器端断开连接后，创建的节点自己删除
（1）临时目录节点：客户端与Zookeeper断开连接后，该节点被删除
（2）临时顺序编号目录节点：客户端与 Zookeeper 断开连接后 ， 该 节 点 被 删 除 ， 只 是Zookeeper给该节点名称进行顺序编号

4、写流程

1、写请求发送给Leader节点

2、写请求发送给follower节点

5、命令行语法

6、当前节点详细数据

（1）czxid：创建节点的事务 zxid
（2）ctime：znode 被创建的时间（从 1970 年开始）
（3）mzxid：znode 最后更新的事务 zxid
（4）mtime：znode 最后修改的时间（从 1970 年开始）
（5）pZxid：znode 最后更新的子节点 zxid
（6）cversion：znode 子节点变化号，znode 子节点修改次数
（7）dataversion：znode 数据变化号
（8）aclVersion：znode 访问控制列表的变化号
（9）ephemeralOwner：如果是临时节点，这个是 znode 拥有者的 session id。如果不是临时节点则是 0
（10）dataLength：znode 的数据长度
（11）numChildren：znode 子节点数量