配置zookeeper及解读

data-sun

已于 2023-09-18 16:31:44 修改

阅读量34

点赞数

文章标签： zookeeper 分布式云原生

于 2023-09-02 19:41:00 首次发布

本文链接：https://blog.csdn.net/m0_54501766/article/details/132641567

版权

tar -zxvf apache-zookeeper-3.5.7-bin.tar.gz -C /opt/module/

cd /opt/module/

mv apache-zookeeper-3.5.7-bin/ zookeeper

cd zookeeper/

mkdir zkData

cd zkData/

vim myid
#设置相应编号

mv ../conf/zoo_sample.cfg ../conf/zoo.cfg

pwd

#复制地址/opt/module/zookeeper/zkData

vim ../conf/zoo.cfg

#修改dataDir
dataDir=/opt/module/zookeeper/zkData

#添加其他服务器
#######################cluster##########################
server.2=hadoop102:2888:3888
server.3=hadoop103:2888:3888
server.4=hadoop104:2888:3888

#server.A=B:C:D
#A是一个数字,表示这个是第几号服务器,根据myid来写
#B是这个服务器的地址
#C是这个服务器Follower与集群中的Leader服务器交换信息的端口
#D是万一集群中的Leader服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口

#向其余服务器分发
cd /opt/module
xsync zookeeper/

#附带xsync脚本,建议放在家目录的bin目录下,编写完不要忘记修改权限chmod 777 xsync.sh
#!/bin/bash

#1.判断参数个数
# $#是获取所有参数
if [ $# -lt 1 ]
then
	echo Not Enough Argument!
	exit;
fi

#2.遍历集群所有机器
for host in hadoop102 hadoop103 hadoop104
do
	echo =============  $host  =============
	#3.遍历所有目录,挨个发送
	# $@获取除$0以外的所有参数列表
	for file in $@
	do
		#4.判断文件是否存在
		if [ -e $file ]
			then
				#5.获取父目录
				pdir=$(cd -P $(dirname $file);pwd)
				
				#6.获取当前文件的名称
				fname=$(basename $file)
				ssh $host "mkdir -p $file"
				rsync -av $pdir/$fname $host:$pdir
			else
				echo $file does not exits!
		fi
	done
done

#再进入其余服务器修改myid
vim /opt/module/zookeeper/zkData/myid
#修改为上面配置的对应值

SID:服务器ID.用来唯一标识一台Zookeeper集群中的机器,每台机器不能重复,和myid一致;
ZXID:事务ID,客户端每次写操作都会有事务ID.ZXID是一个事务ID,用来标识一次服务器状态的变更.在某一时刻,集群中的每台机器的ZXID值不一定完全一致,这和Zookeeper服务器对于客户端"更新请求"的处理逻辑有关
Epoch:每个Leader任期的代号.没有Leader时同一轮投票过程中的逻辑时钟是相同的.每投完一次票这个数据就会增加

回顾一下zk的选举制度
(初次选举)

假如我们的zk开启顺序为hadoop102,hadoop103,hadoop104


hadoop102开启,由于没有其他机器无法比较myid,给自己一票 
计hadoop102-1
由于此时集群内开启数目未过半(票数未过半),所以不设置leader,hadoop102处于Looking观望状态,等待其他节点开启

Hadoop103开启,投自己一票,Hadoop102的myid小于Hadoop103的,所以Hadoop102将自己的票投给Hadoop103
此时 Hadoop102-0
    Hadoop103-2
集群内数目过半(票数过半),Hadoop103当选leader

Hadoop104开启,投自己一票,但此时zk已有leader,不开展选举

______________________________________________________



集群中leader挂掉后进行的选举机制
比较每个follwer的(epoch,ZXID,CID)
epoch最大的直接当选,有相同epoch再比较ZXID和CID