zookeeper集群搭建与配置

最新推荐文章于 2024-09-20 17:59:07 发布

weixin_42874602

最新推荐文章于 2024-09-20 17:59:07 发布

阅读量117

点赞数

文章标签： zookeeper java

本文链接：https://blog.csdn.net/weixin_42874602/article/details/112577191

版权

zookeeper集群搭建與配置

Zookeeper基础知识、体系结构、数据模型
- Zookeeper是一个类似linux、 hdfs的树形文件结构, zookeeper可以用来保证数据在(Zookeeper)集群之间的数据的事务性一致性， zookeeper也是我们常说的CAP理论中的CP (强-致性) ;
- Zookeeper有- - 个概念叫watch (也称之为事件)，是一次性触发的，当watch监视的数据发生变化时,通知设置了该watch的client端，即watcher实例对象 (用于改变节点的变化而做出相应的行为)
- 关于Zookeeper其他相关内容,小伙伴可以参考一些相关的资料，在这里我们仅仅使用Zookeeper做注册中心;
Zookeeper有三个角色: Leader, Follower, Observer
- Leader: 数据总控节点，于接收客户端连接请求，分发给所有的Follower节后，各个Follower节点进行便新数据操作并返回给L eader节点，如果满足半数以上(所以Zookeeper集群一般是奇数个节点) 更新成功则此次操作成功;
- Follower: 相当于跟随者的角色，Zookeeper的L eader宕机(挂掉)时，所有的Follower角色内部会产生选举机制，选举出新的L eader用于总控;
- Observer: 顾名思义，就是我们的客户端，用于观察Zookeeper集群的数据发送变化，如果产牲变化则zookeeper会主动推送watch事件给Observer (客户端)，于对数据变化的后续处理;当然Observer(客户端)也可以发送数据变更请求;
Zookeeper应用场景:
- 统一命名服务(Name Service)
- 配置管理(Configuration Management)
- 集群管理(Group Membership)
- 共享锁(Locks)
- 队列管理
Zookeeper集群環境搭建與配置

1. 准备工作：
## 准备3个节点，要求配置好主机名称，服务器之间系统时间保持一致
## 注意 /etc/hostname 和 /etc/hosts 配置主机名称（在这个里我准备gah172,gah173,gah174三节点）
## 特别注意 以下操作3个节点要同时进行操作哦！


2. 上传zk到三台服务器节点
## 注意我这里解压到/usr/local下
2.1 进行解压： tar zookeeper-3.4.6.tar.gz
2.2 重命名： mv zookeeper-3.4.6 zookeeper
2.3 修改环境变量： vim /etc/profile 
## 这里要添加zookeeper的全局变量
export ZOOKEEPER_HOME=/usr/local/zookeeper
export PATH=.:$ZOOKEEPER_HOME/bin
2.4 刷新环境变量： source /etc/profile
2.5 到zookeeper下修改配置文件： 
2.5.1 首先到指定目录： cd /usr/local/zookeeper/conf
2.5.2 然后复制zoo_sample.cfg文件，复制后为zoo.cfg： mv zoo_sample.cfg zoo.cfg
2.5.3 然后修改两处地方, 最后保存退出：
(1) 修改数据的dir
dataDir=/usr/local/zookeeper/data
(2) 修改集群地址
server.0=gah172:2888:3888
server.1=gah173:2888:3888
server.2=gah174:2888:3888

2.6 增加服务器标识配置，需要2步骤，第一是创建文件夹和文件，第二是添加配置内容： 
(1) 创建文件夹： mkdir /usr/local/zookeeper/data
(2) 创建文件myid 路径应该创建在/usr/local/zookeeper/data下面，如下：
	vim /usr/local/zookeeper/data/myid
	注意这里每一台服务器的myid文件内容不同，分别修改里面的值为0，1，2；与我们之前的zoo.cfg配置文	 件里：server.0，server.1，server.2 顺序相对应，然后保存退出；

2.7 到此为止，Zookeeper集群环境大功告成！启动zookeeper命令
	启动路径：/usr/local/zookeeper/bin（也可在任意目录，因为配置了环境变量）
	执行命令：zkServer.sh start (注意这里3台机器都要进行启动，启动之后可以查看状态)
	查看状态：zkServer.sh status (在三个节点上检验zk的mode, 会看到一个leader和俩个follower)

Zookeeper客戶端操作

zkCli.sh 进入zookeeper客户端
根据提示命令进行操作： 
查找：ls /   ls /zookeeper
创建并赋值： create /imooc zookeeper
获取： get /imooc 
设值： set /imooc zookeeper1314 
PS1: 任意节点都可以看到zookeeper集群的数据一致性
PS2: 创建节点有俩种类型：短暂（ephemeral） 持久（persistent）, 这些小伙伴们可以查找相关资料，我们这里作为入门不做过多赘述！

Zookeeper核心配置講解（zoo.cfg配置文件，擴展內容）

（1）tickTime：基本事件单元，以毫秒为单位。这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每隔 tickTime时间就会发送一个心跳。
				
（2）initLimit：这个配置项是用来配置 Zookeeper 接受客户端初始化连接时最长能忍受多少个心跳时间间隔数，当已经超过 10 个心跳的时间（也就是 tickTime）长度后 Zookeeper 服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒。
		
（3）syncLimit：这个配置项标识 Leader 与 Follower 之间发送消息，请求和应答时间长度，最长不能超过多少个 tickTime 的时间长度，总的时间长度就是 5*2000=10 秒
				
（4）dataDir：存储内存中数据库快照的位置，顾名思义就是 Zookeeper 保存数据的目录，默认情况下，Zookeeper 将写数据的日志文件也保存在这个目录里。
   
（5）clientPort： 这个端口就是客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求。

（6）至于最后的配置项：server.A = B:C:D: 
A表示这个是第几号服务器,
B 是这个服务器的 ip 地址；
C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口；
D 表示的是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的 Leader