Zookeeper集群搭建详细步骤

已于 2024-05-03 18:59:37 修改
阅读量932 收藏 12
点赞数 21
分类专栏： # 2）ZooKeeper 文章标签： zookeeper linux 后端
于 2024-05-03 16:48:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/WLKUYM/article/details/138419178
版权

Zookeeper集群搭建

1.1 搭建要求

真实的集群是需要部署在不同的服务器上的，但是在我们测试时同时启动很多个虚拟机内存会吃不消，所以我们通常会搭建伪集群，也就是把所有的服务都搭建在一台虚拟机上，用端口进行区分。

我们这里要求搭建一个三个节点的Zookeeper集群（伪集群）。

1.2 准备工作

需要一台Linux虚拟机作为搭建集群的测试服务器。

（1）Zookeeper压缩包上传到服务器

前面已经写过Zookeeper详细安装步骤，这里就不在写了

（2）将Zookeeper解压 ，

建立/usr/local/zookeeper-cluster目录，将解压后的Zookeeper复制到以下三个目录
/usr/local/zookeeper-cluster/zookeeper-1
/usr/local/zookeeper-cluster/zookeeper-2
/usr/local/zookeeper-cluster/zookeeper-3

# 创建集群目录zookeeper-cluster
[root@rhel ~]# mkdir /usr/local/zookeeper-cluster

[root@rhel local]# cp -r apache-zookeeper-3.6.4-bin /usr/local/zookeeper-cluster/zookeeper-1
[root@rhel local]# cp -r apache-zookeeper-3.6.4-bin /usr/local/zookeeper-cluster/zookeeper-2
[root@rhel local]# cp -r apache-zookeeper-3.6.4-bin /usr/local/zookeeper-cluster/zookeeper-3

（3）创建data目录 ，并且将 conf下zoo_sample.cfg 文件改名为 zoo.cfg

mkdir /usr/local/zookeeper-cluster/zookeeper-1/data
mkdir /usr/local/zookeeper-cluster/zookeeper-2/data
mkdir /usr/local/zookeeper-cluster/zookeeper-3/data

mv  /usr/local/zookeeper-cluster/zookeeper-1/conf/zoo_sample.cfg  /usr/local/zookeeper-cluster/zookeeper-1/conf/zoo.cfg
mv  /usr/local/zookeeper-cluster/zookeeper-2/conf/zoo_sample.cfg  /usr/local/zookeeper-cluster/zookeeper-2/conf/zoo.cfg
mv  /usr/local/zookeeper-cluster/zookeeper-3/conf/zoo_sample.cfg  /usr/local/zookeeper-cluster/zookeeper-3/conf/zoo.cfg

（4） 配置每一个Zookeeper 的dataDir 和 clientPort 分别为2181 2182 2183

vim /usr/local/zookeeper-cluster/zookeeper-1/conf/zoo.cfg
#修改/usr/local/zookeeper-cluster/zookeeper-1/conf/zoo.cfg
[root@rhel zookeeper-cluster]# vim zookeeper-1/conf/zoo.cfg 

clientPort=2181
dataDir=/usr/local/zookeeper-cluster/zookeeper-1/data

#修改/usr/local/zookeeper-cluster/zookeeper-2/conf/zoo.cfg
[root@rhel zookeeper-cluster]# vim zookeeper-2/conf/zoo.cfg 

clientPort=2182
dataDir=/usr/local/zookeeper-cluster/zookeeper-2/data

#修改/usr/local/zookeeper-cluster/zookeeper-3/conf/zoo.cfg
[root@rhel zookeeper-cluster]# vim zookeeper-3/conf/zoo.cfg 

clientPort=2183
dataDir=/usr/local/zookeeper-cluster/zookeeper-3/data

1.3 配置集群

（1）在每个zookeeper的 data 目录下创建一个 myid 文件，内容分别是1、2、3 。这个文件就是记录每个服务器的ID

echo 1 >/usr/local/zookeeper-cluster/zookeeper-1/data/myid
echo 2 >/usr/local/zookeeper-cluster/zookeeper-2/data/myid
echo 3 >/usr/local/zookeeper-cluster/zookeeper-3/data/myid

（2）在每一个zookeeper 的 zoo.cfg配置客户端访问端口（clientPort）和集群服务器IP列表。

集群服务器IP列表如下：

vim /usr/local/zookeeper-cluster/zookeeper-1/conf/zoo.cfg
vim /usr/local/zookeeper-cluster/zookeeper-2/conf/zoo.cfg
vim /usr/local/zookeeper-cluster/zookeeper-3/conf/zoo.cfg

server.1=192.168.45.88:2881:3881
server.2=192.168.45.88:2882:3882
server.3=192.168.45.88:2883:3883

#解释：server.服务器ID=服务器IP地址：服务器之间通信端口：服务器之间投票选举端口

1.4 启动集群

启动集群就是分别启动每个实例。

/usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh start
/usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh start
/usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh start

# 启动效果如下：
[root@rhel zookeeper-cluster]# /usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-1/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[root@rhel zookeeper-cluster]# /usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-2/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[root@rhel zookeeper-cluster]# /usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-3/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED

启动后我们查询一下每个实例的运行状态

/usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh status
/usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status
/usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh status

#测试效果
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-3/bin/../conf/zoo.cfg
Client port found: 2183. Client address: localhost. Client SSL: false.
Mode: follower
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-2/bin/../conf/zoo.cfg
Client port found: 2182. Client address: localhost. Client SSL: false.
Mode: leader
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-1/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost. Client SSL: false.
Mode: follower

1.5 模拟集群异常

（1）首先我们先测试如果是从服务器挂掉，会怎么样

把3号服务器停掉，观察1号和2号，发现状态并没有变化

/usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh stop

/usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh status
/usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status

#测试效果
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh stop
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-3/bin/../conf/zoo.cfg
Stopping zookeeper ... STOPPED
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-1/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost. Client SSL: false.
Mode: follower
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-2/bin/../conf/zoo.cfg
Client port found: 2182. Client address: localhost. Client SSL: false.
Mode: leader

由此得出结论，3个节点的集群，从服务器挂掉，集群正常

（2）我们再把1号服务器（从服务器）也停掉，查看2号（主服务器）的状态，发现已经停止运行了。

/usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh stop
/usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status

#测试效果
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh stop
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-1/bin/../conf/zoo.cfg
Stopping zookeeper ... STOPPED
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-2/bin/../conf/zoo.cfg
Client port found: 2182. Client address: localhost. Client SSL: false.
Error contacting service. It is probably not running.

由此得出结论，3个节点的集群，2个从服务器都挂掉，主服务器也无法运行。因为可运行的机器没有超过集群总数量的半数。

（3）我们再次把1号服务器启动起来，发现2号服务器又开始正常工作了。而且依然是领导者。

/usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh start
/usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status

#测试效果
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-1/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-2/bin/../conf/zoo.cfg
Client port found: 2182. Client address: localhost. Client SSL: false.
Mode: leader

（4）我们把3号服务器也启动起来，把2号服务器停掉,停掉后观察1号和3号的状态。

/usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh start
/usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh stop

/usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh status
/usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh status

#测试效果
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-3/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh stop
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-2/bin/../conf/zoo.cfg
Stopping zookeeper ... STOPPED
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-1/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-1/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost. Client SSL: false.
Mode: follower
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-3/bin/../conf/zoo.cfg
Client port found: 2183. Client address: localhost. Client SSL: false.
Mode: leader

发现新的leader产生了~

由此我们得出结论，当集群中的主服务器挂了，集群中的其他服务器会自动进行选举状态，然后产生新得leader

（5）我们再次测试，当我们把2号服务器重新启动起来启动后，会发生什么？2号服务器会再次成为新的领导吗？我们看结果

/usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh start

/usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status
/usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh status

#测试效果
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-2/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-2/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-2/bin/../conf/zoo.cfg
Client port found: 2182. Client address: localhost. Client SSL: false.
Mode: follower
[root@rhel ~]# /usr/local/zookeeper-cluster/zookeeper-3/bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper-cluster/zookeeper-3/bin/../conf/zoo.cfg
Client port found: 2183. Client address: localhost. Client SSL: false.
Mode: leader

我们会发现，2号服务器启动后依然是跟随者（从服务器），3号服务器依然是领导者（主服务器），没有撼动3号服务器的领导地位。

由此我们得出结论，当领导者产生后，再次有新服务器加入集群，不会影响到现任领导者。

小结

zookeeper的安装和集群搭建，不复杂，但是需要上手实际操作，集群搭建时容易出错，这里需要注意，不操作可能不知道，主要是遇到问题，分析问题，是什么？为什么？从哪里入手？怎么改？下次怎么避免？

往昔时光
关注
  • 21
    点赞
  • 踩
  • 12
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Zookeeper集群搭建详细文档
10-18
详细介绍了Zookerper注册中心集群搭建的准备工作以及搭建的详细步骤，并且模拟了集群的一些常见异常，可以使学习Zookeeper的同志们通过阅读本篇文档，能够快速上手对Zookeeper的搭建使用
zookeeper集群搭建详细步骤
dnice的博客
04-27 6287
搭建说明 需要环境： 实例1 实例2 实例3 IP 192.168.11.11 192.168.11.12 192.168.11.13 OS centos7.9 centos7.9 centos7.9 zk zookeeper-3.8.0 zookeeper-3.8.0 zookeeper-3.8.0 java JDK8 JDK8 JDK8 1. 创建目录 # 工作目录 mkdir -p /usr/local/zookeeper # 日志存储目录 mkdir -p /us
ZooKeeper 搭建集群超详细步骤
立志成为一个前端、后端、测试全方位发展的程序员
01-21 6307
搭建Zookeeper集群 文章目录搭建Zookeeper集群1.1 搭建要求1.2 准备工作1.3 配置集群1.4 启动集群1.5 模拟集群异常 1.1 搭建要求 真实的集群是需要部署在不同的服务器上的，但是在我们测试时同时启动很多个虚拟机内存会吃不消，所以我们通常会搭建伪集群，也就是把所有的服务都搭建在一台虚拟机上，用端口进行区分。 我们这里要求搭建一个三个节点的Zookeeper集群（伪集群）。 1.2 准备工作 重新部署一台虚拟机作为我们搭建集群的测试服务器。 （1）安装JDK 【此步骤省略】 （
zookeeper集群搭建步骤（超详细）
热门推荐
weixin_47025166的博客
06-22 2万+
zookeeper集群的简单搭建步骤
ZooKeeper集群搭建详细步骤
Spring , Hadoop, Spark , BI , ML
08-05 1697
Apache ZooKeeper是一个非常出色的分布式协调系统，在配置管理、命名服务、分布式同步等方面应用广泛。其基本思想来源于Google的Chubby，可以认为是其开源实现。在Hadoop生态系统中，ZooKeeper发挥着非常作用的作用，kafka等很多系统都依赖于ZooKeeper提供服务。ZooKeeper通过选举产生一个Leader，其他节点作为Follower。Leader发生故障时会
hadoop集群搭建详细步骤
02-22
hadoop集群搭建详细步骤
zookeeper集群搭建
08-06
此文档演示了搭建zookeeper集群的详细步骤，如果看了文档还搭建不成功 积分退还给你。
集群搭建（zookeeper集群+solr集群）
01-14
集群搭建（zookeeper集群+solr集群）整个步骤本人亲身实践过，如果自身电脑配置高，可以尝试模拟真实服务器进行搭建；
构建高可用ZooKeeper集群
01-27
ZooKeeper集群。Zookeeper有三种运行模式：单机模式、伪集群模式和集群模式。单机模式这种模式一般适用于开发测试环境，一方面我们没有那么多机器资源，另外就是平时的开发调试并不需要极好的稳定性。在Linux环境下...
zookeeper源码分析（五）——网络通信组件ServerCnxnFactory
u013127325的博客
05-06 600
Zookeeper作为一个服务器，需要与客户端进行网络通信，Zookeeper使用ServerCnxFactory管理与客户端的连接，其中有两个实现，一个是NIOServerCnxnFactory，使用java原生Nio实现，一个是NettyServerCnxnFactory，使用netty实现。
Redis——RedLock、Zookeeper及数据库实现分布式锁
IT深耕十余载，大道之简
05-13 276
在分布式系统中，实现分布式锁是确保数据一致性和防止并发问题的重要手段。
Linux部署安装
凌北辰的博客
05-10 499
因为在RPM安装过程中经常需要解决依赖关系，而有些依赖关系并不会有准确的依赖安装包提示信息，YUM是RPM包管理工具,可以很好解决RPM包安装过程中会遇到的依赖关系问题。YUM安装软件时至少需要一个YUM源，YUM源就像一个存放了好多RPM包的仓库，用户可以使用ftp、http等方式访问YUM源。Linux上大部分软件都是开源软件（apache、tomcat、PHP、MySQL等）YUM可以从多个 源中搜索软件及软件安装所依赖的安装包，并自动安装相应的依赖软件。软件组安装-字符界面安装图形化。
Linux知识点笔记
最新发布
exercise_smile的博客
05-16 738
Linux 主要的发行版(release):Ubuntu(乌班图)、 RedHat(红帽)、 CentOS、 Debain[蝶变]、 Fedora、 SuSE、 OpenSUSE [示意图]在 linux 中的每个用户必须属于一个组， 不能独立于组外。在 linux 中每个文件 有所有者、 所在组、 其它组的概念。ls -l 中显示的内容如下：0-9 位说明：第 0 位确定文件类型(d, - , l , c , b)l 是链接， 相当于 windows 的快捷方式。
Linux FT260驱动内核学习笔记
pq的博客
05-12 783
系统采用Ubuntu 22，X86 64。
Linux -- gdb
yyl0327的博客
05-12 816
GDB（GNU Debugger）是一个功能强大的开源调试工具，主要用于调试C和C++编写的程序。它允许你查看程序执行时的内部情况，可以用来设置断点、单步执行代码、查看变量值等，以帮助开发者找出程序中的错误。GDB 是 GNU 项目的一部分，广泛应用于各种Unix-like系统中，包括Linux、BSD等操作系统。
【Linux】进程状态
2201_76024104的博客
05-11 860
我们之前说了进程，进程也是有状态的，这也是好理解的，因为进程不可能一直在CPU中跑着，当进程在CPU运行时或者在运行队列中我们都叫运行状态，有运行状态就有其他状态，比如后面要说的和。为什么要有状态呢？因为当前的状态决定了进程后续的动作进程需要排队一定是因为在，它可以在CPU运行队列中，它要等待CPU执行；它也可以等待比如键盘资源，比如scanf就要等待键盘写入东西。并且只要是排队，一定是。
linux SSH连接banner设置
小恒的博客
05-10 460
文件中找到Banner选项（如果存在），并取消注释。如果Banner选项不存在，请将其添加到文件中。本文会实现linux中设置ssh登录时显示的banner自定义 启用Banner功能，编辑。重新启动SSH服务以使更改生效。在SSH连接成功后了解服务器地址，期限，拥有者，服务器硬件配置，环境变量等重要信息。若出现以下输出，则系统中没有名为ssh.service的systemd单元。启用并启动SSH服务： 使用以下命令启用并启动SSH服务。增加banner后，尝试SSH连接。如果找不到ssh,则使用。
linux fdisk 银河麒麟操作系统 v10 磁盘分区和挂载 详细教程
tonyhi6的博客
05-11 324
linux fdisk 银河麒麟操作系统 v10 磁盘分区和挂载 详细教程
zookeeper集群搭建步骤
03-14
Zookeeper集群搭建步骤大致如下： 1. 下载Zookeeper并解压缩到指定目录 2. 配置Zookeeper的配置文件zoo.cfg 3. 在每台服务器上创建dataDir目录，用于存储Zookeeper的数据 4. 在每台服务器上修改myid文件，指定当前...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值