Kafka集群搭建实战(一)

案例分为两部分:

  • ZooKeeper集群部署 (本章)
  • Kafka集群部署

一、ZooKeeper集群部署

1.1 案例目标

  • 了解ZooKeeper分布式应用程序协调服务
  • 使用三台云服务器搭建ZooKeeper集群
  • 使用ZooKeeper集群

1.2 案例分析

1.2.1 节点规划
公网IP内网IP主机名
175.27.161.12310.0.0.13ZK001
1.13.174.8910.0.0.12ZK002
1.13.175.910.0.0.16ZK003
1.2.2 基础准备

软件包:zookeeper-3.4.14.tar.gz

建议不要使用新版本的包哦,可能会碰到奇奇怪怪的兼容性问题

1.3 案例实施

1.3.1 基础环境配置
(1)主机名设置

ZK001:

hostnamectl set-hostname zk001

ZK002:

hostnamectl set-hostname zk002

ZK003:

hostnamectl set-hostname zk003
(2)配置hosts文件

三个节点修改hosts文件

vim /etc/hosts

10.0.0.13 zk001
10.0.0.12 zk002
10.0.0.16 zk003
1.3.2 搭建ZooKeeper集群
(1)安装JDK环境

三个节点均安装JAVA JDK环境,命令如下:

yum install -y java-1.8.0-openjdk java-1.8.0-openjdk-devel

java -version # 查询jdk版本
openjdk version "1.8.0_345"
OpenJDK Runtime Environment (build 1.8.0_345-b01)
OpenJDK 64-Bit Server VM (build 25.345-b01, mixed mode)
(2)解压ZooKeeper软件包

将软件包上传至三个节点的/root/目录解压

tar -zxvf zookeeper-3.4.14.tar.gz
(3) 修改3个节点的配置文件
[root@zk001 zookeeper-3.4.14]# cd conf/
[root@zk001 conf]# ls
configuration.xsl  logback.xml  zoo_sample.cfg
[root@zk001 conf]# pwd
/root/zookeeper-3.4.14/conf
[root@zk001 conf]# cp zoo_sample.cfg zoo.cfg
[root@zk001 conf]# vi zoo.cfg  
[root@zk001 conf]# grep -n '^'\[a-z] zoo.cfg 
2:tickTime=2000
5:initLimit=10
8:syncLimit=5
12:dataDir=/tmp/zookeeper
14:clientPort=2181
29:server.1=10.0.0.13:2888:3888
30:server.2=10.0.0.12:2888:3888
31:server.3=10.0.0.16:2888:3888
(4)创建myid文件

在3台机器/tmp/zookeeper目录下,分别创建一个myid文件,文件内容分别只有一行,其内容为1,2,3。即文件中只有一个数字,这个数字即为上面zoo.cfg配置文件中指定的值。 ZooKeeper是根据该文件来决定ZooKeeper集群各个机器的身份分配

ZK001:

[root@zk001 ~]# mkdir /tmp/zookeeper
[root@zk001 ~]# vim /tmp/zookeeper/myid
[root@zk001 ~]# cat /tmp/zookeeper/myid 
1

ZK002:

[root@zk002 ~]# mkdir /tmp/zookeeper
[root@zk002 ~]# vim /tmp/zookeeper/myid
[root@zk002 ~]# cat /tmp/zookeeper/myid 
2

ZK003:

[root@zk003 conf]# mkdir /tmp/zookeeper
[root@zk003 conf]# vim /tmp/zookeeper/myid
[root@zk003 conf]# cat /tmp/zookeeper/myid 
3
(5) 启动ZooKeeper服务

启动三台服务器的ZooKeeper服务

ZK001:

[root@zk001 bin]# ./zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /root/zookeeper-3.4.14/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[root@zk001 bin]# ./zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /root/zookeeper-3.4.14/bin/../conf/zoo.cfg
Mode: follower

ZK002:

[root@zk002 bin]# ./zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /root/zookeeper-3.4.14/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[root@zk002 bin]# ./zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /root/zookeeper-3.4.14/bin/../conf/zoo.cfg
Mode: leader

ZK003:

[root@zk003 bin]# ./zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /root/zookeeper-3.4.14/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[root@zk003 bin]# ./zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /root/zookeeper-3.4.14/bin/../conf/zoo.cfg
Mode: follower

至此,ZooKeeper集群搭建完毕,可以看到zk002为leader,zk001和zk003为follower

注意:当启动第一个节点查询状态出现问题时,把所有节点都启动一下,再去查询状态

  • 2
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

墨离moli moliyu

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值