zookeeper 集群搭建
安装JDK
检测集群时间是否同步
date
时钟同步:
与阿里云同步 ntpdate ntp4.aliyun.com
检测防火墙是否关闭
/etc/init.d/iptables status
关闭防火墙:
/etc/init.d/iptables stop
开机防火墙不自启:
chkconfig iptables off
检测主机 ip映射有没有配置
cat /etc/hosts
下载安装包、解压
下载:
cd /export/soft
rz (rz下载:yum install -y lrzsz)
解压:
解压到 /export/servers
tar -zxvf zookeeper-3.4.5.tar.gz -C ../servers/
修改环境变量(注意:其他节点的zookeeper都需要修改)
vim /etc/profile.d/zookeeper.sh
添加以下:
export ZOOKEEPER_HOME=/export/servers/zookeeper-3.4.5-cdh5.14.0
export PATH=$PATH:$ZOOKEEPER_HOME/bin
分发zookeeper.sh到其他节点:
scp /etc/profile.d/zookeeper.sh 其他节点主机名:/etc/profile.d/
启动profile(所有节点都启动):
source /etc/profile
修改Zookeeper配置文件
创建文件夹:
cd /export/servers/zookeeper-3.4.5-cdh5.14.0
mkdir zkdata
cd zkdata
echo '1' > myid
cd /export/servers/zookeeper-3.4.5-cdh5.14.0/conf
cp zoo_sample.cfg zoo.cfg
vi zoo.cfg
添加以下:
server.1=主节点主机名:2888:3888
server.2=其他节点主机名:2888:3888
server.3=其他节点主机名:2888:3888
## (2888:心跳端口:3888:选举端口)
修改以下:
dataDir=/export/servers/zookeeper-3.4.5-cdh5.14.0/zkdata
分发安装包到其他机器
分发安装包:
scp -r /export/servers/zookeeper-3.4.5-cdh5.14.0 其他节点主机名:/export/servers/
修改其他机器的myid配置文件
cd /export/servers/zookeeper-3.4.5-cdh5.14.0/zkdata/
例:
主节点node01上myid为1
到node02上:修改myid为:2
到node03上:修改myid为:3
启动方法:数量少选择单独启动 数量多选择脚本启动
单独启动
每台机器都得启动:
cd /export/servers/zookeeper-3.4.5-cdh5.14.0/bin
zkServer.sh start
脚本启动指定主机zookeeper
全部启动:
cd /export/servers/zookeeper-3.4.5-cdh5.14.0/bin
vim zkstart-all.sh
添加以下:
#!/bin/bash
for host in 要启动的节点主机名,主机名与主机名之间用空格隔开
do
ssh $host "source /etc/profile.d;/export/servers/zookeeper解压的名字/bin/zkServer.sh start"
done
改权限:
chmod 755 zkstart-all.sh
启动脚本:
zkstart-all.sh
全部关闭:
cd /export/servers/zookeeper-3.4.5-cdh5.14.0/bin
vim zkstop-all.sh
添加以下:
#!/bin/bash
for host in 要停止的节点主机名,主机名与主机名之间用空格隔开
do
ssh $host "source /etc/profile.d;/export/servers/zookeeper解压的名字/bin/zkServer.sh stop"
done
改权限:
chmod 755 zkstop-all.sh
启动脚本:
zkstop-all.sh
查看集群状态
配置文件中参数说明:
-
tickTime这个时间是作为zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是说每个tickTime时间就会发送一个心跳。
-
initLimit这个配置项是用来配置zookeeper接受客户端(这里所说的客户端不是用户连接zookeeper服务器的客户端,而是zookeeper服务器集群中连接到leader的follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。
-
当已经超过10个心跳的时间(也就是tickTime)长度后 zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20秒。
-
syncLimit这个配置项标识leader与follower之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime的时间长度,总的时间长度就是5*2000=10秒。
-
dataDir顾名思义就是zookeeper保存数据的目录,默认情况下zookeeper将写数据的日志文件也保存在这个目录里;
-
clientPort这个端口就是客户端连接Zookeeper服务器的端口,Zookeeper会监听这个端口接受客户端的访问请求;
-
server.A=B:C:D中的A是一个数字,表示这个是第几号服务器,B是这个服务器的IP地址,C第一个端口用来集群成员的信息交换,表示这个服务器与集群中的leader服务器交换信息的端口,D是在leader挂掉时专门用来进行选举leader所用的端口。