2.Zookpeeper集群分布式安装
2.1 四台虚拟机服务器之间免密登录
可以进入我的个人主页中查看Hadoop这一专栏内容
2.2 JDK安装和环境变量配置
可以进入我的个人主页中查看Hadoop这一专栏内容
2.3 Zookeeper集群搭建
2.3.1 下载地址
2.3.1 下载地址
官网页面:https://zookeeper.apache.org
选择apache-zookeeper-3.5.7-bin.tar.gz 下载
最终网址:https://archive.apache.org/dist/zookeeper/zookeeper-3.5.7/apache-zookeeper-3.5.7-bin.tar.gz
也可以在虚拟机中使用:
[root@node3 apps]# yum -y install wget
[root@node3 apps]# wget https://archive.apache.org/dist/zookeeper/zookeeper-3.5.7/apache-zookeeper-3.5.7-bin.tar.gz
2.3.2 搭建步骤
a) 将apache-zookeeper-3.5.7-bin.tar.gz上传到node2
# 安装该包后,可以直接将文件拖到xshell,将文件上传到对应服务器
[root@node2 apps]# yum install lrzsz -y
b) 解压到/opt,并修改名称
[root@node0 apps]# tar -zxvf apache-zookeeper-3.5.7-bin.tar.gz -C /opt
[root@node0 apps]# cd ../
[root@node0 opt]# mv apache-zookeeper-3.5.7-bin zookeeper-3.5.7
c) 配置环境变量:
[root@node0 zookeeper-3.5.7]# vim /etc/profile
export ZOOKEEPER_HOME=/opt/zookeeper-3.5.7
export PATH=$PATH:$JAVA_HOME/bin:$ZOOKEEPER_HOME/bin
#然后让配置生效
[root@node0 zookeeper-3.5.7]# source /etc/profile
#最后将该文件scp到node1和node2、node3上,并分别让配置生效.
scp /etc/profile node1:/etc/
scp /etc/profile node2:/etc/
scp /etc/profile node3:/etc/
[root@node0 zookeeper-3.5.7]# mkdir data
[root@node0 zookeeper-3.5.7]# ls
bin conf data docs lib LICENSE.txt NOTICE.txt README.md README_packaging.txt
d) 到$ZooKeeper_HOME/conf下,复制zoo_sample.cfg为zoo.cfg
[root@node0 conf]# pwd
/opt/zookeeper-3.5.7/conf
[root@node0 conf]# cp zoo_sample.cfg zoo.cfg
e) 编辑zoo.cfg
补充:参数说明
tickTime=2000 #发送心跳的间隔时间,单位:毫秒
dataDir=/opt/zookeeper-3.5.7/data #ZooKeeper保存数据的目录
clientPort=2181
initLimit=5
syncLimit=2
server.2=node2:2881:3881
server.3=node3:2881:3881
server.4=node4:2881:3881 #observer(表示对应节点不参与投票)
initLimit: 这个配置项是用来配置 ZooKeeper 接受客户端(这里所说的客户端不是用户连接ZooKeeper服务器的客户端,而是 ZooKeeper 服务器集群中连接到 Leader的Follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 5 个心跳的时间(也就是 tickTime)长度后 ZooKeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 5*2000=10秒
syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime 的时间长度,总的时间长度就是 2*2000=4 秒
clientPort:客户端连接 ZooKeeper 服务器的端口,ZooKeeper 会监听这个端口,接受客户端的访问请求。
server.A=B:C:D:其 中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的ip地址;C 表示的是这个服务器与集群中的Leader服务器交换信息的端口;D表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于B都是一样,所以不同的ZooKeeper实例通信端口号不能一样,所以要给它们分配不同的端口号。
f) 创建/opt/zookeeper-3.5.7/data目录,并在该目录下放一个文件:myid
在myid中写下当前ZooKeeper的编号
[root@node0 data]# pwd
/opt/zookeeper-3.5.7/data
[root@node0 data]# echo 2 > myid
[root@node0 data]# cat myid
2
g) 将配置好的ZooKeeper拷贝到node1、node2、node3上
[root@node0 opt]# pwd
/opt
[root@node0 opt]# scp -r zookeeper-3.5.7/ node3:/opt/
[root@node0 opt]# scp -r zookeeper-3.5.7/ node2:/opt/
[root@node0 opt]# scp -r zookeeper-3.5.7/ node1:/opt/
h) 在node1和node2、node3上分别修改:myid
[root@node1 data]# pwd
/opt/zookeeper-3.5.7/data
[root@node1 data]# echo 1 > myid
[root@node1 data]# cat myid
1
i) 四台虚拟机环境变量生效
source /etc/profile
2.3.3 启动和关闭
a) 分别启动ZooKeeper
zkServer.sh start
zkServer.sh start|stop|status
b) 关闭ZooKeeper
zkServer.sh stop
c) 连接ZooKeeper
#node2、node3、node4都可以
zkCli.sh
d) 退出zkCli.sh命令
quit