zookeeper是源代码开放的分布式协调服务,由雅虎创建,是Google Chubby的开源实现。
zookeeper是一个高性能的分布式数据一致性解决方案,它将那些复杂的,容易出错的分布式一致性服务封装起来,构成一个高效可靠的源语集,并提供一系列简单易用的接口。
特性:
- 源代码开放
- 是分布式协调服务,它解决分布式数据一致性问题
A:顺序一致性
B:原子性
C:单一视图
D:可靠性
E:实时性 - 高性能
- 我们可以通过调用zookeeper提供的接口来解决一些分布式应用中的实际问题
zookeeper集群角色分为:
Leader , Follower, Observer
Leader 服务器是整个zookeeper集群工作机制中的核心
follower服务器是zookeeper集群状态的跟随者
observer服务器充当一个观察者的角色
下面说明分布式安装的配置:
第一步:主机名称到IP地址映射配置
vim /etc/hosts
192.168.31.198 Master
192.168.31.199 Worker1
192.168.31.200 Worker2
第二步:下载最新的jdk和zookeeper稳定版
mkdir /home/tools
mkdir /home/softwares
[root@Master tools]# ls
jdk-8u111-linux-x64.tar.gz zookeeper-3.4.9.tar.gz
tar -zxvf zookeeper-3.4.9.tar.gz -C /opt
配置环境变量
vim /etc/profile
source /etc/profile
export JAVA_HOME=/home/softwares/jdk1.8.0_111
export ZOOKEEPER_HOME=/opt/zookeeper-3.4.9
export PATH= PATH: JAVA_HOME/bin:$ZOOKEEPER_HOME/bin
第三步:配置zookeeper配置文件
cd /opt/zookeeper-3.4.9/conf/
cp zoo_sample.cfg zoo.cfg
vim zoo.cfg
# The number of milliseconds of each tick
tickTime=2000
The number of ticks that the initial
synchronization phase can take
initLimit=10
The number of ticks that can pass between
sending a request and getting an acknowledgement
syncLimit=5
the directory where the snapshot is stored.
do not use /tmp for storage, /tmp here is just
example sakes.
dataDir=/tmp/zookeeper
dataDir=/opt/zookeeper-3.4.9/data
dataLogDir=/opt/zookeeper-3.4.9/logs
the port at which the clients will connect
clientPort=2181
the maximum number of client connections.
increase this if you need to handle more clients
maxClientCnxns=60
#
Be sure to read the maintenance section of the
administrator guide before turning on autopurge.
#
http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
The number of snapshots to retain in dataDir
autopurge.snapRetainCount=3
Purge task interval in hours
Set to “0” to disable auto purge feature
autopurge.purgeInterval=1
server.1=Master:2888:3888
server.2=Worker1:2888:3888
server.3=Worker2:2888:3888
配置文件参数说明:
tickTime这个时间是作为zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是说每个tickTime时间就会发送一个心跳。
initLimit这个配置项是用来配置zookeeper接受客户端(这里所说的客户端不是用户连接zookeeper服务器的客户端,而是zookeeper服务器集群中连接到leader的follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。
当已经超过10个心跳的时间(也就是tickTime)长度后 zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20秒。
syncLimit这个配置项标识leader与follower之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime的时间长度,总的时间长度就是5*2000=10秒。
dataDir顾名思义就是zookeeper保存数据的目录,默认情况下zookeeper将写数据的日志文件也保存在这个目录里;
clientPort这个端口就是客户端连接Zookeeper服务器的端口,Zookeeper会监听这个端口接受客户端的访问请求;
server.A=B:C:D中的A是一个数字,表示这个是第几号服务器,B是这个服务器的IP地址,C第一个端口用来集群成员的信息交换,表示这个服务器与集群中的leader服务器交换信息的端口,D是在leader挂掉时专门用来进行选举leader所用的端口。
第五步:安装其它节点
cd /opt
scp -r zookeeper-3.4.9 Worker1:/opt/
scp -r zookeeper-3.4.9 Worker2:/opt/
[Master:~]echo 1 > /opt/zookeeper-3.4.9/data/myid
[Woker1:~]echo 2 > /opt/zookeeper-3.4.9/data/myid
[Woker2:~]echo 3 > /opt/zookeeper-3.4.9/data/myid
启动集群:
[root@Master zookeeper-3.4.9]# bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.9/bin/../conf/zoo.cfg
Starting zookeeper … STARTED
查看状态:
[root@Master zookeeper-3.4.9]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.9/bin/../conf/zoo.cfg
Error contacting service. It is probably not running.
启动另一集群:
[root@Worker1 zookeeper-3.4.9]# bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.9/bin/../conf/zoo.cfg
Starting zookeeper … STARTED
[root@Worker1 zookeeper-3.4.9]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.9/bin/../conf/zoo.cfg
Mode: follower
[root@Worker1 zookeeper-3.4.9]#
再次查看Master的状态
[root@Master zookeeper-3.4.9]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.9/bin/../conf/zoo.cfg
Mode: leader
集群配置成功