Zookeeper（分布式协调系统）

ZooKeeper基础

简介

Apache ZooKeeper目标是高度可靠的分布式协调系统，解决了分布式环境下的协同配置（统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。）

特性

• 集中式服务
• 提供配置信息、命名服务、分布式同步及分组
• 轻量级，架构简单，API简单
• /x/x/x/x目录树方式
• 节点可以关联数据 <1M

安装

1.jdk1.8部署（略）
2.zookeeper.apache.og下载最新稳定版
3.解压到/usr/local，并软连接到zk

tar xzf zookeeper-3.4.10.tar.gz
mv zookeeper-3.4.10 /usr/local/
ln -s zookeeper-3.4.10 zk
cd /usr/local/zk/conf/ && rm -f zkCli.cmd zkEnv.cmd  zkServer.cmd

3.创建配置文件

cat >/usr/local/zk/conf/zoo.cfg <<EOF
itickTime=2000
dataDir=/data/zk2181/
clientPort=2181
initLimit=5
syncLimit=2
EOF

 

1 initLimit: zookeeper集群中的包含多台server, 其中一台为leader, 集群中其余的server为follower. initLimit参数配置初始化连接时, follower和leader之间的最长心跳时间. 此时该参数设置为5, 说明时间限制为5倍tickTime, 即5*2000=10000ms=10s.
2 syncLimit: 该参数配置leader和follower之间发送消息, 请求和应答的最大时间长度. 此时该参数设置为2, 说明时间限制为2倍tickTime, 即4000ms

4.增加环境变量，启动服务

cat >>/etc/profile <<EOF
export  ZOOKEEPER_HOME=/usr/local/zk/
export PATH=$PATH:$ZOOKEEPER_HOME/bin
EOF

$>zkServer.sh  start

5.使用zkCli.sh连接zk

基本操作

$>help
$>ls /
$>get /zookeeper
$>create /name dinghe
$>set /name abc
$>delete /name
$>rmr /a 

备注：目录下有数据，delete目录删除会失败，rmr成功

 

ZooKeeper集群搭建

单机伪集群搭建（测试环境用）

基本环境

主机名	IP地址	监听端口	leader交互端口	选举端口	myid
zk01	192.168.0.230	2181	6001	6101	1
zk01	192.168.0.230	2182	6002	6102	2
zk01	192.168.0.230	2183	6003	6103	3

文件目录和配置

主机名	配置目录	数据目录	myid目录
zk01	/usr/local/zk/conf/zk01.cfg	/data/zk01/	/data/zk01/myid
zk01	/usr/local/zk/conf/zk02.cfg	/data/zk02/	/data/zk02/myid
zk01	/usr/local/zk/conf/zk03.cfg	/data/zk03/	/data/zk03/myid

服务安装

jdk1.8安装（略）

cd /opt
http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gz
tar xzf zookeeper-3.4.10.tar.gz
mv zookeeper-3.4.10 /usr/local/ && cd /usr/local/ 
ln -s zookeeper-3.4.10 zk

初始化配置

useradd zookeeper
mkdir /data/zk0{1..3}/logs -p
chown -R zookeeper.zookeeper /data/zk0{1..3}
chown -R zookeeper.zookeeper /usr/local/zookeeper-*
cd /usr/local/zk/bin/ && rm -f  zkCli.cmd zkEnv.cmd zkServer.cmd

增加环境变量

echo ' '  >> /etc/profile
echo '#Add zookeeper env. 20170822 '  >> /etc/profile
echo 'export ZOOKEEPER_HOME=/usr/local/zk'  >> /etc/profile
echo 'export PATH=$PATH:$ZOOKEEPER_HOME/bin'  >> /etc/profile

. /etc/profile
su - zookeeper

初始化myid

echo 1 >> /data/zk01/myid
echo 2 >> /data/zk02/myid
echo 3 >> /data/zk03/myid

编辑配置文件

#zk01.cfg
itickTime=2000
dataDir=/data/zk01/
clientPort=2181
initLimit=5
syncLimit=2
server.1=192.168.0.112:6001:6101
server.2=192.168.0.112:6002:6102
server.3=192.168.0.112:6003:6103
#zk02.cfg
itickTime=2000
dataDir=/data/zk02/
dataLogDir=/data/zk02/logs
clientPort=2182
initLimit=5
syncLimit=2
server.1=192.168.0.112:6001:6101
server.2=192.168.0.112:6002:6102
server.3=192.168.0.112:6003:6103
#zk03.cfg
itickTime=2000
dataDir=/data/zk03/
clientPort=2183
initLimit=5
syncLimit=2
server.1=192.168.0.112:6001:6101
server.2=192.168.0.112:6002:6102
server.3=192.168.0.112:6003:6103

连接集群并测试

zkCli.sh -server 192.168.0.112:2181,192.168.0.112:2182,192.168.0.112:2183

分布式集群搭建（生产环境用）

基本环境

主机名	IP地址	myid
zk01	192.168.0.230	1
zk02	192.168.0.231	2
zk03	192.168.0.232	3

端口配置

Port	作用
2181	服务监听
2888	zk与Leader通讯，Master监听该端口
3888	zk选举Leader用

角色关系

client
client是集群中的一个节点，以固定间隔时间向server发消息，表示自己存活，Server向client回传ack确认消息
如果client没有收到ack消息，自动冲顶效到另外一台server
server zk集群中一个节点，想client提供所有服务
想client发送ack消息，表明server还健在

Ensemble
zk集群，成员最小数是3

Follower
服务器节点，执行leader的指令

服务安装

cd /opt
http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gz
tar xzf zookeeper-3.4.10.tar.gz
mv zookeeper-3.4.10 /usr/local/ && cd /usr/local/ 
ln -s zookeeper-3.4.10 zk

初始化配置

所有zk服务器创建数据目录和用户

useradd zookeeper
mkdir /data/zk/logs -p
chown -R zookeeper.zookeeper /data/zk
chown -R zookeeper.zookeeper /usr/local/zookeeper-*
cd /usr/local/zk/bin/ && rm -f  zkCli.cmd zkEnv.cmd zkServer.cmd

增加环境变量

echo ' '  >> /etc/profile
echo '#Add zookeeper env. 20170821 '  >> /etc/profile
echo 'export ZOOKEEPER_HOME=/usr/local/zk'  >> /etc/profile
echo 'export PATH=$PATH:$ZOOKEEPER_HOME/bin'  >> /etc/profile

. /etc/profile

su - zookeeper

配置文件

zk01/zk02/zk03

itickTime=2000
dataDir=/data/zk/
clientPort=2181
initLimit=5
syncLimit=2
server.1=192.168.0.230:2888:3888
server.2=192.168.0.231:2888:3888
server.3=192.168.0.232:2888:3888

初始化myid

#192.168.0.230
echo 1 >> /data/zk/myid

#192.168.0.231
echo 2 >> /data/zk/myid

#192.168.0.232
echo 3 >> /data/zk/myid

启动集群，查看角色状态

zkServer.sh start
zkServer.sh stop
zkServer.sh status

执行 zkServer.sh status

ZooKeeper JMX enabled by default
Using config: /usr/local/zk/bin/../conf/zoo.cfg
Mode: leader

连接集群并测试

zkCli.sh -server 192.168.0.112:2181,192.168.0.112:2182,192.168.0.112:2183

停止leader，查看其他zk节点，观察leader切换情况