Zookeeper集群环境搭建

概述

---

Zookeeper是一个分布式协调服务的开源框架。主要用于解决分布式集群中应用系统的一致性问题，本质是一个分布式的小文件系统。提供基于类似于文件系统的目录树方式的数据存储，并且可以对树中的节点进行有效控制，从而用来维护和监控存储的数据的状态变化。通过集群数据状态的变化，从而可以达到基于数据的集群管理。

架构图

• Leader：
  Zookeeper集群工作的核心
  事务请求（写操作）的唯一调度和处理者，保证集群事务处理的顺序性；集群内部各个服务器的调度者。对于create，setData，delete等有写操作的请求，则需要统一转发给leader处理，leader需要决定编号、执行操作，这个过程称为一个事务。

• Fllower：
  处理客户端非事务（读操作）请求，转发事务请求给Leader；参与集群Leader选举投票，一般机器为奇数个。

• Observer：
  观察者角色，观察Zookeeper集群的最新状态变化并将这些状态进行同步，对于非事务请求可以进行独立处理，对于事务请求则需要转发给Leader服务器进行处理。

Zookeeper的特性

1. 全局数据一致：保证每台机器看到的数据都是一模一样的
2. 可靠性：如果消息被其中一台服务器接收，那么将被所有的服务器接接收。
3. 顺序性：包括全局有序和偏序：全局有序是指如果在一台服务器上消息a在消息b前发布，则在所有Server上消息a都将在消息b前被发布；偏序是指如果一个消息b在消息a后被同一个发布者发布，a必将排在b前面。
4. 数据更新的原子性：一次数据更新要么成功（半数以上节点成功），要么失败，不存在中间状态。
5. 实时性：Zookeeper保证客户端将在一个时间间隔范围内获得服务器的更新信息，或服务器失效的信息。

集群环境搭建

Zookeeper 集群搭建指的是 ZooKeeper 分布式模式安装。通常由2n+1台 servers 组成。 这是因为为了保证Leader 选举（基于 Paxos 算法的实现） 能过得到多数的支持，所以 ZooKeeper 集群的数量一般为奇数。

Zookeeper 运行需要 java 环境， 所以需要提前安装 jdk。 对于安装leader+follower 模式的集群， 大致过程如下：

1. 配置主机名称到 IP 地址映射配置
2. 修改 Zookeeper 配置文件
3. 远程复制分发安装文件
4. 设置 myid
5. 启动 Zookeeper 集群

下载zookeeeper的压缩包，
下载网址：http://archive.apache.org/dist/zookeeper/下载需要的版本，然后使用rz命令上传到linux指定目录
解压
解压zookeeper的压缩包到/export/servers(指定路径)下去，然后准备进行安装

cd /export/softwares
tar -zxvf zookeeper-3.4.14.tar.gz -C ../servers/

修改配置文件

cd /export/servers/zookeeper-3.4.14/conf/
cp zoo_sample.cfg zoo.cfg
mkdir -p /export/servers/zookeeper-3.4.14/data/
vim  zoo.cfg
dataDir=/export/servers/zookeeper-3.4.14/data
autopurge.snapRetainCount=3
autopurge.purgeInterval=1
server.1=node01:2888:3888
server.2=node02:2888:3888
server.3=node03:2888:3888

添加myid配置
在第一台机器的

/export/servers/zookeeper-3.4.14/zkdatas/这个路径下创建一个文件，文件名为myid ,文件内容为1
echo 1 > /export/servers/zookeeper-3.4.14/data/myid 

装包分发并修改myid的值
安装包分发到其他机器
第一台机器上面执行以下两个命令

scp -r  /export/servers/zookeeper-3.4.14/ node02:/export/servers/
scp -r  /export/servers/zookeeper-3.4.14/ node03:/export/servers/

第二台机器上修改myid的值为2

echo 2 > /export/servers/zookeeper-3.4.14/data/myid

第三台机器上修改myid的值为3

echo 3 > /export/servers/zookeeper-3.4.14/data/myid

三台机器启动zookeeper服务

这个命令三台机器都要执行
/export/servers/zookeeper-3.4.14/bin/zkServer.sh start
查看启动状态
/export/servers/zookeeper-3.4.14/bin/zkServer.sh  status