zookeeper集群服务搭建

zookeeper集群服务搭建

ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。

ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。

ZooKeeper包含一个简单的原语集，提供Java和C的接口。

ZooKeeper代码版本中，提供了分布式独享锁、选举、队列的接口，代码在zookeeper-3.4.3\src\recipes。其中分布锁和队列有Java和C两个版本，选举只有Java版本。今天我们在linux上来搭建一个zookeeper集群服务。

一、所需要工具

虚拟机VMware Workstation Pro、rhel-server-6.5-x86_64-dvd.iso (redhat)红帽镜像、linux版本jdk、zookeeper-3.4.9.tar.gz

jdk官网下载地址是（ http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html）

zookeeper官网下载地址是：（ http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.9/）

之所以采用虚拟机，是个人搭建学习的时候没有太多机器来模拟，而且搭建的时候我们选择3台来集群，所以新建了三台虚拟机。

二、安装zookeeper（虚拟机系统的安装和jdk安装就省略了）

（1）虚拟机安装

（2）启动虚拟机，ifconfig查询ip地址，并用xshell操作虚拟机

虚拟机129IP地址是：192.168.164.129

虚拟机130IP地址是：192.168.164.130

虚拟机131IP地址是：192.168.164.131  

（3）zookeeper安装

一般不是在root用户下安装应用的，但是作为服务集群搭建测试，这里选择的是root用户

将 zookeeper-3.4.9.tar.gz放置于linux上某一个目录之下，这里如图所示，从左到右分别是129、130/131

        这里虚拟机129放置于/home/spirits/,虚拟机130和虚拟机131放置于/home/zhaoyi/

       

      执行tar -zxvf  zookeeper-3.4.9.tar.gz命令，然后去到解压文件下面的conf/目录下，新建zoo.cfg,内容如下：

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/tmp/zookeeper //数据目录，这里其实一般不放置于/tmp目录之下，因为这是临时的。一般我们会放置于和zookeeper
                       //同一个目录下面如/home/spirits/zookeeper-3.4.9/data

#dataLogDir=/home/zhaoyi/zookeeper-3.4.9/logs   日志目录,一般放置zookeeper同一个目录下面，可配置可不配置

clientPort=2181

server.129=192.168.164.129:2888:3888
server.130=192.168.164.130:2888:3888
server.131=192.168.164.131:2888:3888

参数说明：
①tickTime：心跳时间，毫秒为单位。

②initLimit：这个配置项是用来配置 Zookeeper 接受客户端（这里所说的客户端不是用户连接 Zookeeper服务器的客户端，而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10 个心跳的时间（也就是 tickTime）长度后 Zookeeper 服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒。

③syncLimit：这个配置项标识 Leader 与 Follower 之间发送消息，请求和应答时间长度，最长不能超过多少个 tickTime 的时间长度，总的时间长度就是 5*2000=10 秒。

④dataDir：存储内存中数据库快照的位置。

⑤clientPort：监听客户端连接的端口

⑥server.A=B：C：D：其中 A 是一个数字，表示这个是第几号服务器；B 是这个服务器的 ip 地址；C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口；D 表示的是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的 Leader，而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式，由于 B 都是一样，所以不同的 Zookeeper 实例通信端口号不能一样，所以要给它们分配不同的端口号。

（4）dataDir参数对应目录下创建myid文件，将内容设置为上⑥中的A值，用来标识不同的服务器，从左到右分别是129、130、131

（5）将zoo.cfg分别在所有服务器上对应目录都复制一份，从左到右分别是129、130、131

三、测试zookeeper

（1）各节点上启动 zkServer.sh start

（2) 各节点查看状态 zkServer.sh status

注：如果状态 是Mode: follower 或者 Mode: leader 说明集群成功。

可能出现的问题：

（1）Error contacting service. It is probably not running.

无法启动的问题，使用zkServer.sh start-foreground启动查看日志。

（2）报错/tmp/zookeeper/myid file is missing

原因：zk集群中的节点需要获取myid文件内容来标识该节点，缺失则无法启动；

解决方法：在zk数据文件存放目录下（见 $ZK/conf/zoo.cfg，dataDir属性），创建myid文件并写入一个数字用来标识本节点（类似这个节点的身份证）。

三台机器分别执行：
echo  129 > /tmp/zookeeper/myid
echo  130 > /tmp/zookeeper/myid
echo  131 > /tmp/zookeeper/myid

由于配置在tmp目录，重启机器可能会丢失。

（3）其中一台zookeeper是单例状态 Mode: standalone ，重启下服务试试。

（4）报错java.net.NoRouteToHostException: No route to host (Host unreachable)

解决方法：关闭防火墙或者添加端口

1、关闭防火墙

1) 重启后生效
开启： chkconfig iptables on
关闭： chkconfig iptables off

2) 即时生效，重启后失效
开启： service iptables start
关闭： service iptables stop

3）查看防火墙状态
service iptables status

2、添加端口（本人没有测试过）

修改/etc/sysconfig/iptables 文件，执行以下命令，80是端口号
-A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 80 -j ACCEPT

四、集群成功

则说明集群成功