1-2-zookeeper-工作机制（入门简介）

1-zookeeper-工作机制（入门简介）:

ZooKeeper(协调作用)，存数据，通知。

Zk从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，负责存储和管理大家都关心的数据，然后接受观察者的注册，一单这些数据的状态发生变化，Zookeeper就将负责同志已经在Zookeeper上注册的那些观察者做出相应的反应。

ZK是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。

ZK的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。

Zookeeper工作机制

Zookeeper特点

1）、Zookeeper：一个领导者（Leader），多个跟随者（Follower）组成的集群
2）、集群中只要有半数以上的节点存活，Zookeeper集群就能正常服务 。
3）、全局数据一致：每个Server保存一份相同的数据副本，Client无论链接到那个Server，数据都是一致的
4）、更新请求顺序进行，来自同一个Client的更新请求按其发送顺序依次执行。
5）、数据更新原子性，依次数据更新要么成功，要么失败。
6）、实时性，在一定时间范围内，Client能读到最新数据。

Zookeeper数据结构

Zookeeper数据模型的结构和linux文件系统类似，整体上看都是一颗树，每个节点称为一个ZNode。每一个ZNode默认能够存储1MB的数据，每个ZNode都可以通过其路径唯一标识。

Zookeeper安装

1．安装前准备

（1）安装Jdk

（2）拷贝Zookeeper安装包到Linux系统下

（3）解压到指定目录

上传到linux服务器software下（需要有hadoop基础入门，集群搭建）。

[root@hadoop102 software]# tar -zxvf zookeeper-3.4.10.tar.gz -C /opt/module/

2．配置修改

（1）将/opt/module/zookeeper-3.4.10/conf这个路径下的zoo_sample.cfg修改为zoo.cfg；

[root@hadoop102 conf]$ cp zoo_sample.cfg zoo.cfg

（2）打开zoo.cfg文件，修改dataDir路径：

[root@hadoop102 zookeeper-3.4.10]$ vim zoo.cfg

修改如下内容：

dataDir=/opt/module/zookeeper-3.4.10/zkData

（3）在/opt/module/zookeeper-3.4.10/这个目录上创建zkData文件夹

[root@hadoop102 zookeeper-3.4.10]$ mkdir zkData

3、单节点测试启动

[root@hadoop102 zookeeper-3.4.10]# cd conf/
[root@hadoop102 conf]# ll
总用量 12
-rw-rw-r–. 1 1001 1001 535 3月 23 2017 configuration.xsl
-rw-rw-r–. 1 1001 1001 2161 3月 23 2017 log4j.properties
-rw-rw-r–. 1 1001 1001 922 3月 23 2017 zoo_sample.cfg
[root@hadoop102 conf]# cp zoo_sample.cfg zoo.cfg
[root@hadoop102 conf]# cd …
[root@hadoop102 zookeeper-3.4.10]# bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.10/bin/…/conf/zoo.cfg
Starting zookeeper … STARTED
[root@hadoop102 zookeeper-3.4.10]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.10/bin/…/conf/zoo.cfg
Mode: standalone
[root@hadoop102 zookeeper-3.4.10]# bin/zkServer.sh stop
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.10/bin/…/conf/zoo.cfg
Stopping zookeeper … STOPPED

4、zoo.cfg参数

Zookeeper中的配置文件zoo.cfg中参数含义解读如下：

1．tickTime =2000：通信心跳数，Zookeeper服务器与客户端心跳时间，单位毫秒
Zookeeper使用的基本时间，服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个tickTime时间就会发送一个心跳，时间单位为毫秒。
它用于心跳机制，并且设置最小的session超时时间为两倍心跳时间。(session的最小超时时间是2*tickTime)

2．initLimit =10：LF初始通信时限
集群中的Follower跟随者服务器与Leader领导者服务器之间初始连接时能容忍的最多心跳数（tickTime的数量），用它来限定集群中的Zookeeper服务器连接到Leader的时限。

3．syncLimit =5：LF同步通信时限
集群中Leader与Follower之间的最大响应时间单位，假如响应超过syncLimit * tickTime，Leader认为Follwer死掉，从服务器列表中删除Follwer。

4．dataDir：数据文件目录+数据持久化路径
主要用于保存Zookeeper中的数据。

5．clientPort =2181：客户端连接端口
监听客户端连接的端口。

5、zookeeper集群安装部署

1．集群规划
在hadoop102、hadoop103和hadoop104三个节点上部署Zookeeper。

2．在hadoop102上修改zoo.cfg配置文件

#######################cluster##########################

server.2=hadoop102:2888:3888

server.3=hadoop103:2888:3888

server.4=hadoop104:2888:3888

配置参数解读

server.A=B:C:D。

A是一个数字，表示这个是第几号服务器；
集群模式下配置一个文件myid，这个文件在dataDir目录下，这个文件里面有一个数据就是A的值，Zookeeper启动时读取此文件，拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。

B是这个服务器的地址

C是这个服务器Follower与集群中的Leader服务器交换信息的端口

D是万一集群中的Leader服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服务器相互通信的端口。

3、在/opt/module/zookeeper-3.4.10/zkData目录下创建一个myid的文件，在文件中添加与server对应的编号：

[root@hadoop102 zkData]$ touch myid

4、修改/opt/module/zookeeper-3.4.10/bin/zkEnv.sh配置文件，配置日志路径和java路径

5、拷贝配置好的zookeeper到其他机器上

[root@hadoop102 module]# xsync zookeeper-3.4.10/

并分别在hadoop103、hadoop104上修改myid文件中内容为3、4

[root@hadoop103 zkData]# echo 3 > myid
[root@hadoop103 zkData]# cat myid
3

4．集群操作

（1）分别启动Zookeeper

[root@hadoop102 zookeeper-3.4.10]# bin/zkServer.sh start

[root@hadoop103 zookeeper-3.4.10]# bin/zkServer.sh start

[root@hadoop104 zookeeper-3.4.10]# bin/zkServer.sh start

（2）查看状态

[root@hadoop102 zookeeper-3.4.10]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.10/bin/…/conf/zoo.cfg
Mode: follower

[root@hadoop103 zookeeper-3.4.10]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.10/bin/…/conf/zoo.cfg
Mode: leader

[root@hadoop104 zookeeper-3.4.10]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.10/bin/…/conf/zoo.cfg
nfig: /opt/module/zookeeper-3.4.10/bin/…/conf/zoo.cfg
Mode: leader

[root@hadoop104 zookeeper-3.4.10]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.10/bin/…/conf/zoo.cfg
Mode: follower

学习路径：https://space.bilibili.com/302417610/，如有侵权，请联系q进行删除：3623472230