LHon（学习笔记篇）——Zookeeper

一、Zookeeper概述

Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目，它是一个基于观察者模式设计的分布式分布式服务管理框架，负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zookeeper就负责通知已经在Zookeeper上注册的观察者作出相应的反应。

Zookeeper=文件系统+通知机制

大致工作机制：每当有服务启动时，都会去Zookeeper集群中注册自己（创建临时节点），在客户端启动的时候，会获取当前在线服务列表，并注册监听，当某个新服务上线或者某个服务下线时，都会给客户端发送服务节点上下线通知，客户端便会重新获取当前在线服务列表，并注册监听。

1.特点

• 一个领导者（Leader），多个观察者（Follower）组成的集群；
• 集群中只要有半数以上节点存活，Zookeeper集群就能正常服务；
• 全局数据一致，每个Server保存一份相同的数据副本，Client无论连接到哪个Server，数据都是一致的；
• 数据更新原子性，一次数据更新要么成功，要么失败；
• 实时性，在一定时间范围内，Client能读到最新数据。

2.数据结构

Zookeeper的数据结构与Unix文件系统很类似，整体上可以看作是一颗树，每个结点称作一个ZNode，每一个ZNode默认能存储1MB的数据，每个ZNode都可以通过其路径唯一标识。

其结构就用一幅图来说明吧（来自Linux系统的目录结构）

3.应用场景

Zookeeper提供的服务包括：统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等。

在分布式环境下：

• 经常需要对应用或服务进行统一命名，便于识别；
• 配置文件同步很常见，一般要求一个集群中，所有节点的配置信息是一致的，比如Kafka集群；
• 实时掌握每个节点的状态是必要的，Zookeeper可以实时监控节点状态变化，它可以将节点信息写入一个ZNode，监听这个ZNode可获取它的实时状态变化。

配置管理可交由Zookeeper实现，可以将配置信息写入Zookeeper的一个ZNode，各个客户端服务器监听这个ZNode的变化，一旦ZNode中的数据被修改，Zookeeper将通知各个客户端服务器。

在Zookeeper中记录每台服务器的访问数，访问数最少的服务器去处理最新的客户端请求。

4.下载安装

这个直接参考我的另一篇博客吧 - - 一看就会的Linux系统安装Zookeeper

5.内部原理

选举机制
1）其实在上面就说了，集群中半数以上机器存活，集群可用。所以Zookeeper适合安装奇数台服务器；
2）Zookeeper虽然在配置中没有指定Leader和Follower。但是，它在工作的时候，有一个节点为Leader，其它则为Follower，Leader是通过内部的选举机制临时产生的。
3）其选举过程大致如下：现假设有5个服务，Server1（myid=1）启动后，将票投给自己，现在没有其它服务与它通信，所以它一直处于LOOKING状态，没有Leader产生；Server2（myid=2）启动了，也将票投给自己，Server1发现投给自己不行后，将票投给myid最大的Server2，此时Server2拥有2票，但是票数未过半，此时也没有Leader产生；Server3（myid=3）启动了，将票投给自己，Server1和Server2发现投给自己不行之后，于是都把票投给Server3，此时Server3票数过半，所以它就是Leader，后续服务启动后不再更换。也就是每个服务启动后，都会将票投给自己，如果不行，则投给myid最大的，一旦有服务票数过半，则它就是Leader。

节点类型
1）持久（Persistent）：客户端和服务器断开连接后，创建的节点不删除。
2）短暂（Ephemeral）：客户端和服务器断开连接后，创建的节点自动删除。

二、基本使用

1.shell命令操作

[zk: localhost:2181(CONNECTED) 7] help   //查看所有命令
ZooKeeper -server host:port cmd args
        stat path [watch]
        set path data [version]
        ls path [watch]
        delquota [-n|-b] path
        ls2 path [watch]
        setAcl path acl
        setquota -n|-b val path
        history 
        redo cmdno
        printwatches on|off
        delete path [version]
        sync path
        listquota path
        rmr path
        get path [watch]
        create [-s] [-e] path data acl
        addauth scheme auth
        quit 
        getAcl path
        close 
        connect host:port
[zk: localhost:2181(CONNECTED) 8] ls /   //查看当前znode所包含的信息
[zookeeper]
[zk: localhost:2181(CONNECTED) 9] ls2 /  //查看当前节点详细数据
[zookeeper]
cZxid = 0x0
ctime = Thu Jan 01 08:00:00 CST 1970
mZxid = 0x0
mtime = Thu Jan 01 08:00:00 CST 1970
pZxid = 0x0
cversion = -1
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 0
numChildren = 1
[zk: localhost:2181(CONNECTED) 11] create /node1 "zs"  //创建节点node1，创建时必须有值，这里的值是“zs”,没有值则不会创建成功
Created /node1
[zk: localhost:2181(CONNECTED) 12] ls /
[zookeeper, node1]
[zk: localhost:2181(CONNECTED) 13] create /node1/test "ls" //创建多级节点
Created /node1/test
[zk: localhost:2181(CONNECTED) 15] ls /node1
[test]
[zk: localhost:2181(CONNECTED) 16] get /node1/test  //获取节点的值，此时“ls”被获取
ls
cZxid = 0x3
ctime = Mon Dec 16 16:15:14 CST 2019
mZxid = 0x3
mtime = Mon Dec 16 16:15:14 CST 2019
pZxid = 0x3
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 2
numChildren = 0
[zk: localhost:2181(CONNECTED) 17] create -e /node1/test2 "ww" //创建短暂节点
Created /node1/test2
[zk: localhost:2181(CONNECTED) 19] ls /node1
[test2, test]
[zk: localhost:2181(CONNECTED) 20] create -s /node1/test "mz" //创建有序号的节点，开始序号为当前拥有节点数+1，如果没有，则从0开始
Created /node1/test0000000002
[zk: localhost:2181(CONNECTED) 23] set /node1/test "zzz"  //修改原节点的值
cZxid = 0x57
ctime = Mon Dec 16 17:15:14 CST 2019
mZxid = 0x5c
mtime = Mon Dec 16 17:15:14 CST 2019
pZxid = 0x57
cversion = 0
dataVersion = 1
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 3
numChildren = 0
[zk: localhost:2181(CONNECTED) 24] get /node1/test 
zzz
cZxid = 0x57
ctime = Mon Dec 16 17:17:28 CST 2019
mZxid = 0x5c
mtime = Mon Dec 16 17:17:28 CST 2019
pZxid = 0x57
cversion = 0
dataVersion = 1
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 3
numChildren = 0
[zk: localhost:2181(CONNECTED) 27] delete /node1/test //删除节点
[zk: localhost:2181(CONNECTED) 27] rmr /node1/test //递归删除节点
[zk: localhost:2181(CONNECTED) 28] stat /node1 //查看节点状态
cZxid = 0x56  // 创建节点的事务zxid
ctime = Mon Dec 16 17:15:14 CST 2019  //被创建的毫秒数
mZxid = 0x56 //最后更新的事务zxid
mtime = Mon Dec 16 17:15:14 CST 2019 //最后修改的毫秒数
pZxid = 0x5d //最后更新的子节点zxid
cversion = 4
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 2
numChildren = 2

2.监听器原理

1）首先要有一个main()线程
2）在main()线程中创建Zookeeper客户端，这时就会创建两个线程，一个负责网络通信（connet），一个负责监听（listener）
3）通过connet线程将注册的监听事件发送给Zookeeper
4）在Zookeeper的注册监听器列表中将注册的监听事件添加到列表中
5）Zookeeper监听到有数据或路径变化，就会将这个消息发送给listener线程
6）listener线程内部调用process()方法

常见的监听

• 监听节点数据的变化
• 监听节点增减的变化

3.写数据流程