分布式之ZooKeeper概述

分布式之ZooKeeper概述

Zookeeper是什么？

ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务。
ZooKeeper是一个为分布式应用提供一致性服务的软件，提供包括：配置维护、域名服务、分布式同步、组服务等功能。

Zookeeper能做什么？

1.命名服务
2.实现分布式系统中的配置服务
3.简单好用的分布式协调框架
4.提供分布式同步服务
5.可以作为一个简单的可靠的消息队列

Zookpeer的原理

1.ZK提供类似文件目录树的数据结构，每个节点可以设置byte[]数据
2.节点类型可以是持久化保存的，也可以是临时的(EPHEMERAL)

Zookeeper 特点

原子性：更新要么成功，要么失败，不会出现部分更新。
可靠性：一旦数据更新成功，将一直保持，直到新的更新。
单一性：无论客户端连接哪个server，都会看到同一个视图。
及时性：客户端会在一个确定的时间内得到最新的数据。
等待无关：慢的或者失效的client不得干预快速的client的请求，使得每个client都能有效的等待。
顺序一致性：按照客户端发送请求的顺序更新数据，包括全局有序和偏序两种：
        全局有序是指如 果在一台服务器上消息a在消息b前发布，则在所有Server上消息a都将在消息b前被发布；
        偏序是指如果一个消息b在消息a后被同一个发送者发布，a必将排在b前面。

ZK应用场景

命名服务

ZK创建一个节点后，节点的路径就是全局唯一的，可以作为全局名称使用。

分布式配置管理

ZK上创建配置信息，分布式客户端监听该配置信息；统一修改一次即可。

分布式集群管理

1.每个节点(进程)启动的时候在ZK路径 GroupMembers下建立子路径(节点ID为路径名)，通信地址Endpoint则写到路径的Data中。
2.每个节点监听ZK路径GroupMembers，当集群中增 加新节点或故障节点下线，每个节点都会获得通知。

消息队列

消息发送方在ZK上创建一个Path，发送消息时，将消息信息设置为该Path的内容，而消息接收方则监听此Path，实现了简单可靠的发布订阅模式的消息队列。

分布式锁

1.Zookeeper能保证数据的强一致性，用户任何时候都可以相信集群中每个节点的数据都是相同的。
2.一个用户创建一个节点作为锁，另一个用户检测该节点，如果存在，代表别的用户已经锁住，如果不存在，则可以创建一个节点，代表拥有一个锁。

Zookeeper的性能调优和规模

1.ZK的日志文件和snapshort文件分别放在两块硬盘上
2.Leader节点不允许Client连接

网上所能见到的信息，最大为1万个连接(客户端)， 5节点的ZK集群。

Zookeeper 集群主要配置项介绍

tickTime=2000
tickTime 这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每 个 tickTime 时间就会发送一个心跳。

initLimit=10
initLimit 这个配置项是用来配置 Zookeeper 接受客户端(这里所说的客户端不是用户连接 Zookeeper 服务器的客户端,而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器)初始化连接时最长 能忍受多少个心跳时间间隔数。
当已经超过 10 个心跳的时间(也就是 tickTime)长度后 Zookeeper 服 务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒。

syncLimit=5
syncLimit 这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少 个 tickTime 的时间长度,总的时间长度就是 5*2000=10 秒。

dataDir=/home/mike/zookeeper/node-01/data
dataDir 顾名思义就是 Zookeeper 保存数据的目录,默认情况下 Zookeeper 将写数据的日志文件也保存在 这个目录里。

clientPort=2181
clientPort 这个端口就是客户端(应用程序)连接 Zookeeper 服务器的端口,Zookeeper 会监听这个端 口接受客户端的访问请求。

server.A=B:C:D[:observer]
A 是一个数字，表示这个是第几号服务器;
B 是这个服务器的 IP 地址(或者是与 IP 地址做了映射的主机名)；
C 第一个端口用来集群成员的信息交换,表示这个服务器与集群中的 Leader 服务器交换信息的端口；
D 是在 leader 挂掉时专门用来进行选举 leader 所用的端口。

peerType=observer
观察者模式

关于Zookeeper的深层原理和算法如一致性、Paxos等，以及更多应用场景，有兴趣的同学可以继续深入学习。

（完）