Zookeeper 理论
ZooKeeper概述
- Zookeeper是一个分布式协调服务的开源框架。主要用来解决分布式集群中应用系统的一致性问题。
- ZooKeeper本质上是一个分布式的小文件存储系统。提供基于类似于文件系统的目录树方式的数据存储,并且可以对树中的节点进行有效管理。从而用来维护和监控你存储的数据的状态变化。通过监控这些数据状态的变化,从而可以达到基于数据的集群管理。
ZooKeeper特性
- 全局数据一致:集群中每个服务器保存一份相同的数据副本,client无论连接到哪个服务器,展示的数据都是一致的,这是最重要的特征;
- 可靠性:如果消息被其中一台服务器接受,那么将被所有的服务器接受。
- 顺序性:全局有序是指如果在一台服务器上消息a在消息b前发布,则在所有Server上消息a都将在消息b前被发布。
- 数据更新原子性:一次数据更新要么成功(半数以上节点成功),要么失败,不存在中间状态;
- 实时性:Zookeeper保证客户端将在一个时间间隔范围内获得服务器的更新信息,或者服务器失效的信息。
什么是Zookeeper
分布式协调服务,是一个分布式的小文件存储系统,部署在多台服务器上
特点
全局数据一致:集群中每个服务器保存一份相同的数据副本,client无论连接到哪个服务器读取数据都是相同的
角色
Leader: master 领导者、管理者
处理事务形操作(增、删、改)
Follower:Slave 服从者、工作者
处理非事务操作(查询)
转发事务形操作给leader
参与选举
Observer 观察者
处理非事务操作(查询)
转发事务形操作给leader
LookIng 竞选状态
集群搭建:
Zookeeper节点类型
临时节点:会话结束,节点消失,不能有子节点
永久节点:和会话没有关系,可以有子节点
序列节点:在给定的文件名后追加序列号(序列号依次递增)
ZooKeeper Watcher
1、客户端向服务端注册某节点的Watcher
2、服务端事件发生触发Watcher
3、客户端回调Watcher得到触发事件情况
ZooKeeper集群角色
-
Leader:
Zookeeper集群工作的核心
事务请求(写操作)的唯一调度和处理者,保证集群事务处理的顺序性;
集群内部各个服务器的调度者。
对于create,setData,delete等有写操作的请求,则需要统一转发给leader处理,leader需要决定编号、执行操作,这个过程称为一个事务。 -
Follower:
处理客户端非事务(读操作)请求,转发事务请求给Leader;
参与集群Leader选举投票。
此外,针对访问量比较大的zookeeper集群,还可新增观察者角色。 -
Observer:
观察者角色,观察Zookeeper集群的最新状态变化并将这些状态同步过来,其对于非事务请求可以进行独立处理,对于事务请求,则会转发给Leader服务器进行处理。
不会参与任何形式的投票只提供非事务服务,通常用于在不影响集群事务处理能力的前提下提升集群的非事务处理能力。 -
Leader: master 领导者、管理者
处理事务形操作(增、删、改) -
Follower:Slave 服从者、工作者
处理非事务操作(查询)
转发事务形操作给leader
参与选举 -
Observer 观察者
处理非事务操作(查询)
转发事务形操作给leader -
LookIng 竞选状态
shell
节点操作必须使用绝对路径
创建
create [-s 序列] [-e 临时节点] 路径 数据
create -e /dashuju dashujudata
修改
set 路径 数据
set /dashuju dashuju1234
查询
ls /dashuju 查看子节点
ls2 /dashuju 查看子节点和本节点详细信息
get /dashuju 获得本节点数据和详细信息
删除
delete 删除一个节点
rmr 删除包含子节点的节点
Watcher
- 客户端向服务端注册Watcher、服务端事件发生触发Watcher、客户端回调Watcher得到触发事件情况
选举机制
以五个节点的Zookeeper为例,按照12345顺序启动集群。
-
1、第1个节点启动后,投一票给自己。2345节点没有启动,第1个节点的票数不过半,不能是Leader,进入looking状态。
-
2、第2个节点启动后,投一票给自己。345节点没有启动,第2个节点id为2,权重大于第1个节点id为1,所以获得第1个节点的1票,此时第2个节点有2票。票数不过半,不能是Leader,进入looking状态。
-
3、第3个节点启动后,投一票给自己。45节点没有启动,第3个节点id为3,权重大于第2个节点id为* * 2,所以获得第2个节点的2票,此时第3个节点有3票。票数过半,状态为Leader。第1、2节点变为Follower.
-
4、第4个节点启动后,投一票给自己。 但此时第3个节点为Leader,第4个节点状态变为Follower。
-
5、第5个节点启动后,投一票给自己。 但此时第3个节点为Leader,第5个节点状态变为Follower。