五、大数据之 Zookeeper

五、大数据之 Zookeeper

1、Zookeeper的节点类型

​ 持久(Persistent):客户端和服务器端断开连接后,创建的节点不删除

​ 短暂(Ephemeral):客户端和服务器端断开连接后,创建的节点不删除
在这里插入图片描述

​ (1)吃就换目录节点

​ 客户端与Zookeeper断开连接后,该节点依旧存在

​ (2)持久化顺序编号目录节点

​ 客户端与Zookeeper都拿开连接后,该节点依旧存在,只是Zookeeper给该节点名称进行顺序编号

​ (3)临时目录节点

​ 客户端与Zookeeper断开连接后,该节点被删除

​ (4)客户端与Zookeeper断开连接后,该节点被删除,只是Zookeeper给该节点名称进行顺序编号

注意:船舰Znode时设置顺序标识,znode名称后会附加一个值,顺序好是ige单调递增的计数器,有父节点维护。
再者,在分布式系统中,顺序号可被用于所有的事件进行全局排序,这样客户端可以通过顺序号推断时间的顺序
2、Stat结构体

​ (1)czxid-创建节点的事务zxid

​ 每次修改ZooKeeper状态都会收到一个zxid形式的时间戳,也就是Zookeeper事务ID。

​ 事务ID是ZooKeeper中所有修改总的次序。每一个修改都有唯一的zxid,如果zxid1小与zxid2,那么zxid1在zxid2之前发生。

​ (2)ctime-znode被创建的毫秒数(从1970年开始)

​ (3)mzxid-znode最后更新的事务zxid

​ (4)mtime-znode最后修改的毫秒数(从1970年开始)

​ (5)pZxid-znode 最后更新的子节点zxid

​ (6)cversion-znode子节点变化号,znode子节点修改次数

​ (7)dataversion-znode数据变化号

​ (8)aclVersion-znode访问控制列表的变化号

​ (9)ephemeralOwner- 如果是临时节点,这个是znode拥有者的session id。如果不是临时节点则是0.

​ (10)dataLength-znode的数据长度

​ (11)numChildren-znode子节点数量

3、监听器原理

​ (1)首先要有一个main()线程

​ (2)在main()线程中创建Zookeeper客户端,这时就会创建两个线程,一个负责网络连接通信(connect),一个负责监听(listener)。

​ (3)通过connect线程将注册的监听事件发送给Zookeeper

​ (4) 在Zookeeper的注册监听器列表中将注册的监听事件添加到列表中。

​ (5)Zookeeper监听到有数据或路径变化,旧会将这个消息发送个listener线程。

​ (6)listener线程内部调用了process()方法。

​ (7)监听节点数据的变化 get path[watch]

​ (8)监听子节点增减的变化 ls path[watch]

在这里插入图片描述

4、选举机制

​ (1)半数机制:集群中半数以上机器存活,集群可用。所以Zookeeper适合安装奇数台服务器。

​ (2)Zookeeper虽然在配置文件中并没有指定Master 和slave。但是,Zookeeper工作时,是由一个节点Leader,其他则为Follwer,Leader是通过内部的选举机制临时产生时。

​ (3)举例说明选举过程

​ 假设有5台服务器组成Zookeeper集群,它们的id从1-5,同时他们都是最新启动的,也就是没有历史数据,在存放数量这一点上,都是一样的。假设这些服务器依序启动,如图所示:

在这里插入图片描述

​ a、服务器1启动,发起一次选举。服务器1投自己一票。此时服务器1票数一票,不够半数以上(3票),选举无法成功,服务器1状态保持为LOOKING。

​ b、服务器2启动,再次发起一次选举。服务器1和2分别投自己一票并交换选票信息,此时服务器1发现服务器2的ID比自己目前投票推荐的(服务器1)大,更改选举为推荐服务器2.此时服务器1票数0票,服务器2票数2票,没有半数以上结果,选举无法完成,服务器1,2状态保持LOOKING。

​ c、服务器 3 启动,发起一次选举。此时服务器 1 和 2 都会更改选票为服务器 3。此次投票结果:服务器 1 为 0 票,服务器 2 为 0 票,服务器 3 为 3 票。此时服务器 3 的票数已经超过半数,服务器 3 当选 Leader。服务器 1,2 更改状态为FOLLOWING,服务器 3 更改状态为 LEADING。

​ d、服务器 4 启动,发起一次选举。此时服务器 1,2,3 已经不是 LOOKING 状态,不会更改选票信息。交换选票信息结果:服务器 3 为 3 票,服务器 4 为 1 票。此时服务器 4服从多数,更改选票信息为服务器 3,并更改状态为 FOLLOWING。

​ f、服务器 5 启动,同 4 一样当小弟。

5、写数据流程

在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值