从零学习Zookeeper—Hadoop生态圈(四)

一、特点和数据结构

1.1特点

  • Zookeeper:一个领导者(leader),多个跟随者( follower)组成的集群。

  • Leader负责进行投票的发起和决议,更新系统状态;Follower用于接收客户请求并向客户端返回结果,在选举 Leader过程中参与投票。

  • 集群中只要有半数以上节点存活,Zookeeper集群就能正常服务 。

  • 全局数据一致:每个server保存一份相同的数据副本, client无论连接到哪个 server,数据都是一致的 。

  • 数据更新原子性,一次数据更新要么成功,要么失败。

  • 实时性,在一定时间范围内,client能读到最新数据 。


1.2数据结构

a.Znode有两种类型:

  • 持久(persistent):客户端和服务器端断开连接后,创建的节点不删除;
  • 短暂(ephemeral):客户端和服务器端断开连接后,创建的节点自己删除;

b.Znode有四种形式的目录节点(默认是 persistent);

  • 持久化目录节点(PERSISTENT)
    客户端与zookeeper断开连接后 该节点依旧存在;
  • 持久化顺序编号目录节点(PERSISTENT_SEQUENTIAL)
    客户端与zookeeper断开连接后 该节点依旧存在 只是Zookeeper给该节点名称进行顺序编号;
  • 临时目录节点(EPHEMERAL)
    客户端与zookeeper断开连接后,该节点被删除;
  • 临时顺序编号目录节点(EPHEMERAL_SEQUENTIAL)
    客户端与zookeeper断开连接后,该节点被删除,只是Zookeeper给该节点名称进行顺序编号;

二、环境搭建

搭建链接:Zookeeper搭建


三、内部原理

3.1选举机制

  • 半数机制:集群中半数以上机器存活,集群可用。所以zookeeper 适合装在奇数台机器上;
  • Zookeeper虽然在配置文件中并没有指定master 和slave。但是,zookeeper工作时,是有一个节点为leader,其他则为follower,Leader是通过内部的选举机制临时产生的;
  • leader 的选择机制,zookeeper 提供了三种方式;
    • LeaderElection
    • AuthFastLeaderElection
    • FastLeaderElection

eg.(以FastLeaderElection举例):

        假设有五台服务器组成的zookeeper 集群,它们的id 从1-5,按编号依次启动,它们的选择举过程如下:

  • 服务器1 启动,给自己投票,然后发投票信息,由于其它机器还没有启动所以它收不到反馈信息,服务器1 的状态一直属于Looking(选举状态);
  • 服务器2启动,给自己投票,同时与之前启动的服务器1 交换结果,由于服务器2 的编号大所以服务器2胜出,但此时投票数没有大于半数,所以两个服务器的状态依然是LOOKING;
  • 服务器3启动,给自己投票,同时与之前启动的服务器1,2交换信息,由于服务器3的编号最大所以服务器 3胜出,此时投票数正好大于半数,所以服务器3成为领导者,服务器1,2成为小弟;
  • 服务器4启动,给自己投票,同时与之前启动的服务器1,2,3交换信息,尽管服务器4的编号大,但之前服务器3已经胜出,所以服务器4只能成为小弟;
  • 服务器5启动,后面的逻辑同服务器4成为小弟;

3.2选举机制中的概念

  • Serverid:服务器 ID
    比如有三台服务器,编号分别是1,2,3;编号越大在选择算法中的权重越大;
  • Zxid:数据 ID
    服务器中存放的最大数据ID;值越大说明数据越新,在选举算法中数据越新权重越大;
  • Epoch:逻辑时钟
    或者叫投票的次数,同一轮投票过程中的逻辑时钟值是相同的;每投完一次票这个数据就会增加,然后与接收到的其它服务器返回的投票信息中的数值相比,根据不同的值做出不同的判断;
  • Server状态:选举状态
    • LOOKING,竞选状态;
    • FOLLOWING,随从 状态,同步 leader状态,参与投票;
    • OBSERVING,观察状态 ,同步 leader状态,不参与投票;
    • LEADING,领导者状态;

3.3 监听器原理

在这里插入图片描述


3.4 写数据流程

在这里插入图片描述


PS:如果有写错或者写的不好的地方,欢迎各位大佬在评论区留下宝贵的意见或者建议,敬上!如果这篇博客对您有帮助,希望您可以顺手帮我点个赞!不胜感谢!

原创作者:wsjslient

作者主页:https://blog.csdn.net/wsjslient

参考来源:https://blog.csdn.net/qq_35241080/article/details/106181382


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值