大数据入门之zookeeper的功能及工作原理,完结版

本文深入探讨Zookeeper作为大数据组件的角色,包括其数据复制策略、写任意模式、Zookeeper的角色描述、工作目的、Zab协议、选举算法(Basic Paxos和Fast Paxos)以及同步流程。通过对Zookeeper的工作原理分析,揭示了其在确保数据一致性、可靠性和高可用性方面的重要性。
摘要由CSDN通过智能技术生成

大数据入门之zookeeper的功能及工作原理,完结版

 

本文接“上文”继续讲解zookeeper相关的技术点,所以序号接上文。

想了解大数据其他知识点可以点击文章末尾“了解更多”查看

11.分布式与数据复制

Zookeeper作为一个集群提供一致的数据服务,自然,它要在所有机器间做数据复制。数据复制的好处:

(1)、容错:一个节点出错,不致于让整个系统停止工作,别的节点可以接管它的工作;

(2)、提高系统的扩展能力:把负载分布到多个节点上,或者增加节点来提高系统的负载能力;

(3)、提高性能:让客户端本地访问就近的节点,提高用户访问速度。

从客户端读写访问的透明度来看,数据复制集群系统分下面两种:

(1)、写主(WriteMaster) :对数据的修改提交给指定的节点。读无此限制,可以读取任何一个节点。这种情况下客户端需要对读与写进行区别,俗称读写分离;

(2)、写任意(Write Any):对数据的修改可提交给任意的节点,跟读一样。这种情况下,客户端对集群节点的角色与变化透明。

对zookeeper来说,它采用的方式是写任意。通过增加机器,它的读吞吐能力和响应能力扩展性非常好,而写,随着机器的增多吞吐能力肯定下降(这也是它建立observer的原因),而响应能力则取决于具体实现方式,是延迟复制保持最终一致性,还是立即复制快速响应。

12.Zookeeper角色描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值