Zookeeper的可靠性是怎么保证的？

最新推荐文章于 2023-09-06 17:20:05 发布
最新推荐文章于 2023-09-06 17:20:05 发布
阅读量1.2k 收藏
点赞数
分类专栏： zookeeper 文章标签： zookeeper
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yiwanxingchena/article/details/77948956
版权

技术选型的时候，如果你选Zookeeper，那么肯定要回答一个问题，Zookeeper可靠吗？如果你说“可靠吧，大家都在用”，这回答肯定不行。至少要回答三个问题：Zookeeper是什么？它的工作原理是什么？它是怎样保证可靠性的？

1.Zookeeper是什么？
2.Zookeeper的工作原理是什么？
3.Zookeeper怎样保证可靠性？
    可靠性一般是由两点来保证，一个是冗余，另一个是故障转移。那Zookeeper是怎么做的呢？

CXing4300
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ZooKeeper 如何保证数据一致性？
悟已往之不谏，知来者之可追
08-30 2099
在分布式场景中，ZooKeeper 的应用非常广泛，比如数据发布和订阅、命名服务、配置中心、注册中心、分布式锁等。 ZooKeeper 提供了一个类似于 Linux 文件系统的数据模型，和基于 Watcher 机制的分布式事件通知，这些特性都依赖 ZooKeeper 的高容错数据一致性协议。 那么问题来了，在分布式场景下，ZooKeeper 是如何实现数据一致性的呢？ Zab 一致性协议 ZooKeeper 是通过 Zab 协议来保证分布式事务的最终一致性。Zab（ZooKeeper Atomic Broa
kafka数据可靠性深度解读
01-27
7. **数据持久性和可靠性保证**：Kafka提供了多种配置参数，如`log.retention.hours`和`log.retention.bytes`，用于控制数据保留时间和大小，以平衡存储成本和数据可用性。此外， ISR机制确保只有与leader保持同步的...
ZooKeeper - 一个可靠、可扩展的分布式协调系统
Mrs_haining的博客
10-13 311
ZooKeeper是一个高可用且可靠的协调系统。分布式应用程序使用 ZooKeeper 来存储和调解更新的关键配置信息。ZooKeeper 可用于领导选举、组成员资格和配置维护。另外可以使用ZooKeeper用于事件通知、锁定和作为优先队列机制。它是分布式系统的一种中枢神经系统，其中大脑的作用由协调服务扮演，轴突是网络，过程是被监控和控制的身体部位，事件是用于传递信息的激素和神经递质。每个复杂的分布式应用程序都需要某种协调和编排系统，因此雅虎的 ZooKeeper 人员决定构建一个好的应用程序并将其开源供所
带你快速认识Zookeeper
qq_41875121的博客
10-14 235
愿你生命中有够多的云翳，造就一个美好的黄昏 欢迎关注公众号【渣男小四】，一个喜欢技术更喜欢艺术的青年 一.介绍 　　ZooKeeper 是一种分布式协调服务，用于管理大型主机。在分布式环境中协调和管理服务是一个复杂的过程。ZooKeeper 通过其简单的架构和 API 解决了这个问题。ZooKeeper 允许开发人员专注于核心应用程序逻辑，而不必担心应用程序的分布式特性。 例如在分布式系统中，因为应用部署在不同的服务器上，如果想要修改配置文件或者其他相关的配置，则需要一台一台的...
zookeeper的监听器原理
阳哥的博客
08-22 2860
客户端注册监听它关心的目录节点，当目录节点发生变化（数据改变、节点删除、子目 录节点增加删除）时，ZooKeeper 会通知客户端。监听机制保证 ZooKeeper 保存的任何的数据的任何改变都能快速的响应到监听了该节点的应用程序。 zookeeper只负责通知，具体做不做还要看客户端 1、监听原理详解 （1）首先要有一个main()线程 （2）在main线程中创建Zookeeper客户端，这时就会创建两个线程，一个负责网络连接通信(connet)，一个负责监听(...
Zookeeper解决大型分布式系统的高可靠性
L18207133564的博客
03-08 1464
一：分布式开发难度“部分失败”-->信息在网络的两个节点之间传送出现故障，发送者无法知道接受者是否收到了这个信息。    Zookeeper可以解决上述问题，zookeeper不是让分布式系统避免“部分失败”问题，而是让分布式系统在碰到“部分失败”问题的时候，可以正确的处理解决此类问题，让分布式系统能够正常运行。二：zookeeper在分布式系统中的实际运用场景    1：一组服务器向客户端...
kafka保证数据可靠性的方式
01-20
`ack=0`表示无需等待任何确认，提供最高吞吐量但无数据可靠性保证。`ack=1`意味着只需要首领确认，可能存在数据丢失的风险。而`ack=all`要求所有副本都确认，提供最强的一致性保证，但可能增加延迟。结合`min.insync...
zookeeper 3.8.4
最新发布
05-17
**ZooKeeper 3.8.4：分布式协调服务详解** Apache ZooKeeper 是一个高度可靠的分布式协调服务，广泛应用于...正确理解和使用 ZooKeeper 可以帮助开发者解决许多分布式环境下的难题，提高系统的整体性能和可靠性。
zookeeper的服务容量和自我保护实现思考
chenglinhust的专栏
03-10 887
zookeeper的服务容量和自我保护实现思考1）服务自我保护能力，通过基于租户+Throtting机制，能够对访问请求限流，确保核心服务自我恢复能力；  引入租户管理，为后续限流，性能统计等功能提供一个基础的信息；通过Throtting来达到API的限速（常见的有楼桶算法和令牌桶算法）。2）服务容量扩容能力，通过将部分流量迁移至新搭建Quorum，分散集群访问压力；       通过资源...
【zookeeper】ZooKeeper的特点及应用场景
margu_168的博客
09-06 2679
ZooKeeper（动物园管理员） ，顾名思义，是用来管理Hadoop（大象）、Hive（蜜蜂）、Pig（小猪）的管理员，同时Apache HBase、Apache Solr等众多项目中都采用了ZooKeeper。作为一个集群提供数据一致的分布式协调服务，它最好的方式就是在整个集群中的各服务节点进行数据的复制和同步。数据复制的好处：容错：一个节点出错，不至于让整个集群无法提供服务扩展性：通过增加服务器节点能提高 ZooKeeper 系统的负载能力，把负载分布到多个节点上。
利用keepalived实现高可靠（HA）
weixin_33698823的博客
03-04 74
2019独角兽企业重金招聘Python工程师标准>>> ...
ZooKeeper高频面试题精选
Architect_CSDN的博客
03-14 379
临时有序节点的名称是递增的，因此当客户端创建一个临时有序节点时，它的名称会比其他已经存在的节点更小。客户端可以使用这个特性来实现分布式锁，即，如果一个客户端创建的临时有序节点的名称比它前面的节点更小，则说明它获得了锁，否则说明它没有获得锁。如果主服务器故障，ZooKeeper可以选择一个副本作为新的主服务器，以确保服务的连续性。ZooKeeper的客户端可以注册一个Watcher，当ZNode的数据改变或者ZNode被删除时，服务器会向客户端发送通知，从而触发客户端的Watcher回调函数。
zookeeper 简介
xiaojie19871116的博客
06-01 4304
一直对zookeeper的应用和原理比较迷糊，今天看一篇文章，讲得很通透，分享如下：  场景一 有这样一个场景：系统中有大约100w的用户，每个用户平 均有3个邮箱账号，每隔5分钟，每个邮箱账需要收取100封邮件，最多3亿份邮件需要下载到服务器中(不含附件和正文)。用20台机器划分计算的压力，从 多个不同的网路出口进行访问外网，计算的压力得到缓解，那么每台机器的计算压力也不会很大了。
Zookeeper如何保证数据一致性
lvqinglou的博客
04-12 4205
Zookeeper如何保证数据一致性 ​ 虽说zk是比较老的框架了，但是其一致性的保证放在今天的中间件中依然是很强力的存在。其数据持久化的流程也是非常标准的流程，兼具了性能和一致性的取舍，非常值得我们学习。 1 zk数据同步简述 重要知识点：首先ZK的数据分为两部分，磁盘数据和内存数据 磁盘数据：存储在物理介质上的数据（持久化数据），可能与内存数据不一致。 内存数据：zk在启动时，会从磁盘上加载数据到内存中，加载数据完成、选举完成、数据同步完成才能对外提供服务，运行期间内，客户端访问的
Zookeeper简介及核心概念
热门推荐
mxk4869的博客
07-19 1万+
Zookeeper简介及核心概念
分析Zookeeper的一致性原理
weixin_33834679的博客
04-13 1412
zookeeper（简称zk），顾名思义，为动物园管理员的意思，动物对应服务节点，zk是这些节点的管理者。在分布式场景中，zk的应用非常广泛，如：数据发布/订阅、命名服务、配置中心、分布式锁、集群管理、选主与服务发现等等。这不仅得益于zk类文件系统的数据模型和基于Watcher机制的分布式事件通知，也得益于zk特殊的高容错数据一致性协议。 这里的一致性，是...
zookeeper怎么保证一致性的(ZAB协议)
胖墩的IT博客
08-16 4478
今天阿里来电话面试，我刚睡醒，还特别懵就去电话面试了，我是完了，但是最不可原谅的问题是这么简单的问题我怎么没想起来？这么简单的问题，唉，看来秋招是不用想了，等毕业几年再试试吧？ 怎么保证的一致性，是依赖了ZAB协议 解释：ZAB协议是伪分布式协调服务Zookeeper专门设计的一种崩溃恢复的原子广播协议， 两种基本的模式： 崩溃恢复 消息广播 这两个模式是相辅相成的 消息广播模式就是zoo...
Zookeeper特性分析和核心原理
Feathers的个人笔记
09-21 138
官方对zk的介绍 在 apache.zookeeper.org 上，可以看到针对Zookeeper的相关描述，官网是这么解释Zookeeper的： ZooKeeper is a distributed, open-source coordination service for distributed applications. It exposes a simple set of primiti...
ZooKeeper是如何保证数据一致性的
weixin_44240370的博客
08-05 1万+
前面在讲HDFS和HBase架构分析的时候就提到了Zookeeper。在分布式系统里的多台服务器要对数据状态达成一致，其实是一件很有难度和挑战的事情，因为服务器集群环境的软硬件故障随时会发生，多台服务器对一个数据的记录保持一致，需要一些技巧和设计。 今天要讨论的是分布式系统一致性与Zookeeper的架构 通过之前的文章大家应该已经了解了HDFS为了保证整个集群的高可用，需要部署两台NameNod...
Zookeeper如何保证数据的一致性和可靠性？
06-07
Zookeeper通过ZAB（Zookeeper Atomic Broadcast）协议来保证数据的一致性和可靠性。ZAB协议是Zookeeper内部实现的一种基于原子广播的协议，用于在Zookeeper集群中保证数据的一致性和可靠性。 ZAB协议通过以下两个阶段来保证数据的一致性和可靠性： 1. 阶段一：崩溃恢复 在集群启动时，所有的Zookeeper节点都处于崩溃状态。ZAB协议的第一个阶段是崩溃恢复，它会恢复数据节点的状态，确保所有的节点都拥有相同的数据。 2. 阶段二：消息广播 在阶段一完成后，所有Zookeeper节点都处于可用状态，开始进行数据的更新和操作。ZAB协议的第二个阶段是消息广播，它会确保所有的数据更新和操作都被广播到所有的节点，并且按照相同的顺序进行执行，从而保证数据的一致性和可靠性。 总的来说，Zookeeper通过ZAB协议来保证数据的一致性和可靠性，确保在分布式环境下Zookeeper集群的高可用性和高性能。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值