分布式系统的瓶颈以及zookeeper相关特性

最新推荐文章于 2024-01-26 14:49:00 发布
最新推荐文章于 2024-01-26 14:49:00 发布
阅读量1k 收藏 2
点赞数
分类专栏： ZooKeeper 文章标签： 分布式系统的瓶颈 zookeeper的特性
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/longgeqiaojie304/article/details/86038970
版权

分布式系统的瓶颈以及zookeeper相关特性

1、分布式系统的瓶颈

两幅图可以用于表示系统中的高并发场景

 

2、zookeeper的特性

  • 一致性：数据一致性，数据按照顺序分批入库
  • 原子性：事物要么成功要么失败，不会局部化（局部化：zookeeper集群中的所有节点数据修改要么全部成功，要么全部失败，不会某个节点数据修改成功。）
  • 单一视图：客户端连接集群中的任一zk节点，数据都是一致的
  • 可靠性：每次对zk的操作状态都会保存在服务端
  • 实时性：客户端可以读取到zk服务端的最新数据

如果感兴趣的童鞋，可以观看我下一篇博客：zookeeper之JDK安装

Drogon Brother
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
微服务分布式系统架构之zookeeper与dubbo1
08-03
简介：介绍如何在windows和linux环境下面安装zookeeper，方便开发调试以及正式部署下载zookeeper https://zookeeper.a
ZooKeeper 用的好好地，Kafka 为什么要抛弃 ZooKeeper？
热门推荐
LoveSummer
05-23 4万+
可能看到这里有人会说，那为何一开始不这么实现？因为 ZooKeeper 是一个功能强大且经过验证的工具，在早期利用它来实现一些功能，多简单哟，都不需要自己实现。要不是 ZooKeeper 的机制导致了这个瓶颈，也不可能会有这个改造的。软件就是这样，没必要重复造轮子，合适就好。参考资料：
Zookeeper集群的特点
lovoo的博客
06-28 618
ZooKeeper 数据模型的结构与 Unix 文件系统很类似，整体上可以看作是一棵树，每个节点称做一个 ZNode。每一个 ZNode 默认能够存储 1MB 的数据，每个ZNode都可以通过其路径唯一标识。Znode可以通过路径进行访问，类似于文件系统中的目录结构。每个节点可以包含子节点，也可以是叶子节点。Zookeeper使用Znode来存储和管理数据，可以用来实现分布式锁、分布式队列、配置管理等功能。
Zookeeper的性能优化实践
禅与计算机程序设计艺术
01-21 905
1.背景介绍 1. 背景介绍 Apache Zookeeper是一个开源的分布式协调服务，它提供了一种可靠的、高性能的协同机制，用于构建分布式应用程序。Zookeeper的核心功能包括：集群管理、数据同步、配置管理、领导选举等。在分布式系统中，Zookeeper被广泛应用于实现一致性哈希、分布式锁、分布式队列等。 随着分布式系统的不断发展和扩展，Zookeeper的性能成为了关键的考量因素。...
京东 ClickHouse 高可用实践
过往记忆大数据
09-22 1423
导读：京东OLAP采取ClickHouse为主Doris为辅的策略，有3000台服务器，每天亿次查询万亿条数据写入，广泛服务于各个应用场景，经过历次大促考验，提供了稳定的服务。本文介绍了C...
ZooKeeper 有哪些特性？
dd2016124的博客
02-23 3524
ZooKeeper 特性如下： 1. 顺序一致性（Sequential Consistency）：来自相同客户端提交的事务，ZooKeeper 将按照其提交顺序依次执行； 2. 原子性（Atomicity）：于 ZooKeeper 集群中提交事务，事务将 “全部完成” 或 “全部未完成”，不存在 “部分完成”； 3. 单一系统镜像（Single System Image）：客户端连接到 ZooKeeper 集群的任意节点，其获得的数据视图都是相同的； 4. 可靠性（Reliability）：事务一旦
分布式服务协调框架ZooKeeper
03-01
ZooKeeper是一种为分布式应用所设计的高可用、高性能且一致的开源协调服务框架，它可以实现同步服务，配置维护、命名服务、分布式锁等分布式基础服务。Zookeeper提供基于类似于文件系统的目录节点树方式的数据存储，...
分布式同步系统Zookeeper的优化.pdf
08-10
#资源达人分享计划#
分布式系统中zookeeper实现配置管理+集群管理
02-24
Kafka在很多公司被用作分布式高性能消息队列，kafka之前我只用过redis的list来做简单的队列处理，也还算好用，可能数据量比较小，也是单机运行，未出现过问题，用作轻量级消息队列还是比较好用的。而redis的作者...
zookeeper的五个特性
liulangcheshou的博客
05-28 4641
1.构造高可用集群 zookeeper的选举模式保证了集群的相对稳定性，从而使得集群是高可用的。 2.集群全局配置文件管理 即统一资源配置，在一个偌大的集群环境中，假设你需要对该集群的配置文件作修改，假设集群很庞大，手动去修改是一件不太现实的事，不但费时费力，还极有可能造成差错，zookeeper可以自动帮我们完成配置文件的分发，既高效又准确。 3.发布与订阅 ...
ZooKeeper 特点
loftiest的博客
10-29 773
特点 1）Zookeeper：一个领导者（Leader），多个跟随者（Follower）组成的集群。 2）集群中只要有半数以上节点存活，Zookeeper集群就能正常服务。所 以Zookeeper适合安装奇数台服务器。 3）全局数据一致：每个Server保存一份相同的数据副本，Client无论连接到哪个Server，数据都是一致的。 4）更新请求顺序执行，来自同一个Client的更新请求按其发送顺序依次执行。 5）数据更新原子性，一次数据更新要么成功，要么失败。 6）实时性，在一定时间范围内，Client能
ZooKeeper 核心知识总结！
最新发布
程序员高级码农的博客
01-26 874
Zookeeper 基本介绍Apache ZooKeeper 是由Apache Hadoop的子项目发展而来，为分布式应用提供高效且可靠的分布式协调服务。在解决分布式数据一致性方面，ZK没有直接采用Paxos算法，而是采用了ZAB（ZooKeeper Atomic Broadcast）协议。ZK可以提供诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知，集群管理，Master选举，分布式锁，分布式队列等功能。
万字详解 Zookeeper 的五个核心知识点
AI乔治
01-15 418
1 ZooKeeper简介 ZooKeeper是一个开源的分布式协调框架，它的定位是为分布式应用提供一致性服务，是整个大数据体系的管理员。ZooKeeper会封装好复杂易出错的关键服务，将高效、稳定、易用的服务提供给用户使用。 如果上面的官方言语你不太理解，你可以认为ZooKeeper=文件系统+监听通知机制。 1.1 文件系统 Zookeeper维护一个类似文件系统的树状数据结构，这种特性使得Zookeeper不能用于存放大量的数据，每个节点的存放数据上限为1M。每个子...
Zookeeper的配置和概念
YoYoYoWhatIsUp的博客
06-28 317
zookeeper的学习和zookeeper的基本配置
对Zookeeper的一些分析
weixin_30381793的博客
06-08 273
zookeeper不是为高可用性设计的由于要跨机房容灾，很多系统实际上是需要跨机房部署的。出于性价比的考虑我们通常会让多个机房同时工作，而不会搭建N倍的冗余。也就是说单个机房肯定撑不住全流量（你能设想谷歌在全球只剩下一个机房在干活吗）。由于zookeeper集群只能有一个master，因此一旦机房之间连接出现故障，zookeeper master就只能照顾一个机房，其他机房运行的业务模块由于没...
zookeeper 简介
xiaojie19871116的博客
06-01 4286
一直对zookeeper的应用和原理比较迷糊，今天看一篇文章，讲得很通透，分享如下：  场景一 有这样一个场景：系统中有大约100w的用户，每个用户平 均有3个邮箱账号，每隔5分钟，每个邮箱账需要收取100封邮件，最多3亿份邮件需要下载到服务器中(不含附件和正文)。用20台机器划分计算的压力，从 多个不同的网路出口进行访问外网，计算的压力得到缓解，那么每台机器的计算压力也不会很大了。
ZooKeeper Observers解决节点过多时写性能下降问题
weixin_34336292的博客
02-23 483
ZooKeeper Observers Observers: Scaling ZooKeeper Without Hurting Write Performance How to use Observers Example use cases Observers: Scaling ZooKeeper Without Hurting Write Performance Althoug...
虚拟机模板机 分布式集群 OpenResty Hadoop Zookeeper
05-29
虚拟机模板机是一种虚拟化技术，它可以将一个虚拟机系统的快照保存为一个模板，再通过这个模板来创建多个相同配置的虚拟机。这样可以方便地批量部署和管理虚拟机系统。 分布式集群是指将多台计算机通过网络连接起来，形成一个整体系统，并共同完成一些计算任务。分布式集群可以提高系统的可靠性、可扩展性和性能等方面的指标。 OpenResty是一个基于Nginx的Web应用服务器，它可以将Lua脚本嵌入到Nginx配置文件中，从而实现高性能的Web应用开发。 Hadoop是一个分布式计算框架，它可以将大量的数据分布式存储和处理。它包括两个核心组件：Hadoop Distributed File System（HDFS）和MapReduce计算模型。 Zookeeper是一个分布式应用程序协调服务，它可以管理分布式系统中的配置信息、命名服务、分布式锁等。Zookeeper使用ZAB协议来维护多个Zookeeper服务器之间的数据一致性。 这些技术均是分布式系统中常用的技术，可以用于构建大规模、高可用和高性能的分布式系统。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值