zookeeper client分析

最新推荐文章于 2024-08-19 11:12:45 发布
最新推荐文章于 2024-08-19 11:12:45 发布
阅读量1.2w 收藏 6
点赞数 1
分类专栏： hbase 文章标签： callback socket 服务器 io 网络 header
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/pwlazy/article/details/8000566
版权
本文深入剖析Zookeeper客户端的工作流程，包括重要概念如ZooKeeper、Watcher、SendThread和EventThread，详细解释了客户端初始化、请求发送与响应处理的过程，以及超时管理和IO模型。此外，还讨论了Watcher与StatCallback的区别。
摘要由CSDN通过智能技术生成

1)几个重要概念 

  • ZooKeeper：客户端入口

  • Watcher：客户端注册的callback

  • ZooKeeper.SendThread: IO线程

  • ZooKeeper.EventThread: 事件处理线程，处理各类消息callback

  • ClientCnxnSocketNIO:继承自ClientCnxnSocket，专门处理IO


2）zookeeper初始化

  • 应用提供watch实例

  • 实例化zookeeper

    • 实例化socket,默认使用ClientCnxnSocketNIO，可通过zookeeper.clientCnxnSocket配置定制

    • 实例化ClientCnxn

    • 实例化SendThread

    • 实例化EventThread

  • 启动zookeeper

    • 启动SendThread

      • 连接服务器（见SendThread.startConnect）

        • 产生真正的socket，见ClientCnxnSocketNIO.createSock

        • 向select注册一个OP_CONNECT事件并连接服务器，由于是非阻塞连接，此时有可能并不会立即连上，如果连上就会调用SendThread.primeConnection初始化连接来注册读写事件，否则会在接下来的轮询select获取连接事件中处理

        • 复位socket的incomingBuffer


        • 连接成功后会产生一个connect型的请求发给服务，用于获取本次连接的sessionid

        • 进入循环等待来自应用的请求，如果没有就根据时间来ping 服务器


最低0.47元/天 解锁文章
pwlazy
关注
专栏目录
03-Zookeeper客户端使用
weixin_40461030的博客
09-27 1028
Curator 是一套由netflix 公司开源的，Java 语言编程的 ZooKeeper 客户端框架，Curator项目是现在ZooKeeper 客户端中使用最多，对ZooKeeper 版本支持最好的第三方客户端，并推荐使用，Curator 把我们平时常用的很多 ZooKeeper 服务开发功能做了封装，例如 Leader 选举、分布式计数器、分布式锁。这就减少了技术人员在使用 ZooKeeper 时的大部分底层细节开发工作。
Zookeeper Client简介
weixin_34167043的博客
07-15 124
直接使用zk的api实现业务功能比较繁琐。因为要处理sessionloss，sessionexpire等异常，在发生这些异常后进行重连。又因为ZK的watcher是一次性的，如果要基于wather实现发布/订阅模式，还要自己包装一下，将一次性订阅包装成持久订阅。另外如果要使用抽象级别更高的功能，比如分布式锁，leader选举等，还要自己额外做很多事情。这里介绍下ZK的两个第三...
ZooKeeper工作原理
最新发布
weixin_72583321的博客
08-19 1004
在Zookeeper集群中，Leader是负责管理集群事务的节点。它负责处理所有的写请求，并将这些请求转化为事务，并提交事务日志。Leader节点还负责发起和决议投票过程，以及更新系统状态。：学习者是Zookeeper中用于接收客户端请求并返回结果的节点。：跟随者是学习者的一种，它们参与到Zookeeper的投票过程中，帮助选举出Leader，并且同步Leader的状态。跟随者也可以处理客户端的读请求。：观察者也是学习者的一种，但它们不参与投票过程。
Zookeeper-Zookeeper client
weixin_34281537的博客
11-23 176
当我写完Zookeeper leader选举后，准备看看Zookeeper的存储和处理客户端请求的时候发现，如果能看看Zookeeper的API是不是在理解后面的过程更好些呢。 Zookeeper的client是通过Zookeeper类提供的。前面曾经说过，Zookeeper给使用者提供的是一个类似操作系统的文件结构，只不过这个结构是分布式的。可以理解为一个分布式的文件系统。我们可以通过Zook...
zookeeper - client介绍（12）
weixin_34018169的博客
05-20 680
概述  先打一个预告，写完这篇zookeeper-client端的文章以后，基本上zookeeper的系列已经完结了，后面会进入flume系列的源码阅读当中，敬请期待，而这篇文章也是上周去听分享时候砸场子答应别人写的文章。  zookeeper-client端主要介绍的内容包括client的核心属性，cli...
zookeeper-server-client 简单例子
08-10
**源码分析** 由于没有具体的源代码，我们只能假设 `src` 目录下包含的是一个简单的 Zookeeper 客户端示例。通常，这样的示例会包括创建 Zookeeper 连接、创建节点、读取节点数据、设置节点数据、监听节点变化等...
python zookeeper api_zookeeper client API实现(python kazoo 的实现)
weixin_39557576的博客
12-22 290
这里主要分析zookeeper client API的实现方式,以python kazoo的实现代码为蓝本进行逻辑分析.一.代码框架及介绍API分为同步模式和异步模式.同步模式是在异步模式的基础上通过一些等待,循环等方式进行实现的.主要实现逻辑如下:基本模式就是建立两个线程,一个线程负责发送请求和接收响应.一个负责根据响应执行对应注册的watcher.大部分语言的实现都是同步模式通过异步模式实现的...
超级好用的Zookeeper可视化工具
06-19
4. **数据导出**：将Zookeeper的数据结构导出为JSON或XML格式，便于备份和分析。 5. **历史记录**：查看节点的修改历史，了解变更过程。 6. **安全设置**：配置认证机制，确保对Zookeeper的操作安全可靠。 ...
Zookeeper C Client分析
热门推荐
阿罗
06-28 1万+
每个zookeeper API必须有一个zhandle。当初始化一个zhandle时（zookeeper_init）首先初始化zhandle的相应字段然后创建两个线程：do_io，do_completion；并且等待这两个线程初始化完成后才返回，这两个线程也要等待彼此初始化完成后，才提供服务（notify_thread_ready）。 1 IO线程/do_io 显然这个线程用于处理io请求（使
zookeeper-clients:基于zookeeper-lite的ZooKeeper Java客户端
05-09
各种基于ZooKeeper Java客户端和实用程序。 客户群 edu.uw.zookeeper.clients.jmx：使用JMX查询ZooKeeper服务器的实用程序。 edu.uw.zookeeper.clients.random：用于生成随机ZooKeeper客户端请求的实用程序。 edu.uw.zookeeper.clients.trace：用于读取和写入ZooKeeper客户端跟踪文件的实用程序。 edu.uw.zookeeper.clients.trace.GetSetClient：跟踪客户端，该客户端测量getData / setData混合工作负载的延迟和吞吐量 edu.uw.zookeeper.clients.trace.TraceGeneratingCacheClient：跟踪生成随机请求的客户端 edu.uw.zookeeper.clients.trace.T
zookeeper监听器原理的详解
08-26
今天小编就为大家分享一篇关于zookeeper监听器原理的详解，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧
zookeeper Java客户端使用
Zev_java的博客
03-02 205
客户端API常规应用 zookeeper 提供了java与C两种语言的客户端。本文引用的是java客户端。引入最新的maven依赖： <!-- https://mvnrepository.com/artifact/org.apache.zookeeper/zookeeper --> <dependency> <groupId>org.apache.zookeeper</groupId> <artifactId>zook
ZooKeeper客户端实战
尽力而为！
01-31 1291
Curator是Netflix公司开源的一套ZooKeeper客户端框架，和ZkClient一样它解决了非常底层的细节开发工作，包括连接、重连、反复注册Watcher的问题以及NodeExistsException异常等。Curator是Apache基金会的顶级项目之一，Curator具有更加完善的文档，另外还提供了一套易用性和可读性更强的Fluent风格的客户端API框架。Curator还为ZooKeeper客户端框架提供了一些比较普遍的、开箱即用的、分布式开发用的解决方案，例如Recipe、共享锁服务等
Zookeeper客户端ZkClient、Curator的使用
qq_39093474的博客
04-12 952
本文主要介绍了操作Zookeeper的几种客户端的基础使用，希望对老铁们会有所帮助。可以去操作zookeeper创建、删除、查询、修改znode节点在原生Zk API中，提供了watcher的机制监听节点，而zkClient将之转换成Listener的概念，就是订阅服务端的事件，从而我们只要实现IZkChildListener 接口相应的方法就能够对事件进行处理。以上监听内容，摘自：zkClient的事件监听机制。
Zookeeper全解析——Client端
Make Progress Everyday!
03-26 1728
Zookeeper全解析——Client端Posted onAugust 10, 2010byHarry_Ding<br />Zookeeper的Client直接与用户打交道，是我们使用Zookeeper的interface。了解ZK Client的结构和工作原理有利于我们合理的使用ZK，并能在使用中更早的发现问题。本文将在研究源码的技术上讲述ZK Client的工作原理及内部工作机制。<br />在看完ZK Client的大致架构以后我希望能有一种简单的方式描述ZK Client的基本结构，想来想去我觉得
已收藏！kafka服务器最大消息
qq_38514574的博客
07-01 196
Part 1微服务架构设计概述 1.1 传统应用架构的问题 1.2 微服务架构是什么 1.3 微服务架构有哪些特点和挑战 1.4 如何搭建微服务架构 Part 2微服务开发框架 2.1 Spring Boot 是什么 2.2 如何使用Spring Boot框架 2.3 Spring Boot生产级特性 Part 3微服务网关 3.1 Node.js 是什么 3.2 如何使用 Node.js 3.3 使用Node.js搭建微服务网关 Part 4微服务注册与发现. 4.1 ZooKeepe
Zookeeper客户端ZkClient、Curator的使用，史上最详细的教程来啦~
zhaoshuangjian
03-08 3984
Zookeeper客户端ZkClient、Curator的使用，史上最详细的教程来啦~
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值