漫游ZooKeeper nio通信过程

原创 2018年01月25日 16:18:47

0.引子

最近在看分布式并发工具menagerie,借助ZooKeeper,实现常用的collection、lock。
menagerie 含金量高,可以作为工具储备,也可以借鉴开发技巧。

1.ZooKeeper通信

  • 创建ZooKeeper对象,构造过程中会创建ClientCnxn对象,用于命令的发送、接收
  • ClientCnxn 核心包含两个工作线程:sendThread 和 eventThread
  • ZooKeeper对象构造完成,会内部调用ClientCnxn.start,也就是启动两个核心线程
  • ClientCnxn 负责服务器通信,关键方法submitRequest,sendThread 完成nio的过程
  • 所有的通信以Packet queue的形式体现

2.ClientCnxn.submitRequest分析

上源码:

// 提交操作命令request,结果回填response
public ReplyHeader submitRequest(..., Record request, Record response, ...) {
    ReplyHeader r = new ReplyHeader();
    // Packet 入队列,唤醒select()
    Packet packet = queuePacket(h, r, request, response, null, null, null, watchRegistration);
    // 典型的线程同步操作
    synchronized (packet) {
        while (!packet.finished) {
            packet.wait();
        }
    }
    return r;
}

类似于线程池的设计,任务的提交和处理分开实现,或者称之为生产者消费者的调度。具体的消费、通信实现,参考SendThread 的run方法。

3.SendThread 分析

  • 初始条件,sockKey 是null,触发startConnect(),典型的nio初始化操作
// 初始化SocketChannel
SocketChannel sock = SocketChannel.open();
sock.configureBlocking(false);
sock.socket().setSoLinger(false, -1);
sock.socket().setTcpNoDelay(true);
// 注册至selector
sockKey = sock.register(selector, SelectionKey.OP_CONNECT);
// 发起连接操作
conReq.serialize(boa, "connect");
  • doIO方法 完成服务器读写的调度
  • readResponse方法 完成协议解析,回填response
  • finally, packet.notify,至此,通信完成
// 收尾,线程同步完成
private void finishPacket(Packet p) {
    if (p.watchRegistration != null) {
        p.watchRegistration.register(p.replyHeader.getErr());
    }
    // 如果没有callback,则直接notify,否则加入事件队列,EventThread负责调度
    if (p.cb == null) {
        synchronized (p) {
            p.finished = true;
            p.notifyAll();
        }
    } else {
        p.finished = true;
        eventThread.queuePacket(p);
    }
}
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/tt50335971/article/details/79163372

zookeeper

ZooKeeper是现在企业项目开发之中使用最多的协调一致性组件,其不仅仅在大数据领域内有着重要的作用,在分布式开发领域内依然重要,本课程将为读者讲解ZooKeeper的作用,以及相关的代码开发操作。
  • 2017年01月20日 07:38

zookeeper系列之通信模型(转)

本文的主题就是讲解Zookeeper通信模型,本节将通过一个概要图来说明Zookeeper的通信模型。     Zookeeper的通信架构 在Zookeeper整个系统中,有...
  • z69183787
  • z69183787
  • 2016-10-22 21:15:24
  • 546

Zookeeper请求处理

科技优家 2016-12-14 00:54 一、前言 在前面学习了Zookeeper中服务器的三种角色及其之间的通信,接着学习对于客户端的一次请求,Zookeeper是如何进行处理的。 二、...
  • u011277123
  • u011277123
  • 2016-12-14 12:00:36
  • 678

ZooKeeper原理及使用

ZooKeeper是Hadoop Ecosystem中非常重要的组件,它的主要功能是为分布式系统提供一致性协调(Coordination)服务,与之对应的Google的类似服务叫Chubby。今天这篇...
  • xinguan1267
  • xinguan1267
  • 2014-08-07 17:19:15
  • 166790

【Zookeeper】源码分析之网络通信(三)

一、前言   前面已经学习了NIOServerCnxn,接着继续学习NettyServerCnxn。 二、NettyServerCnxn源码分析   2.1 类的继承关系  public ...
  • aiwuzhi12
  • aiwuzhi12
  • 2017-03-05 10:31:39
  • 338

Zookeeper内部分析

分析Zookeeper内部如何做到分布式数据一致性,将从系统模型、序列化与协议、客户端工作原理、会话、服务端工作原理及数据存储来分析Zookeeper技术底层实现。...
  • tang06211015
  • tang06211015
  • 2016-07-15 22:58:03
  • 6016

Zookeeper常见问题整理

本文将介绍ZK框架中一些比较常见的问题
  • WuyouJie2008
  • WuyouJie2008
  • 2015-05-12 21:23:38
  • 4654

zookeeper系列之通信模型

zookeeper系列之通信模型
  • flykinghg
  • flykinghg
  • 2016-12-15 11:52:51
  • 897

Zookeeper入门学习

简介 Apache Zookeeper是由 Apache Hadoop 的 Zookeeper 子项目发展而来,现在已经成为了 Apache 的顶级项目。Zookeeper 为分布式系统提供...
  • JY_He
  • JY_He
  • 2016-08-27 11:39:30
  • 847

7.zookeeper原理解析-序列化之底层通信数据封装与操作

BinaryInputArchive& BinaryOutputArchive底层通信数据封装与操作     BinaryInputArchive是对于Da...
  • u010311445
  • u010311445
  • 2015-05-11 19:54:11
  • 2229
收藏助手
不良信息举报
您举报文章:漫游ZooKeeper nio通信过程
举报原因:
原因补充:

(最多只允许输入30个字)