hadoop yarn 学习读书笔记(2)-rpc-server

rpc server 采用了reactor模型。在nio的基础上自己搭建了reactor的其他框架。

reactor的理论结构:

13153623_aYpx.jpg

rpc server 的reactor实现:

13153624_3DQ1.jpg

rpc server start的调用时序图(这里采用Protobuf的实现类分析):

153412_sLAq_347227.png

rpc server 分别启动了Responder,Listener和Handler,每个都是独立的线程(Handler有多个,每个都是独立线程)。

从代码中发现,Hadoop没有采用netty类似的成熟框架,而是自己实现了reactor框架。所以这里单独分析了下逻辑代码。

hadoop所有的reactor架构代码,都放在org.apache.hadoop.ipc.Server中。(此类为abstract,不能直接实例化)虽然代码管理比较方便,但是对于阅读和开发都是很大的负担。

listener 注册ServerSocketChannel的OP_ACCEPT事件。当有新的连接到达,listener的select就会返回新连接。listener将连接注册并包装后,发给reader。reader监听此链接的OP_READ事件。当有数据到达后,reader的selector将会返回,reader读出数据,反序列化数据成call对象,并将call对象加入queue中。余下的部分,在前面的图中很好的描述了。

 

转载于:https://my.oschina.net/u/347227/blog/1359203

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值