zookeeper源码分享四 ---- RequestProcessor 处理链路

单机zookeeper RequestProcessor 处理链路

将请求放入LinkedBlockingQueue队列中,通过一个队列中。启动一个线程去消费这个队列,避免了阻塞。在这里插入图片描述
zookeeper的处理是实现RequestProcessor接口的processRequest(Request request) 方法。


PrepRequestProcessor

在这里插入图片描述

在这里插入图片描述
PrepRequestProcessor 没有对读写操作做特殊处理


SyncRequestProcessor

  • 写入事物日志

  • 判断是否进行数据快照,是则进行。数据快照落盘之前都是在内存之中

    公式:
    (logCount > (snapCount / 2 + randRoll)) || (snapSizeInBytes > 0 && logSize > (snapSizeInBytes / 2 + randSize));
    logCount : 当前日志数量
    logSize: 当前日志大小
    snapCount :快照数量,默认10w
    randRoll: 快照生成的随机时间
    snapSizeInBytes:内存快照大小,默认4G
    randSize:快照生成的随机大小

  • 刷新事物日志的输出流(bufferOutputStream),默认的maxBatchSize是1000

每个请求(读/写)都会经过,SyncRequestProcessor 。当是读请求 (hdr = null)时,这时是不会写入事物日志的
在这里插入图片描述
在这里插入图片描述

SyncRequestProcessor - FileTxnLog.append 添加事物日志

在这里插入图片描述
就是将数据按照设计好的二进制格式进行序列化,然后写入事物日志文件中

Util.marshallTxnEntry(hdr, txn, digest); 进行序列化

SyncRequestProcessor - Flush 刷新事物日志的输出流

刷新事物日志的bufferOutputStream流,将数据真正的落盘。

zkDataBase.commit就是刷新bufferOutputStream数据流
在这里插入图片描述
在这里插入图片描述
ZkDataBase.commit
在这里插入图片描述


FinalRequestProcessor 处理真正业务请求的processor,通常作为请求链路最后一层。

  • 写请求进行数据存储
  • 关闭会话操作,进行会话关闭
  • 读请求处理
    在这里插入图片描述

zookeeperServer.processTxn() 处理事物请求的核心
在这里插入图片描述

FinalRequestProcessor.processRequest() - 获取子节点查询示例

  • 请求数据序列化
  • 从内存数据库DataBase中取出当前节点
  • 校验节点的ACL权限
  • 获取该节点下的子节点的path列表
  • 将数据返回给客户端
    在这里插入图片描述
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值