KafkaBroker管理之延迟任务

Kafka Broker的延迟调度机制

有哪些任务是有延迟调度机制呢?

第一类 ,比如说producer的acks = -1 必须等待leader和follower都写完才能返回响应,有一个超时时间,默认是30s(request.timeout.ms),

所以需要在写入一条数据到leader磁盘的之后,就必须有一个延时任务,到期时间是30秒延时任务,放到DalayedOperationPurgatory(延时管理器)中。

假如30秒之前如果所有的follower都写入副本到本地磁盘了,那么和这个任务就会被自动触发苏醒,就可以返回响应结果给客户端了,否则的话,这个延时任务自己指定了最多是30秒到期,如果到了超时时间都没等到,就直接超时返回异常

第二类 ,follower往leader拉取消息的时候,如果发现是空的,此时会创建一个延时拉取任务,延时时间到了之后(比如到了100ms),就给follower返回一个空的数据,然后follower再次发送请求消息,但是如果延时的过程中(还没到100ms),leader写入了消息,这个任务就会自动苏醒,自动执行拉取任务

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值