Kafka Broker的延迟调度机制
有哪些任务是有延迟调度机制呢?
第一类 ,比如说producer的acks = -1 必须等待leader和follower都写完才能返回响应,有一个超时时间,默认是30s(request.timeout.ms),
所以需要在写入一条数据到leader磁盘的之后,就必须有一个延时任务,到期时间是30秒延时任务,放到DalayedOperationPurgatory
(延时管理器)中。
假如30秒之前如果所有的follower都写入副本到本地磁盘了,那么和这个任务就会被自动触发苏醒,就可以返回响应结果给客户端了,否则的话,这个延时任务自己指定了最多是30秒到期,如果到了超时时间都没等到,就直接超时返回异常
第二类 ,follower往leader拉取消息的时候,如果发现是空的,此时会创建一个延时拉取任务,延时时间到了之后(比如到了100ms),就给follower返回一个空的数据,然后follower再次发送请求消息,但是如果延时的过程中(还没到100ms),leader写入了消息,这个任务就会自动苏醒,自动执行拉取任务