延迟队列 java_java – Kafka – 使用高级消费者的延迟队列实现

有一种方法可以使用不同的主题来推送所有要延迟的消息.如果所有延迟的消息都应该在相同的时间延迟之后处理,这将是相当简单的：

while(it.hasNext()) {

val message = it.next().message()

if(shouldBeDelayed(message)) {

val delay = 24 hours

val delayTo = getCurrentTime() + delay

putMessageOnDelayedQueue(message, delay, delayTo)

}

else {

process(message)

}

consumer.commitOffset()

}

所有常规邮件现在都将尽快处理,而那些需要延迟的邮件将被放在另一个主题上.

好的是,我们知道延迟主题的头部的消息是应该首先处理的消息,因为它的delayTo值将是最小的.因此,我们可以设置另一个读取头信息的消费者,检查时间戳是否在过去,如果处理消息并提交偏移量.如果不是,它不会提交偏移量,而是直到那时睡觉：

while(it.hasNext()) {

val delayedMessage = it.peek().message()

if(delayedMessage.delayTo < getCurrentTime()) {

val readMessage = it.next().message

process(readMessage.originalMessage)

consumer.commitOffset()

} else {