RabbitMQ 如何实现延迟队列?
回答重点:
RabbitMQ 本身不支持延迟消息,但是可以通过它提供的两个特性 TTL(Time-To-Live and Expiration ,消息存活时间)、DLX(Dead Letter Exchanges,死信交换器) 来实现。还可以利用 RabbitMQ 插件来实现。
使用TTL + 死信队列:
在 RabbitMQ 中,通过设置消息的 TTL 和死信交换器可以实现延迟队列。
不给原队列(正常队列)设置消费者,当消息在原队列中达到 TTL 后,由于还未被消费,则会被转发到绑定的死信交换器,消费者从死信队列中消费消息,从而实现消息的延迟处理。
使用 RabbitMQ 插件:延迟消息插件(rabbitmq-delayed-message-exchange):
通过安装 RabbitMQ 的延迟消息插件,可以直接创建延迟交换器(Delayed Exchange)。
在发送消息时,指定消息的延迟时间,RabbitMQ 会在消息达到延迟时间后将其转发到对应的队列进行消费。
扩展知识
TTL 和 DLX 简要说明
- TTL(Time-To-Live):指消息在队列中的存活时间。你可以为队列中的所有消息统一设置TTL,也可以为每条消息单独设置TTL。当消息超过TTL时,消息会被标记为过期。
- 死信队列(DLX):当消息在原队列中过期、被拒绝(nack/reject)或队列已满时,消息会被转发到绑定的死信交换器(DLX)。DLX
可以将消息重新路由到死信队列(即这里的延迟队列)。
TTL + DLX 时序问题
因为队列的特点就是先进先出,如果发送的消息延迟的时间不同,例如第一个延迟 10s、第二个延迟 5s、第三个延迟 1s。
那么后面的消息,需要等 10s 的消息消费完才能消费。当 10s 消息未被消费,则后续的消息都会被阻塞,即使消息设置了更短的延迟。
这就是时序问题。如果一个队列中的消息延迟时间都一致,就可以避免这个问题,因此可以针对不同的延迟时间对应多创建几个队列。
或者可以利用延迟消息插件,插件不会有时序问题。
延迟消息插件原理
插件提供了一种新的交换器类型 x-delayed-message。这种交换器可以像普通的交换器一样,接收消息并根据路由键将消息路由到相应的队列。只不过 x-delayed-message 类型的交换机接收消息投递后,不会直接路由到队列中,而是存储到 Mnesia(Mnesia 是 Erlang 运行时中自带的一个数据库管理系统)中。
等到消息达到可投递时间,消息才会被投递到目标队列中。