Redis可以使用ZSET(有序集合)实现延迟队列。
延迟队列的基本思路是将需要延迟执行的任务按照执行时间放入有序集合中,使用任务的执行时间作为分值,任务的唯一标识作为成员,然后使用Redis的定时器功能定时检查有序集合中是否有任务的执行时间到达,如果到达则将任务取出执行。
具体实现步骤如下:
-
将任务按照执行时间放入有序集合中,使用任务的执行时间作为分值,任务的唯一标识作为成员。
ZADD delay_queue <执行时间> <任务标识>
-
启动一个定时器,定时检查有序集合中是否有任务的执行时间到达。
ZRANGEBYSCORE delay_queue 0 <当前时间> LIMIT 0 1
这里使用ZRANGEBYSCORE命令查找有序集合中分值在0到当前时间之间的任务,LIMIT 0 1表示只取第一条符合条件的任务。
-
如果有任务的执行时间到达,则将任务取出执行,并从有序集合中删除。
ZREM delay_queue <任务标识>
-
重复步骤2和步骤3,实现延迟队列的持续运行。
需要注意的是,Redis的定时器是单线程的,所以在高并发场景下可能会有性能瓶颈。另外,延迟队列中的任务执行时间应尽量精确,避免任务过早或过晚执行的问题。
扩展:基于MQ的死信队列其实也可用于做延迟队列
步骤:
1、把消息放到一个队列中(rocketMq为例子这个队列没有消费者,给消息设置了messageDelayLevel(单位秒)既是延迟时间)
2、当到了超时时间后变成死信,MQ把死信交给绑定好的死信交换机,由死信交换机在交给目标队列,监听者监听这个目标队列即可
优点:使用简单,mq帮我们管理了整个过程,可以持久化保存,不容易丢失任务
缺点:MQ的死信队列不区分topic,如果只是引入mq做延迟队列大题小用。