redis rpop 和brpop在取出队列的一些问题,阻塞

lpush 和 rpush 入队列
lpop 和 rpop 出队列
blpop 和 brpop 阻塞式出队列

废话补不多说上代码:

$redis = new Redis();
$redis->connect('127.0.0.1', 6379);

//发送消息
$redis->lPush($list, $value);

//消费消息
while (true) {
    try {
        $msg = $redis->rPop($list);
        if (!$msg) {
            sleep(1);
        }
        //业务处理

    } catch (Exception $e) {
        echo $e->getMessage();
    }
}

上面代码会有个问题,如果队列长时间是空的,那 rpop 操作就会不断的循环执行,这样会导致 Redis 的 QPS 升高,影响性能。所以我们使用 sleep 来解决,当没有消息的时候阻塞一段时间。但其实这样还会带来另一个问题,就是 sleep 会导致消息的处理延迟增加。这个问题我们可以通过 blpop/brpop 来阻塞读取队列。

blpop/brpop 在队列没有数据的时候,会立即进入休眠状态,一旦数据到来,则立刻醒过来。消息的延迟几乎为零。用 blpop/brpop 替代前面的 lpop/rpop,就完美解决了上面的问题。

还有一个需要注意的点是我们需要是用 try/catch 来进行异常捕获,如果一直阻塞在那里,Redis 服务器一般会主动断开掉空链接,来减少闲置资源的占用。

延迟队列
你是否在做电商项目的时候会遇到如下场景:

订单下单后超过一小时用户未支付,需要关闭订单
订单的评论如果 7 天未评价,系统需要自动产生一条评论
这个时候我们就需要用到延时队列了,顾名思义就是需要延迟一段时间后执行。Redis 可通过 zset 来实现。我们可以将有序集合的 value 设置为我们的消息任务,把 value 的 score 设置为消息的到期时间,然后轮询获取有序集合的中的到期消息进行处理。

实现代码如下:

$redis = new Redis();
$redis->connect('127.0.0.1', 6379);

$redis->zAdd($delayQueue,$tts, $value);

while(true) {
    try{
        $msg = $redis->zRangeByScore($delayQueue,0,time(),0,1);
        if(!$msg){
            continue;
        }
        //删除消息
        $ok = $redis.zrem($delayQueue,$msg);
        if($ok){
            //业务处理
        }
    } catch(\Exception $e) {

    }
}

php链接Redis的时候会有超时时间的,超时以后要重新进行链接,这种长时间需要后台运行的进程一定要注意处理好异常,所以下面的代码仅供参考

while (true) {
    try {
        $element = $redis->brPop($queue, 0);

    } catch (RedisException $redisException) {
        // 断开连接的话要重新进行连接
        if (!$redis->isConnected()) {
            $redis->connect('127.0.0.1');
        }
    } catch (Exception $exception) {
        // TODO 写入日志或者怎么样的
    }
}

这里又产生了一个问题,同一个任务可能会被多个进程取到之后再使用 zrem 进行争抢,那些没抢到的进程都是白取了一次任务,这是浪费。解决办法:将 zrangebyscore 和 zrem 使用 lua 脚本进行原子化操作,这样多个进程之间争抢任务时就不会出现这种浪费了。

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
Redis中,RPOP命令用于从列表的右侧弹出一个元素。引用\[1\]中的示例展示了如何使用RPOP命令从名为"queue2"的列表中消费消息。在示例中,通过循环不断地使用RPOP命令从列表中弹出消息,并对每个消息进行处理。如果列表中没有消息,则会阻塞等待3秒钟,如果超过3秒仍然没有消息,则返回null。如果返回null,则继续下一次循环。这样可以实现持续地消费消息。 然而,需要注意的是,Redis的列表是一种简单的队列数据结构,不支持数据持久化。引用\[2\]指出,如果消费者下线,数据会丢失;如果Redis宕机,数据也会丢失。此外,如果消息堆积过多,可能会导致缓冲区溢出,并强制将消费者踢下线,导致数据丢失。因此,在实际应用中,使用RPOP命令消费消息可能并不常见,而更常见的是使用其他更可靠的消息队列系统。 总结起来,RPOP命令可以用于从Redis列表中消费消息,但需要注意数据丢失的风险。在实际应用中,可能更适合使用其他支持数据持久化和更可靠的消息队列系统。 #### 引用[.reference_title] - *1* *2* [redis lpush rpop List消息队列实现](https://blog.csdn.net/xiaogg3678/article/details/130282272)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v4^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值