REDIS：STREAM消费者组的使用

已于 2023-08-20 16:08:17 修改
阅读量382 收藏
点赞数
文章标签： redis 数据库 缓存
于 2023-08-19 15:37:08 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_45266399/article/details/132380041
版权

必须Redis5.0以上。

1、创建消费者组

XGROUP CREATE key groupName ID [MKSTREAM]
  • key：队列名称
  • groupName：消费者组
  • ID：起始ID标识，$代表最后一个消息，0代表队列中的第一个消息
  • MKSTREAM：队列不存在时自动创建队列

2、删除指定消费者组

XGROUP DESTORY key groupName

3、给指定的消费者组添加消费者

XGROUP CREATECONSUMER key groupName consumerName

4、删除消费者组中的指定消费者

XGOUP DELCONSUMER key groupName consumerName

5、从消费者组读取消息

XREADGROUP GROUP group consumer [COUNT count] [BLOCK milliseconds] [NOACK] STREAMS key [keys ...] ID [ID ...]
  • group：消费者组名
  • consumer：消费者名称，如果消费者不存在，会自动创建一个消费者
  • count：本次查询的最大数量
  • BLOCK milliseconds：没有消息时的最大等待时间
  • NOACK：无需手动ACK，获取到消息后自动确认
  • STREAM key：指定队列名称
  • ID：获取消息的起始ID：
    • “>”：从下一个未消费的消息开始
    • 其它：根据指定id从pending-list中读取已消费但未确认的消息，例如0，是从pending-list中的第一个消息开始，当消费完成后，该消息会从pending-list中删除，则下一条消息变为第一条消息，继续读取。

 6、确认消息

XACK 队列名 组名 消息id

 7、查看pending-list中的消息

XPENDING 队列名 组名 - + 10

        pending-list中存储的是已消费但却还未确认的消息，即可能的情况就是，处理完消息后宕机导致没有确认消息，则这条消息会存储在pending-list。 

哇库哇库wakuwaku
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
redis:Redis协议Erlang实现
04-08
Redis redis是在Erlang中实现redis协议的应用程序和库。 用法 rebar3 shell 序列化器 使用redis:encode/1函数以Redis数据格式编码Erlang术语： % integer redis : encode ( 1 ). % simple string redis : encode (<< " test " >>). % bulk string redis : encode ({ bulk_string , << " test " >>). % array redis : encode ([ 1 , 2 , 3 ,<< " test " >>, { bulk_string , << " test " >>}]). % error redis : encode ({ error , << " my message " >>}). 使用redis:
flask-redis:使用Redis作为存储实现Flask会话接口
05-04
烧瓶-redis 使用Redis作为存储实现Flask会话接口。 依存关系 在运行flask run在同一文件夹flask run与redissesion.py一起运行之前，请使用pipenv安装这些依赖项 pipenv --python 3.7 pipenv shell pipenv install flask run 登录
求不更学不动之Redis5.0新特性Stream尝鲜
weixin_34321977的博客
06-01 1160
Redis5.0最近被作者突然放出来了，增加了很多新的特色功能。而Redis5.0最大的新特性就是多出了一个数据结构Stream，它是一个新的强大的支持多播的可持久化的消息队列，作者坦言Redis Stream狠狠地借鉴了Kafka的设计。 Redis Stream的结构如上图所示，它有一个消息链表，将所有加入的消息都串起来，每个消息都有一个唯一的ID和对应的内容。消息是持久化的，Redis重启后...
Redis万字笔记 深入浅出redis
igg08的博客
07-29 1004
万字笔记分享。作者心得。全程干货。欢迎收藏
Redis Stream队列与多线程模型
qq_44027353的博客
03-28 676
Redis5.0版本新出stream数据结构，是实现消息队列的功能的。Redis Stream 的结构如上图所示,每一个Stream都有一个消息链表，将所有加入的消息都串起来，每个消息都有一个唯一的 ID 和对应的内容。每个 Stream 都有唯一的名称，它就是 Redis 的 key，在我们首次使用xadd指令追加消息时创建的。每个 Stream 都可以挂多个消费组，每个消费组会有个游标last_delivered_id在 Stream 数组之上往前移动，表示当前消费组已经消费到哪条消息了。每个消费组都有
redis消费组的创建与使用
qq_36740038的博客
04-25 619
请注意，我们可能会多次或一次处理消息（至少在消费者失败的情况下，但也涉及Redis持久性和复制的限制，请参阅有关此主题的特定部分）。这样，Alice、Bob和组中的任何其他消费者都能够从同一流中读取不同的消息，阅读他们尚未处理消息的历史记录，或将消息标记为已处理。如果ID是“>” 该命令将仅返回迄今为止从未发送给其他消费者的新消息，还有一个作用，将更新消费者组的最后一个ID。如果您还不知道XACK的工作原理，请不要担心，这里在这个消费者待处理的消息记录中移除这条已经确认的消息。
Redis基于Stream的消息队列 - 消费者组模式
大河之犬的博客
02-14 987
消费者组会维护一个标示，记录最后一个被处理的消息，哪怕消费者宕机重启，还会从标示之后读取消息。确保每一个消息都会被消费。消费者组（Consumer Group)：将多个消费者划分到一个组中，监听同一个队列。队列中的消息会分流给组内的不同消费者，而不是重复消费，从而加快消息处理的速度。当处理完成后需要通过XACK来确认消息，标记消息为已处理，才会从。消费者获取消息后，消息处于。
Redis Stream的消费者组介绍
吒哇
09-15 5008
Stream是Redis 5.0引入的一种新数据类型，它以一种抽象的方式来构建日志结构的数据。本文主要介绍Redis Streams的消费者组相关的信息。 1 什么是消费者组 在某些问题中，我们想要做的是从同一流中向许多客户端提供不同的消息子集。一个明显有用的例子是处理缓慢的消息：让N个不同的客户端接收流的不同部分来加快消息的处理。例如：如果有三个消费者A1、A2、A3和一个包含消息1、2、3、4、5、6、7的流，那么我们想要达到的是像下面这样分配消息。 为了实现这一点，Redis使用了一...
Redis之消费者组
CodePanda@GPF的博客
02-27 2010
文章目录1. 概念2. 创建消费者组3. 修改消费者组的最后递送消息ID4. 销毁消费者组5. 添加/移除消费者6. 读取消费者组中的消息7. 显示待处理消息的相关信息8. 将消息标记为已经处理9. XCLAIM：转移消息的归属权10. XINFO：查看流和消费者组的相关信息11. 小结 1. 概念 将一个流从逻辑上划分为多个不同的流，并让消费者组属下的消费者去处理组中的消息 2. 创建消费者组 XGROUP CREATE stream group id: 在流stream中创建一个消费者组
Redis Streams (2)
qq_45776114的博客
03-21 330
ID可以是任意合法的消息ID，ID对应的消息不必实际存在，并且新ID可以大于、小于等于当前ID。id可以为“$”,表示把消费者组的最后递送消息ID设置为流的最新消息的ID。#使用XINFO查看当前消费组的信息 XINFO GROUPS cgs #cgs为stream的key # 修改最后递送的消息ID XGROUP SETID cgs all-message 0如果新ID大于旧ID，那么消费者可能会漏掉一些原本应该读取的消息。如果新ID小于旧ID，那么消费者可能重新读取到一些之前已经被确认的消息。
stream-cache-redis:在 redis 中缓存流
07-01
npm install stream-cache-redis 用法 var getSlowStream = require ( './my-slow-stream' ) var cachedStream = require ( 'stream-cache-redis' ) ( { cache : redisClient , // redis-compatible object (get/...
flask-redis：使用Redis的Flask扩展
02-05
REDIS_URL = "redis://:password@localhost:6379/0" 如果要连接到Unix套接字，可以将其指定为"unix://:password@/path/to/socket.sock?db=0" 。 用法 建立 要将Redis客户端添加到您的应用程序： from flask ...
cpp_redis：C ++ 11轻量级Redis客户端：异步，线程安全，无依赖项，流水线，多平台-不再维护-请检查https：github.comcpp-rediscpp_redis
01-30
它没有网络模块，因此您可以自由配置自己的模块，也可以使用默认模块（ ）例cpp_redis :: client cpp_redis::client client;client.connect();client.set( " hello " , " 42 " );client.get( " hello " , [](cpp_...
【Redis】Redis 的学习教程（十）之使用 Redis 实现消息队列
sco5282的博客
09-18 3086
消息队列需要满足的要求：Redis 提供了三种不同的方式来实现消息队列：因为 list 底层的实现就是一个「链表」，在头部和尾部操作元素，时间复杂度都是 O(1)，这意味着它非常符合消息队列的模型如果你的业务需求足够简单，想把 Redis 当作队列来使用，肯定最先想到的就是使用 list 这个数据类型常用的命令：生产者：消费者：这个模型非常简单，如下图：当队列中已经没有消息了，消费者在执行 RPOP 时，会返回 NULL我们在编写消费者逻辑时，一般是一个「死循环」，这个逻辑需要不断地从队列中拉取消息进行处理
redis-实现消息队列功能
qq_37520037的博客
10-17 1372
发布与订阅     Redis提供了"发布、订阅"模式的消息机制，其中消息订阅者与发布者不直接通信，发布者向指定的频道(channel)发送消息，订阅者从频道拿取消息。 pubsub简单命令介绍 publish [频道] [消息] 如 publish test yu subscribe [频道] 订阅某个频道的消息 pubsub numsub [频道] 查看订阅数 unsubscribe [频道] 取消订阅 psubscribe ch* 按模
redis实现消息队列(二）
weixin_47345703的博客
02-05 177
redis 5.0版本新增Redis Stream 特性 redis发布订阅 (pub/sub) 来实现消息队列的功能，但它有个缺点就是消息无法持久化，如果出现网络断开、Redis 宕机等，消息就会被丢弃， stream数据结构以及对应的命令操作参考:https://www.runoob.com/redis/redis-stream.html Redis Stream 的结构如下所示，它有一个消息链表，将所有加入的消息都串起来，每个消息都有一个唯一的 ID 和对应的内容： 每个 Stream 都有唯一的名
redis 流 stream的使用总结 - 消费者组
papaya的博客
02-09 7144
本博客讲述如何使用redis中流stream的组 简言 1. 消费者组（consumer group）允许用户将一个流从逻辑上分成多个不同的流，并让消费者组组下的消费者去处理组中的消息 2. 多个消费者组可以共享同一个流中的元素；但同一个消费者组中的每条消息只能有一个消费者，即不同的消费者将独占组中不同的消息，当一个消费者读取了组中的一条消息后，其他消费者将无法读取这条消息 3. 就目前使...
Redis消息队列——Redis Stream
热门推荐
z2431435的博客
05-26 2万+
文章目录消息队列为什么不使用Redis 发布订阅 (pub/sub) 来实现消息队列Stream消息队列相关命令：消费者组相关命令：Stream最简单的生产、消费模型Stream 优点/改进Stream 支持「阻塞式」拉取消息支持发布 / 订阅模式XADD key ID field value [field value ...]Stream 能保证消息不丢失，重新消费Stream 数据会写入到 RDB 和 AOF 做持久化消息堆积时，Stream的处理专业的消息队列 消息队列 “消息队列”是在消息的传输过程
外卖系统关于redis使用解决高并发情况
最新发布
weixin_53908842的博客
05-21 436
操作步骤：1、导入Spring Data Redis的maven坐标2、配置Redis数据源3、编写配置类，创建RedisTemplate对象4、通过RedisTemplate对象操作Redis。
Redis stream查看消费者命令
05-23
Redis Stream提供了多个命令用于查看和管理消费者，以下是一些常用的命令： 1. `XINFO STREAM stream_name`：查看流的相关信息，包括流的长度、最新的ID和最旧的ID等。 2. `XREADGROUP GROUP group_name consumer_name STREAMS stream_name [last-delivered-id]`：读取一组消费者尚未处理的消息，last-delivered-id表示上一次读取的消息ID。 3. `XACK stream_name group_name ID [ID ...]`：确认一组消息已经被一个消费者或多个消费者成功处理。 4. `XPENDING stream_name group_name [start end count] [consumer]`：查询一个消费组中尚未被处理的消息，并返回这些消息的ID、消费者、时间戳以及是否被确认等信息。 5. `XGROUP CREATE stream_name group_name id_or_$ mkstream`：创建一个消费组，id_or_$表示消息ID的起始位置，mkstream表示如果指定的stream不存在，则创建一个新的stream。 6. `XGROUP SETID stream_name group_name id_or_$`：设置消费组的起始位置。 7. `XGROUP DESTROY stream_name group_name`：删除一个消费组及其所有状态。 以上是一些常用的命令，还有其他的命令可以用于管理和查看消费者。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值