redis的消息订阅pub/sub与stream

最新推荐文章于 2024-07-21 13:28:45 发布
最新推荐文章于 2024-07-21 13:28:45 发布
阅读量505 收藏
点赞数
分类专栏： redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sinat_36304757/article/details/108964531
版权
本文深入探讨Redis的Stream数据结构，它提供消息持久化和主从复制功能，类似于Kafka。讲解了关键概念如ConsumerGroup、Last_delivered_id和Pending ids，并列举了消息队列和消费者组的相关命令，如XADD、XGROUPCREATE和XACK。通过实例展示了如何使用Redis Stream实现高效的消息处理和管理。
摘要由CSDN通过智能技术生成

文章目录

1.pub/sub

publish与subscribe用于消息的发布和订阅
pub/sub
订阅者需先订阅该channel,然后发布者再发布消息。puslish命令的返回值为订阅者数量。
psubscribe可以支持通配符:

psubscribe sport*   #可以订阅所有sport开头的channel

2.stream

stream也是redis的消息队列，但它可以实现消息持久化，可以主从复制，可以记录消费者的消费位置，也就是说它更像kafka。
stream结构示意图：
在这里插入图片描述

stream的几个关键概念

  • Consumer Group
    消费者组名，类似kafka中的消费者组。 不同组之间互不影响。
  • Last_delivered_id
    类似kafka中的游标
  • Pending ids
    维护消费者未被确认的消息，也就是还未被ACK的id
  • 消息id格式
    XADD生成的1553439850328-0，就是Redis生成的消息ID，由两部分组成:时间戳-序号。时间戳是毫秒级单位，是生成消息的Redis服务器时间，它是个64位整型（int64）。序号是在这个毫秒时间点内的消息序号，它也是个64位整型

消息队列相关命令

  • XADD 添加消息到队列尾部
  • XTRIM 对流进行修建，限制长度
  • XDEL 删除消息
  • XLEN 获取流包含的元素数量
  • XRANGE 获取消息列表
  • XREVRANGE 反向获取消息列表
  • XREAD 以阻塞或者非阻塞方式获取消息列表

消费者组相关命令

  • XGROUP CREATE 创建消费者组
  • XREADGROUP GROUP 读取消费者组中的消息
  • XACK 将消息标记为已处理
  • XGROUP SETID 为消费者组设置新的最后递送消息ID
  • XGROUP DELCONSUMER 删除消费者
  • XGROUP DESTROY 删除消费者组
  • XPENDING 显示待处理消息的相关信息
  • XCLAIM 转移消息的归属权
  • XINFO 查看流和消费者组的相关信息
  • XINFO GROUPS 打印消费者组的信息
  • XINFO STREAM 打印流信息

stream的命令完整演示说明：《基于Redis的Stream类型的完美消息队列解决方案》

疼疼国王
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Redis-消息队列的三种方案（List、Streams，java基础教学pdf
m0_64867152的博客
12-12 894
有些简单的业务场景，可能不需要重量级的 MQ 组件（相比 Redis 来说，Kafka 和 RabbitMQ 都算是重量级的消息队列） 那你有考虑过用 Redis 做消息队列吗？ 这一章，我会结合消息队列的特点和 Redis 做消息队列的使用方式，以及实际项目中的使用，来和大家探讨下 Redis 消息队列的方案。 一、回顾消息队列 消息队列 是指利用 高效可靠 的 消息传递机制 进行与平台无关的 数据交流，并基于数据通信来进行分布式系统的集成.
redis 流 stream的使用总结 - 消费者组
papaya的博客
02-09 7340
本博客讲述如何使用redis中流stream的组 简言 1. 消费者组（consumer group）允许用户将一个流从逻辑上分成多个不同的流，并让消费者组组下的消费者去处理组中的消息 2. 多个消费者组可以共享同一个流中的元素；但同一个消费者组中的每条消息只能有一个消费者，即不同的消费者将独占组中不同的消息，当一个消费者读取了组中的一条消息后，其他消费者将无法读取这条消息 3. 就目前使...
使用Redis实现消息队列：List、Pub/Sub和Stream的实践
2301_77695569的博客
07-03 1158
Redis是一个高性能的键值存储系统，它的多种数据结构使其成为实现消息队列的理想选择。本文将探讨如何使用Redis的List、Pub/Sub和Stream数据结构来实现一个高效的消息队列系统。使用Lua脚本和Redis Stream实现消息队列，可以充分利用Redis的高性能和Lua脚本的原子性，构建一个高效、可靠的消息队列系统。消费者组的特性进一步增强了消息队列的可用性和扩展性。Redis提供了多种方式来实现消息队列，每种方式都有其适用场景。
Redis Stream的消费者组介绍
吒哇
09-15 5490
Stream是Redis 5.0引入的一种新数据类型，它以一种抽象的方式来构建日志结构的数据。本文主要介绍Redis Streams的消费者组相关的信息。 1 什么是消费者组 在某些问题中，我们想要做的是从同一流中向许多客户端提供不同的消息子集。一个明显有用的例子是处理缓慢的消息：让N个不同的客户端接收流的不同部分来加快消息的处理。例如：如果有三个消费者A1、A2、A3和一个包含消息1、2、3、4、5、6、7的流，那么我们想要达到的是像下面这样分配消息。 为了实现这一点，Redis使用了一...
Redis之消费者组
CodePanda@GPF的博客
02-27 2278
文章目录1. 概念2. 创建消费者组3. 修改消费者组的最后递送消息ID4. 销毁消费者组5. 添加/移除消费者6. 读取消费者组中的消息7. 显示待处理消息的相关信息8. 将消息标记为已经处理9. XCLAIM：转移消息的归属权10. XINFO：查看流和消费者组的相关信息11. 小结 1. 概念 将一个流从逻辑上划分为多个不同的流，并让消费者组属下的消费者去处理组中的消息 2. 创建消费者组 XGROUP CREATE stream group id: 在流stream中创建一个消费者组
redis的五种常用数据结构、Pub/Sub数据结构、Stream数据结构
weixin_40663800的博客
12-02 2547
目录 Redis五种数据结构如下： 1.String 字符串类型 Redis 字符串命令 实战场景： 2.Hash （哈希） Redis hash 命令 实战场景： 3.链表 list Redis 列表命令 实战场景： 4.Set 集合 Redis 集合命令 实战场景; 5.zset 有序集合 Redis 有序集合命令 实战场景： 6-Redis 发布订阅 ...
Consumer group理解深入
weixin_33737134的博客
04-06 176
　　每一个consumer实例都属于一个consumer group，每一条消息只会被同一个consumer group里的一个consumer实例消费。（不同consumer group可以同时消费同一条消息） 　　 　　很多传统的message queue都会在消息被消费完后将消息删除，一方面避免重复消费，另一方面可以保证queue的长度比较少，提高效率。而如上文所将，Kafka并不删...
Redis 消息队列的三种方案（List、Streams、Pub/Sub）
weixin_44742132的博客
01-12 2470
点击蓝色“JavaKeeper”关注我哟加个“星标”，一起成长，做牛逼闪闪的技术人现如今的互联网应用大都是采用 分布式系统架构 设计的，所以 消息队列 已经逐渐成为企业应用系统 内部通信...
深入Redis消息队列：Pub/Sub和Stream的对决【redis第六部分】
todoitbo的博客
11-07 2899
Redis不仅是一个出色的内存数据库，还是一个强大的消息队列平台。本博客将带你进入Redis的消息队列世界，探索两种主要的解决方案：发布/订阅（Pub/Sub）和流（Stream）。我们将研究它们的工作原理、适用场景和如何选择最适合你的解决方案。无论你是新手还是经验丰富的Redis用户，都将从本文中学到有关消息队列的关键知识。
springboot如何判断Redis Stream消费组是否存在
qq_63815371的博客
03-24 784
直接上代码
redis streams_如何在Redis Streams中使用消费者组
cxu0262的博客
06-28 1470
redis streams Roshan Kumar是Redis Labs的高级产品经理。 Redis Streams是Redis 5.0中引入的新数据结构，可让您创建和管理数据流。 在上一篇文章中 ，我展示了如何向流中添加数据，以及如何以多种方式读取数据。 在本文中，我将解释如何在Redis Streams中使用使用者组。 消费者组是一种在多个客户端之间分配消息流以加快处理速度或减轻较慢...
别再用 Redis List 实现消息队列了，Stream 专为队列而生
码哥字节
02-28 1119
上回说到使用 Redis 的 List 实现消息队列有很多局限性，比如：没有良好的 ACK 机制；没有 ConsumerGroup 消费组概念；消息堆积。List 是线性结构，想要查询指定...
《Redis实战篇》七、Redis消息队列
LXYDSF的博客
02-14 1557
《Redis实战篇》七、Redis消息队列
发布/订阅(Redis Pub/Sub) Redis是一个快速稳定的发布/订阅消息系统！来看看。
最新发布
qq_33240556的博客
07-21 189
Redis的发布/订阅（Pub/Sub）系统提供了一种模式，用于实现应用程序之间的消息传递。它基于发布者-订阅者模型，其中消息发布者（Publishers）发送消息到特定的频道（Channels），而消息订阅者（Subscribers）可以订阅这些频道来接收消息。这种模式解耦了消息的生产者和消费者，使得系统更加灵活和可扩展。
重启服务后Redisson队列一直阻塞 不消费过期数据
愤怒的苹果ext的博客
08-30 2557
用做了个延迟队列，但是我重启之后居然不消费到期的数据了，非要我再往队列新增一条才开始消费。一直阻塞状态。
黑马--Redis篇
Empirefree的博客
07-01 2952
狂神说–Redis学习笔记：https://www.cnblogs.com/meditation5201314/p/14882992.html 1.2 基本类型 1.2.1 String 1.2.2 List 先进去的后出来，可看成栈，也可以做队列值不可重复key mapzset key score value 1.3 连接池 1.3.1 连接池类型 1.jedis2.SpringDataRedis：提供了redisTemplate1.内部实现了jdk序列化2.关于乱码：由于SpringMVC内置了jac
Redis基于Stream的消息队列 - 消费者组模式
大河之犬的博客
02-14 1069
消费者组会维护一个标示，记录最后一个被处理的消息，哪怕消费者宕机重启，还会从标示之后读取消息。确保每一个消息都会被消费。消费者组（Consumer Group)：将多个消费者划分到一个组中，监听同一个队列。队列中的消息会分流给组内的不同消费者，而不是重复消费，从而加快消息处理的速度。当处理完成后需要通过XACK来确认消息，标记消息为已处理，才会从。消费者获取消息后，消息处于。
Redis核心技术与实战-学习笔记（十五）：消息队列（Redis的解决方案）
无名小辈
02-25 9409
一.消息队列 消息队列：分布式系统必备的一个基础软件，能支持组件通信消息的快速读写 Redis本身支持数据的快速访问，满足消息队列的读写性能需求 二.Redis适合做消息队列吗？ 消息队列的消息存取需求 消息队列存取消息的过程 在分布式系统中，两个组件要基于消息队列进行通信，一个组件就会把要处理的数据以消息的形式传递给消息队列，然后这个组件就可以继续执行其他操作； 远端的另一个组件从消息队列中把消息读取出来，在本地进行处理。 需求： 组件1需要对采集到的数据进行求和计算，并写入数据库；
Redis-Python交互：流Stream
qq_19268039的博客
12-05 3514
Redis增删改查：独立消费创建消费组消费控制消息的长度 redis5.0 新特性，官方介绍：https://redis.io/topics/streams-intro 参考：https://blog.csdn.net/shellquery/article/details/80562422 增删改查： xadd(self, name, fields, id=’*’, maxlen=None, ...
spring boot Redis提供了Pub/Sub功能 示例 代码
05-29
下面是一个简单的Spring Boot Redis Pub/Sub示例代码： 首先需要在pom.xml中添加redis和spring-boot-starter-data-redis依赖： ```xml <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值