redis Stream:
redis Stream是redis 5.0版本新增加的数据结构。
redis stream主要用于消息队列(MQ,Message Queue),Redis本身是有一个Redis发布订阅(pub/sub)来实现消息队列的功能,但它有个缺点就是消息无法持久化,如果出现网络断开、Redis宕机等,消息就会被丢弃。
简单来说发布订阅(pub/sub)可以分发消息,但无法记录历使消息。
而Redis Stream提供了消息的持久化和主备复制功能,可以让任何客户端访问任何时刻的数据,并且能记住每一个客户端的访问位置,还能保证消息不丢失。
Redis Stream的结构如下所示,它有一个消息链表,将所有加入的消息都串起来,每个消息都有一个唯一的ID和对应的内容:
每个Stream都有一个唯一的名称,它就是Redis的key,在我们首次使用xadd指令追加消息时自动创建。
- Consumer Group:消费组,使用XGROUP CREATE命令创建,一个消费组有多个消费者(Consumer)
- last_delivered_id:游标,每个消费者都会有个游标laset_delivered_id,任意一个消费者读取了消息都会使游标last_delivered_id往前移动
- pending_ids:消费者(Consumer)的状态变量,作用是维护消费者的未确认的id。pending_ids记录了当前已经被客户端读取的消息,但是还没有ack(Acknowledge character:确认字符)
消息队列的相关命令:
- XADD:添加消息到末尾(生产消息)
- XTRIM:对流进行修剪,限制长度
- XDEL:删除消息
- XLEN:获取流包含的元素数量,及消息长度
- XRANGE:获取消息列表,会自动过滤已经删除的消息
- XREVERANGE:反向获取消息列表,ID从大到小
- XREAD:以阻塞或非阻塞方式获取消息列表(消费消息)
消费者组相关命令:
- XGROUP CREATE:创建消费者组
- XREADGROUP GROUP:读取消费者组中的消息
- XACK:将消息标记为“已处理”
- XGROUP SETID:为消费者组设置新的最后递送消息ID
- XGROUP DELCONSUMER:删除消费者
- XGROUP DESTROY:删除消费者组
- XPENDING:显示待处理消息的相关信息
- XCLAIM:转移消费者组的相关信息
- XINFO GROUPS:打印消费者组的信息
- XINFO STREAM:打印流信息
XADD:
使用XADD向队列添加消息,如果指定的队列不存在,则创建一个队列,XADD语法格式:
XADD key ID field value [field value ...]
- key:队列名称,如果不存在就创建
- ID:消息id,我们使用*表示由redis生成,可以自定义,但是要自己保证递增性
- field value:记录,当前消息内容,由一个或多个key