Redis 使用最多的String 类型是怎么实现的

Redis 使用最多的String 类型是怎么实现的

其实string不光是我们在redis中使用最多的类型,我们日常编程中的业务代码string也是跟我们打交道最多的类型,但是对于string为了方便使用同字符串在相同的map中算出相同的值,我们不得不将一个引用类型变成了一个类值类型。。。从而引发的问题就是每一个string都是一个全新的string,当然这里不讨论带有string池的实现方式。

今天我们就来看看redis中是如何优雅快速的实现基础类型string。

简单动态字符串SDS:

举个栗子:

set hello "world"

这样就生成了一个 key为 hello value为world 键值对

SDS的定义:

/*
 * 保存字符串对象的结构
 */
struct sdshdr {
    
    // buf 中已占用空间的长度
    // 等于SDS锁保存字符串的长度
    int len;

    // buf 中剩余可用空间的长度
    int free;

    // 数据空间
    char buf[];
};

就像下面这张图:

  • len属性的值为5,表示这个sds内的buf存储了一个5字节长的字符串
  • free属性的值为0,表示这个sds内的buf没有可分配使用的空间
  • buf属性是一个char类型的数组,数组的前五个字节分别保存了 'r','e','d','s','i',而最后一个字节则保存了空字符'\0'需要注意的是这个'\0'是不计算在len属性里的。

下面这张图就是带有free字段具有可使用空间的状态

那么可使用空间到底有什么用,为什么要设置一个大于原有字符串一倍的空间呢?

减少修改字符串时带来的内存重分配次数

很多语言在修改字符串的时候几乎都会充分分配内存,而这种内存重分配涉及复杂的算法,并且可能需要执行系统调用,所以它是一个很耗时的操作。但是在redis中执行速度要求是非常高的,如果这种修改频繁发生的话,会造成性能上的损失。

为了避免这种缺陷,SDS通过未使用空间解除了字符串长度和底层数组长度之间的关联。

通过未使用空间,SDS实现空间预分配和惰性空间释放两种优化策略

  1. 空间预分配

     空间预分配用于优化SDS的字符串增长操作:当SDS的APi对一个SDS进行修改,并且需要对SDS进行空间扩展的时候,程序不仅会为SDS分配修改锁必须要的空间,还会为SDS分配额外的未使用空间。

     分配规则:

         如果对SDS进行修改之后,SDS Len的值将小于1MB,那么程序分配和len属性同样大小的未使用空间,这时SDS len属性的值将和free属性的值相同。

         如果对SDS进行修改之后,SDS len大于等于1MB,那么程序会分配1MB的未使用空间。

  1. 惰性空间释放

        惰性空间释放用于优化SDS的字符串缩短操作:当SDS的API需要缩短SDS保存的字符串时,程序并不立即使用内存重分配来回收缩短后多出来的字节,而是使用free属性将这些字节的数量记录起来,并等待将来使用。

二进制安全:

C字符串中的字符必须符合某种编码(ASCII),并且除了字符串的末尾之外,字符串里面不能包含空字符串,否则最先被程序读入的空字符将被误认为是字符串的结尾,这些限制使得C字符串只能保存文本数据,而不能保存像图像、音频、视频、压缩文件这样的二进制数据。

因为使用了len来判断字符串是否结束而非空字符串,而且SDS的buf属性称之为字节数组的原因--Redis不是用这个数据来保存字符,而是用它来保存一系列二进制数据。使得redis不仅可以保存文本数据,还可以保存任意格式的二进制数据。

参考资料:《Redis设计与实现》

使用Java实现Redis使用Stream作为消息队列的步骤如下: 1.引入Redis客户端依赖 在Java项目中,我们可以使用Jedis、Lettuce等多种Redis客户端,这里以Jedis为例: ``` <dependency> <groupId>redis.clients</groupId> <artifactId>jedis</artifactId> <version>3.6.3</version> </dependency> ``` 2.连接Redis服务 连接Redis服务的方式如下: ``` Jedis jedis = new Jedis("localhost", 6379); // 连接本地redis服务 ``` 3.创建Stream 创建一个Stream的方式如下: ``` String key = "mystream"; // Stream名称 String id = "0"; // 消息ID,第一次创建为0 String field1 = "name"; // 消息内容字段1 String value1 = "张三"; // 消息内容字段1的值 String field2 = "age"; // 消息内容字段2 String value2 = "18"; // 消息内容字段2的值 Map<String, String> message = new HashMap<>(); message.put(field1, value1); message.put(field2, value2); jedis.xadd(key, id, message); ``` 创建一个名为“mystream”的Stream,并且在其中添加一条消息,消息ID为0,消息内容为“{'name': '张三', 'age': '18'}”。 4.消费消息 消费消息的方式如下: ``` String consumer = "mygroup"; // 消费者组名称 String consumerName = "consumer1"; // 消费者名称 String count = "2"; // 一次最多消费的消息条数 List<StreamEntry> messages = jedis.xreadgroup(consumer, consumerName, count, 0, true, "mystream", ">"); for (StreamEntry entry : messages) { // 处理消息 Map<String, String> message = entry.getFields(); System.out.println("id:" + entry.getID() + " message:" + message); } ``` 使用消费者组“mygroup”中的消费者“consumer1”来消费“mystream”中的消息,一次最多消费2条消息,消费开始的位置为最新的未读消息(即“>”),如果消息已被读取,则不再进行消费。 以上即为Java如何实现Redis使用Stream作为消息队列的简要步骤。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值