Redis6种底层数据结构之整数集合

1.1 什么是整数集合

  整数集合是集合键(也就是SET)的底层实现之一,当一个集合只包含整数值元素,且集合的元素数量不多时,Redis就会使用整数集合作为集合键的底层实现

1.2 结构

typedef struct intset {
    //编码方式
    uint32_t encoding;

    //集合包含的元素数量
    uint32_t length;

    //保存元素的数组
    int8_t contents[];
} intset;

  虽然intset结构将contents属性声明为int8_t类型的数组,但实际上contents数组并不保存任何int8_t类型的值,保存的类型取决于encoding属性的值
  length属性记录了整数集合包含的元素数量,也即是contents数组的长度
  数组是整数集合的底层实现:整数集合中的每个元素都是数组中的一个数组项,各个项在数组中的按值的大小从小到大排列,且没有任何重复项。
  如果encoding属性的值为INTSET_ENC_INT16,那么contents就是一个int16_t类型的数组,数组里的每个项都是一个int16_t类型的整数值(最小值为-32768,最大值为32767)
  如果encoding属性的值为INTSET_ENC_INT32,那么contents就是一个int32_t类型的数组,数组里的每个项都是一个int32_t类型的整数值(最小值为-2147483648,最大值为2147483647)
  如果encoding属性的值为INTSET_ENC_INT64,那么contents就是一个int64_t类型的数组,数组里的每个项都是一个int64_t类型的整数值(最小值为-9223372036854775808,最大值为9223372036854775807)

1.3 升级

  每当将一个新元素添加到整数集合里,并且新元素的类型比整数集合现有所有元素的类型都要长时,整数集合要先进行升级,然后才能将新元素添加到整数集合中。比如向一个底层为int16_t数组的整数集合中添加一个int64_t类型的整数值时,整数集合已有的所有元素都会被转化为int64_t类型。复杂度为O(N)
  升级整数集合并添加新元素的过程如下:
  1)根据新元素的类型,扩展整数集合底层数组的空间大小,并为新元素分配空间
  2)将底层数组现有的所有元素都转换成与新元素相同的类型,并将类型转换后的元素放置到正确的位置上,而且在放置元素的过程中,需要继续维持底层数组的有序性质不变
  3)将新元素添加到底层数组里面
  举个例子,现在有一个INTSET_ENC_INT16编码的整数集合,集合中包含三个int16_t类型的元素,如下图所示:
        在这里插入图片描述

  因为每个元素都占用16位空间,所以整数集合底层数组的大小为3*16=48位
        在这里插入图片描述
  现在要将类型为int32_t的整数值65535添加到整数集合里面,因为65535的类型int32_t比整数集合当前所有元素的类型都要长,所以添加元素之前,需要先对整数集合进行升级,过程如下:
  1)扩展整数集合底层数组的大小,因为每个int32_t整数值需要占用32位空间,在空间重分配之后,底层数组的大小将是32 * 4 = 128位。此时元素1、2、3仍然是int16_t类型,依旧保存在数组的前48位里面。
        在这里插入图片描述

  2)将3个元素转换成int32_t类型,并将转换后的元素放置到正确的位上面,在放置元素的过程中,需要维持底层数组的有序性质不变
  首先元素3在4个元素中排名第三,所以它将被移动到contents数组的索引2位置上,也就是数组64位至95位的空间内,如下图所示:
    在这里插入图片描述
  接着元素2在4个元素中排名第二,它将被移动到contents数组索引1的位置上,也就是数组的32位至63位的空间内,如下图所示:
在这里插入图片描述

  接着元素1在4个元素中排名第一,它将被移动到contents数组索引0的位置上,也就是数组的0位至31位的空间内,如下图所示:
在这里插入图片描述

  3)最后,元素65535在4个元素中排名第四,所以它将被添加到contents数组的索引3位置上,也就是数组的96位至127位的空间内,如下图所示:
在这里插入图片描述

  最后将整数集合encoding属性的值从INTSET_ENC_INT16改为INTSET_ENC_INT32,并将length属性值从3改成4,设置完后的整数集合如下图所示:
        在这里插入图片描述

  每次向整数集合中添加新元素都可能会引起升级,而每次升级都需要对底层数组中已有的所有元素进行类型转换,所以添加新元素的时间复杂度为O(n) 。
  虽然升级会浪费内存,但是整数集合可以让集合同时保存3种类型的值,很灵活,且升级操作只会在有需要的时候进行,这可以尽量节省内存。
  最后:升级之后是无法降级的。所以只支持升级,不支持降级

Redis 中的 Set 数据类型是一种无序且不包含重复元素的集合底层采用了两种数据结构来实现:**整数集合(intset)** 和 **哈希表(hashtable)**。这两种结构的选择是根据 Set 的实际使用场景动态决定的,以兼顾内存效率和操作性能。 当 Set 中的元素数量较少,并且所有元素都是整数时,Redis 会优先使用 **intset** 作为底层实现。intset 是一种紧凑的、基于数组的结构,专门用于存储整数集合。它的内存占用小,访问速度快,适用于存储少量整数的情况。intset 支持插入、删除和查找操作,其中删除操作通过查找目标元素的位置,然后进行内存移动和空间重新分配来实现[^4]。这种实现方式在数据量小的情况下具有较高的性能。 当 Set 中的元素数量增加到一定程度,或者元素类型不再是全部为整数时,Redis 会自动将底层实现从 intset 切换为 **哈希表(hashtable)**。在哈希表实现中,Set 的每个元素作为哈希表的 key,而 value 被设置为 NULL。这种方式支持任意类型的元素存储,并且由于哈希表的查找、插入和删除操作的平均时间复杂度为 O(1),因此在大规模数据场景下依然保持高效的性能[^3]。 Redis 的这种动态切换机制确保了在不同使用场景下都能获得最佳的性能和内存利用率。例如,在存储少量整数时使用 intset 可以显著减少内存开销;而在处理大量数据或非整数元素时,切换为哈希表可以保证操作的高效性[^2]。 ### Set 的操作特性 - **插入操作**:如果当前 Set 使用的是 intset,插入操作会检查是否需要升级编码格式(如从 16 位升级到 32 位),以容纳更大的整数;如果使用的是哈希表,则直接将元素作为 key 插入。 - **删除操作**:intset 中的删除会涉及查找元素位置并进行内存移动,而哈希表中则是标准的哈希删除操作。 - **查找操作**:intset 使用二分查找来判断元素是否存在,而哈希表则通过哈希函数定位 key。 ### 示例代码:Set 的基本操作 以下是一个简单的 Redis 客户端示例,展示如何使用 Set 的基本命令: ```python import redis # 连接 Redis 服务器 r = redis.Redis(host='localhost', port=6379, db=0) # 添加元素到 Set r.sadd('myset', 'element1', 'element2', 'element3') # 获取 Set 中的所有元素 elements = r.smembers('myset') print("Set elements:", elements) # 删除一个元素 r.srem('myset', 'element2') # 再次获取所有元素 elements = r.smembers('myset') print("Set elements after removal:", elements) ``` 这段代码展示了如何使用 Redis 的 `sadd` 命令向 Set 中添加元素,使用 `smembers` 获取所有元素,以及使用 `srem` 删除特定元素。 ### 总结 Redis 的 Set 数据类型通过 **intset** 和 **哈希表** 的组合实现了高效且灵活的存储机制。intset 在存储少量整数时表现出色,而哈希表则在处理大规模数据或非整数类型时提供了稳定的性能。这种设计不仅优化了内存使用,还确保了各种操作的高效性,使得 Redis 能够在不同的应用场景下保持出色的性能表现。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值