【Redis系列5】Redis(有序)集合对象之intset(整数集合)和skiplist(跳跃表)实现原理分析

写在最后

为了这次面试,也收集了很多的面试题!

以下是部分面试题截图

Java程序员秋招三面蚂蚁金服,我总结了所有面试题,也不过如此

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友,可以点击这里获取

下图就是一个intset的集合对象简图:

在这里插入图片描述

encoding

encoding记录了当前集合的编码方式,主要有三种:

  • INTSET_ENC_INT16

此时contents[]内的每个元素都是一个int16_t类型的整数值,范围是:-32768 ~ 32767(-215 ~ 215-1)

  • INTSET_ENC_INT32

此时contents[]内的每个元素都是一个int32_t类型的整数值,范围是:-2147483648 ~ 2147483647(-231 ~ 231-1)

  • INTSET_ENC_INT64

此时contents[]内的每个元素都是一个int64_t类型的整数值,范围是:-9223372036854775808 ~ 9223372036854775807(-263 ~ 263-1)

contents[]

contents[]虽然结构的定义上写的是int8_t类型,但是实际存储类型是由上面的encoding来决定的。

整数集合的升级

假如一开始整数集合中的元素都是16位的,采用了int16_t类型来存储,此时需要再存储一个32位的整数,那么就需要对原先的整数集合进行升级,升级之后才能将32位的整数放入整数集合内。

升级主要有4个步骤:

  • 1、根据新添加元素的类型来扩展底层数组空间的大小,按照升级后现有元素的位数来分配新的空间。

  • 2、将现有的元素进行类型转换,并将转换类型后的元素从后到前逐个重新放回到数组内。

  • 3、将新元素放到数组的头部或者尾部(因为触发升级的条件就是当前数组的整数类型无法存储新元素,所以新元素要么比现有元素都大,要么就比现有元素都小)。

  • 4、将encoding属性修改为最新的编码,并且同步修改length属性。

PS:整数集合一旦升级,将会保持编码,无法降级

升级举例

1、假如我们有一个集合存储的encodingint16_t,内部存储了3个元素:

在这里插入图片描述

2、这时候需要插入一个整数50000,发现存储不下去,而50000是一个int32_t类型整数,所以需要申请新空间,申请空间大小为:4 * 32 - 48=80。

在这里插入图片描述

3、现在新的数组内要放置4个元素,原来的数组排在第3,所以需要将升级后的3移动到64-95位。

在这里插入图片描述

4、继续将升级后的2移动到32-63位

在这里插入图片描述

5、继续将升级后的1移动到0-31位:

在这里插入图片描述

6、最后将50000放到96-127位:

在这里插入图片描述

7、修改encodinglength属性,完成升级。

hashtable编码


hashtable结构在前面讲述哈希对象的时候进行过详细分析,想详细了解的可以点击这里

intset和hashtable编码转换


当一个集合满足以下两个条件时,Redis会选择使用intset编码:

  • 1、集合对象保存的所有元素都是整数值。

  • 2、集合对象保存的元素数量小于等于512个(这个阈值可以通过配置文件set-max-intset-entries来控制)。

一旦集合中的元素不满足上面两个条件,则会选择使用hashtable编码。

有序集合对象

===================================================================

有序集合对象的底层数据结构有两种:skiplistziplist。内部同样是通过编码来进行区分:

| 编码属性 | 描述 | object encoding命令返回值 |

| — | — | — |

| OBJ_ENCODING_SKIPLIST | 使用跳跃表实现的有序集合对象 | skiplist |

| OBJ_ENCODING_ZIPLIST | 使用压缩列表实现的有序集合对象 | ziplist |

skiplist编码


skiplist即跳跃表,有时候也简称为跳表,使用skiplist编码的有序集合对象使用了zset结构来作为底层实现,而zset中同时包含了一个字典和一个跳跃表。

跳跃表

跳跃表是一种有序的数据结构,其主要特点是通过在每个节点中维持多个指向其他节点的指针,从而达到快速访问节点的目的。

大部分情况下,跳跃表的效率可以等同于平衡树,但是跳跃表的实现却远远比平衡树的实现简单,所以Redis选择了使用跳跃表来实现有序集合。

下图是一个普通的有序链表,我们如果要找17,只能从头开始遍历到尾(链表中元素不支持随机访问,所以不能用二分查找,而数组中可以通过下标随机访问,所以二分查找一般适用于有序数组),时间复杂度是O(n)。

在这里插入图片描述

那么假如我们可以直接跳到链表的中间,那就可以节省很多资源了,这就是跳表的原理,如下图所示就是一个跳表的数据结构示例:

在这里插入图片描述

上图中level1,level2,level3就是跳表的层级,每一个level层级都有一个指向下一个相同level层级元素的指针,比如上图我们遍历寻找元素35的时候就有三种方案:

  • 第1种就是执行level1层级的指针,需要遍历7次才能找到元素35。

  • 第2种就是执行level2层级的指针,只需要遍历5次就能找到元素35。

  • 第3种就是执行level3层级的元素,这时候只需要遍历3次就能找到元素35了,大大提升了效率。

skiplist的存储结构

跳跃表中的每个节点是一个zskiplistNode节点(源码server.h内):

typedef struct zskiplistNode {

sds ele;//元素

double score;//分值

struct zskiplistNode *backward;//后退指针

struct zskiplistLevel {//层

struct zskiplistNode *forward;//前进指针

unsigned long span;//当前节点到下一个节点的跨度(跨越的节点数)

} level[];

} zskiplistNode;

  • level(层)

level即跳跃表中的层,其是一个数组,也就是说一个节点的元素可以拥有多个层,即多个指向其他节点的指针,程序可以通过不同层级的指针来选择最快捷的路径提升访问速度。

level是在每次创建新节点的时候根据幂次定律(power law)随机生成的一个介于1~32之间的数字。

  • forward(前进指针)

每个层都会有一个指向链表尾部方向元素的指针,遍历元素的时候需要使用到前进指针。

  • span(跨度)

跨度记录了两个节点之间的距离,需要注意的是,如果指向了NULL的话,则跨度为0

  • backward(后退指针)

和前进指针不一样的是后退指针只有一个,所以每次只能后退至前一个节点。

  • ele(元素)

跳跃表中元素是一个sds对象(早起版本使用的是robj对象),元素必须唯一不能重复

  • score(分值)

节点的分值是一个double类型的浮点数,跳跃表中会将节点按照分值按照从小到大的顺序排列,不同节点的分值可以重复。

上面介绍的只是跳跃表中的一个节点,多个zskiplistNode节点组成了一个zskiplist对象:

最后,附一张自己面试前准备的脑图:

image

面试前一定少不了刷题,为了方便大家复习,我分享一波个人整理的面试大全宝典

  • Java核心知识整理

image

  • Spring全家桶(实战系列)

image.png

Step3:刷题

既然是要面试,那么就少不了刷题,实际上春节回家后,哪儿也去不了,我自己是刷了不少面试题的,所以在面试过程中才能够做到心中有数,基本上会清楚面试过程中会问到哪些知识点,高频题又有哪些,所以刷题是面试前期准备过程中非常重要的一点。

以下是我私藏的面试题库:

image

很多人感叹“学习无用”,实际上之所以产生无用论,是因为自己想要的与自己所学的匹配不上,这也就意味着自己学得远远不够。无论是学习还是工作,都应该有主动性,所以如果拥有大厂梦,那么就要自己努力去实现它。

最后祝愿各位身体健康,顺利拿到心仪的offer!

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友,可以点击这里获取

己想要的与自己所学的匹配不上,这也就意味着自己学得远远不够。无论是学习还是工作,都应该有主动性,所以如果拥有大厂梦,那么就要自己努力去实现它。

最后祝愿各位身体健康,顺利拿到心仪的offer!

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友,可以点击这里获取

  • 5
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值