【Redis数据结构与对象】跳跃表
跳跃表是一种有序的数据结构,通过在每个结点中维持多个指向其他节点的指针,从而达到快速访问节点的目的。
跳跃表支持平均O(logN)、最坏O(N)复杂度的结点查找,还可以通过顺序性操作在批量处理结点。
在大部分情况下,跳跃表的效率可以和平衡树列斯,但是跳跃表的实现比平衡树更简单,所以很多程序使用了跳跃表来代替平衡树。
Redis使用跳跃表来作为有序集合键的底层实现之一,如果一个有序集合包含的元素数量比较多,又或者有序集合中元素的成员(member)是比较长的字符串的时候,Redis会使用跳跃表作为有序集合键的底层实现。
Redis有序集合命令:
(1)ZADD key score1 member1 [score2 member2]
向有序集合添加一个或多个成员,或者更新已存在成员的分数
(2) ZCARD key
获取有序集合的成员数
和链表、字典等数据结构广泛应用在Redis内部不同,Redis只在两个地方用到跳跃表:
(1)实现有序集合键
(2)在集群节点中用作内部数据结构
一、跳跃表的实现
跳跃表在源码中为redis.h/zskiplistNode和redis.h/zskiplist两个结构定义。
其中zskiplistNode用于表示跳跃表节点,而zskiplist结构用于保存跳跃表节点相关信息。接下来分Wie跳跃表与跳跃表结点分别介绍
1.1 跳跃表数据结构概述
1、跳跃表头与跳跃表结点数据结构
跳跃表表头zskiplist
/*
* 跳跃表表头
*/
typedef struct zskiplist {
// 表头节点和表尾节点
struct zskiplistNode *header, *tail;
// 表中节点的数量
unsigned long length;
// 表中层数最大的节点的层数
int level;
} zskiplist;
跳跃表结点zskiplistNode
/* ZSETs use a specialized version of Skiplists */
/*
* 跳跃表节点
*/
typedef struct zskiplistNode {
// 成员对象
robj *obj;
// 分值
double score;
// 后退指针
struct zskiplistNode *backward;
// 层
struct zskiplistLevel {
// 前进指针
struct zskiplistNode *forward;
// 跨度
unsigned int span;
} level[];
} zskiplistNode;
图片中的跳跃表,图片最左边是zskiplist的结构,包含以下属性:
(1)header:指向跳跃表表头结点
(2)tail:指向跳跃表表尾结点
(3)level:记录目前跳跃表内,层数最大的结点的层数(表头header结点层数不计算在内)
(4)length:记录跳跃表的长度,也就是跳跃表目前包含节点的数量(表头结点header不计)
图片zskiplist右边是四个zskiplistNode结构,包括属性如下:
(1)层(level):结点中用L1、L2、L3等字样标记结点的各个层。L1代表第一层,L2代表第二层,以此类推。每层有两个属性:
①前进指针 *forward:用于访问位于表尾方向的其他结点,图中有数字的箭头就代表前进指针
②跨度span:跨度记录当前前进指针所指的结点和当前节点的距离,数字箭头上的数字就是跨度。
(2)后退指针 *backward(注意这个是每个跳跃表结点只有一个,与前进指针每个层都有一个不同)。后退指针BW字样标识用于指向位于当前结点的前一个结点,用于从表尾向表头遍历使用。
(3)分值(score):各个结点中的1.0 2.0 3.0 都是节点所保存的分支,在跳跃表中节点按照各自保存的分支从小到大进行排序。
(4)成员对象(obj):各个结点中o1、o2、o3用于结点保存的成员对象。
注意表头结点和其他结点的构造是一样的:表头节点也有后退指针、分值和成员对象,不过表头的这些属性都不会被用到,图中省略了。
接下来对zskiplistNode 和 zskiplist更详细介绍
1.2 跳跃表结点zskiplistNode
数据结构如下:
typedef struct zskiplistNode {
// 层
struct zskiplistLevel {
// 前进指针
struct zskiplistNode *forward;
// 跨度
unsigned int span;
} level[];
// 成员对象
robj *obj;
// 分值
double score;
// 后退指针
struct zskiplistNode *backward;
} zskiplistNode;
1、层
跳跃表结点的level数组可以包含多个元素,每个元素都包含一个指向其他节点的指针,程序可以通过对这些层来加快访问其他结点的速度,一般层数越多访问其他结点的速度就越快。
每次创建一个新的跳跃表结点的时候,程序根据幂次定律(power law, 越大的数字出现的概率就越小)随机生成一个1~32之间的值作为level数组的大小,这个大小就是层的高度。
下图中展示了三个高度为1层、3层与5层的结点,因为C语言的数组索引总是从0开始,所以结点第一层为level[0],第二层为level[1],以此类推。
2、前进指针
每个层都有一个指向表尾方向的前进指针(level[i].forward),用于从表头向表尾方向访问节点。下图中虚线代表了从表头向表尾方向遍历所有跳跃表结点的路径。
(1)迭代程序首先访问跳跃表的第一个节点(表头),然后从第四层的前进指针移动到表中的第二个节点。
(2)在第二个节点的时候,程序沿着第二层的前进指针移动到表的第三个结点
(3)在第三个节点的时候,程序沿着第二层的前进指针移动到表中的第四个节点。
(4)当程序再次沿着第四个节点的前进指针移动的时候,碰到一个NULL,程序知道这个时候已经到达了跳跃表的表尾,结束此次遍历。
3、跨度
层的跨度(level[i].span属性)用于记录两个节点之间的距离:
(1)两个节点之间的跨度越大,他们相距的越远。
(2)指向NULL的所有前进指针的跨度都为0,因为前进指针没有连接向任何结点
事实上,跨度和遍历操作没有很大关系,遍历操作由前进指针就可以完成,跨度的核心目标是计算排位rank:在查找某个节点的过程中,将访问沿途的所有层跨度累加起来,得到的结果就是目标节点在跳跃表中的排位。还记的吗 跳跃表用于对有序集合键的存储,这样就可以保证有序集合键的rank有序了。
例如:
虚线记录了跳跃表中查找分值为3.0、成员对象为o3的结点。沿途经历的层,查找过程只过了一个层并且跨度为3那么目标结点在跳跃表中的排位是3.
4、后退指针
结点的后退指针(backward属性)用于从表尾向表头方向访问节点:跟可以一次跳过多个结点的前进指针不同,每个结点只有一个后退指针,所以每次只能后退至前一个节点。
虚线遍历的过程从表尾向表头遍历所有结点,直到为null为止。这里注意没有最后返回表头,而是除了表头以外的第一个结点。
5.分值和成员对象
结点的分值(score属性)是一个double类型的浮点数,跳跃表中的所有结点都按照分值从小到大排序。
节点成员对象(obj)为一个指针,指向一个字符串对象,而字符串对象则保存着一个SDS值。
同一个跳跃表,各个节点保存的成员对象唯一,多个结点分值是可以详谈,分值相同的结点按照成员对象字典序大小进行排序,成员对象较小的排在前面靠近表头。
例如下列分值相同,则可以推断出成员对象排序:o1<=o2<=o3
1.3 跳跃表 zskiplist结构
使用zskipNode就可以组成跳跃表,但是使用zskiplist结构来持有这些结点,程序更加方便对整个跳跃表进行处理,例如快速访问跳跃表的表头结点和表尾节点,或快速获取跳跃表结点数量。
zskiplist数据结构:
/*
* 跳跃表
*/
typedef struct zskiplist {
// 表头节点和表尾节点
struct zskiplistNode *header, *tail;
// 表中节点的数量
unsigned long length;
// 表中层数最大的节点的层数
int level;
} zskiplist;
header和tail指针分别指向跳跃表的表头和表尾结点,通过这两个指针,程序定位表头节点和表尾结点复杂度为O(1)
通过使用length属性来记录节点的数量,程序可以在O(1)复杂内返回跳跃表长度
level属性O(1)获取跳跃表中层高最大的结点层数(表头结点的层高此处L32不计算在内)。
二、跳跃表API
三、重点小结
1、跳跃表是有序集合的底层实现之一
2、Redis的跳跃表实现由zskiplist和zskiplistNode两个结构组成。其中zskiplist用于保存跳跃表信息(例如表头节点、表尾结点、长度),而zskiplistNode则用于表示跳跃表结点。
3、每个跳跃表结点的层高都是1~32随机数。
4、在同一个跳跃表中,多个结点可以包含相同的分值,但是每个节点的成员对象必须是唯一的。
参考文献:
《Redis设计与实现(第二版)》