redis 介绍和数据结构及如何实现

一、redis概述

（一）什么是redis？

        Redis（Remote Dictionary Server）是一个开源的、基于内存的、可选持久化的日志型Key-Value数据库编写，支持网络操作，并提供多种语言的API。Redis支持多种数据结构，包括字符串（string）、列表（list）、集合（set）、有序集合（zset）和哈希（hash），并且这些数据类型都支持丰富的操作，如push/pop、add/remove以及取交集、并集和差集等，这些操作都是原子性的。

        Redis将数据存储在内存中，以保证高速的读写操作，同时支持将数据周期性地写入磁盘或记录追加操作，以实现持久化。它还支持主从同步，允许数据从主服务器复制到多个从服务器，以确保数据的高可用性和备份。

        Redis的性能非常高，它在某些测试中实现了每秒读取110,000次和写入81,000次的速度。为了实现高并发性能，Redis使用非阻塞I/O和IO多路复用技术，如epoll（在Linux上）。 此外，Redis还提供了多种特性，如发布/订阅、Lua脚本、事务、管道、位图、键过期和哨兵监控机制等。它的一些优势包括简单稳定的源码、单线程模型、快速的单节点读写速度、丰富的数据类型、数据持久化能力、数据备份功能以及原子性操作。

        总的来说，Redis是一个高性能、多功能的Key-Value数据库，适用于多种应用场景，如数据库、缓存和消息中间件，并且在计时器、消息队列、排行榜、社交网络等领域有广泛的应用。

（二）redis为什么这么快？

1.redis单线程

主要是指Redis的网络IO和键值对读写是由一个线程来完成的，Redis在处理客户端的请求时包括获取 (socket 读)、解析、执行、内容返回 (socket 写) 等都由一个顺序串行的主线程处理，这就是所谓的“单线程”。这也是Redis对外提供键值存储服务的主要流程。

2.redis采用多路复用的技术

从 redis6.x 开始采 ⽤ io 多路复⽤ ，让 单个线程⾼效的处理多个连接请求 （尽量减少⽹络 IO 的时间消耗），将最耗时的 Socket 的 读取、请求解析、写⼊单独 外包

出去，剩下的 命令执⾏仍然由主线程串⾏执⾏并和内存的数据交互 。

（三）redis的数据结构

Redis⽀持五种主要数据结构：字符串（Strings）、列表（Lists）、哈希表（Hashes）、集合（Sets）和有序集合（Sorted Sets）。这些数据结构为开发者提供了灵活

的数据操作⽅式，满⾜了不同场景下的数据存储需求。

• 字符串（Strings）：最基本的数据类型，可以包含任何数据，如数字、字符串、⼆进制数据等。在Redis中，字符串是⼆进制安全的，这意味着它们可以有任何⻓度，

并且不会因为包含空字符⽽被截断。

• 列表（Lists）：简单的字符串列表，按照插⼊顺序排序。你可以添加⼀个元素到头部（左边）或者尾部（右边）。

• 哈希表（Hashes）：是键值对的集合，是字符串类型的字段和值的映射表。适合存储对象。

• 集合（Sets）：是字符串类型的⽆序集合。它是通过哈希表实现的，可以做到添加、删除、查找的时间复杂度都是O(1)。

• 有序集合（Sorted Sets）：和Sets相似，但每个字符串元素都会关联⼀个浮点数类型的分数。元素的分数⽤来排序，如果两个成员有相同的分数，那么他们的排名按

照字典序计算。

1.简单动态字符串

优势

• 预分配：SDS会为buf分配额外的未使⽤空间（通过free字段记录），这意味着当你向⼀个SDS字符串追加内容时，如果未使⽤空间⾜够，Redis就不需要重新分配内存。这减少了内存分配次数，从⽽提⾼了性能。

• 常数时间复杂度获取字符串⻓度：由于SDS结构内部维护了⼀个len字段来记录字符串的当前⻓度，获取字符串⻓度的操作可以在常数时间复杂度O(1)内完成，⽽

不需要像C语⾔的原⽣字符串那样遍历整个字符串。

• ⼆进制安全：SDS可以存储任意⼆进制数据，包括空字符\0。C语⾔的原⽣字符串以空字符作为结束标志，这限制了它们不能包含空字符。⽽SDS则通过len字段

来明确字符串的⻓度，因此不受此限制。

• 兼容C语⾔字符串函数：尽管SDS提供了⾃⼰的⼀套 API 来进⾏字符串操作，但它的buf字段实际上就是⼀个普通的C字符串（以\0结尾），这意味着在必要时，

可以直接使⽤标准的C语⾔字符串处理函数来操作buf字段（尽管通常不推荐这样做，因为可能会破坏SDS结构的完整性）。

2.列表的底层实现：双向链表与压列表

压缩列表：当列表的元素数量较少且元素较⼩时，Redis会使⽤压缩列表（ziplist）作为底层实现来节省内存。压缩列表是⼀个紧凑的、连续的内存块，

它按顺序存储了列表中的元素。

• ZLBYTE： 压缩列表的头部信息，包含了特殊编码和压缩列表的⻓度信息。

• LEN： 每个元素前的⻓度字段，⽤于记录该元素的⻓度或前⼀个元素到当前元素的偏移量。

• ‘one’, ‘two’： 实际的列表元素，它们被连续地存储在压缩列表中。

优势

内存利⽤率⾼，因为元素是连续存储的，没有额外的指针开销。

对于⼩列表，操作速度可以很快，因为所有数据都在⼀个连续的内存块中。

双向链表

当列表的元素数量较多或者元素较⼤时，Redis会选择使⽤双向链表作为底层实现。双向链表中的每个节点都保存了前⼀个节点和后⼀个节点的指针，这使得在列表的任何

位置插⼊或删除元素都变得相对容易。

优势

可以在O(1)时间复杂度内完成在列表头部或尾部的元素插⼊和删除。

当需要遍历列表时，可以从头部或尾部开始，沿着节点的指针依次访问。

3.hash的底层实现：Redis中的字典与压缩列表

Redis的哈希（Hashes）类型允许⽤户在单个键中存储多个字段和对应的值。为了⾼效地⽀持这种数据结构，Redis在底层使⽤了两种主要的数据结构来实现哈希：字典 （也称为哈希表）和压缩列表。

压缩列表

当哈希中的字段和值较少且较⼩时，Redis会使⽤压缩列表作为底层实现来节省内存。

内存利⽤率⾼，因为字段和值是连续存储的，没有额外的指针和元数据开销。

• 对于⼩哈希，操作速度可以很快，因为所有数据都在⼀个连续的内存块中。

字典（ HASH 表）

当哈希中的字段和值较多或者较⼤时，Redis会选择使⽤字典作为底层实现。字典是⼀种通过键（在Redis哈希中是字段）来直接访问值的数据结构，它能够在平均情况下提供O(1)时间复杂

度的查找、插⼊和删除操作。

优势

提供了快速的字段查找、插⼊和删除操作。

哈希表的扩容机制可以保持较低的哈希冲突率，从⽽保证操作的效率。

4. 集合的底层实现：整数集合和字典

Redis的集合（Sets）是⼀个⽆序的、元素不重复的集合。为了⾼效地⽀持这种数据结构及其操作，Redis在底层使⽤了两种主要的数据结构：整数集合（intset）和字典 （hashtable）。

优势

• 内存利⽤率⾼：整数集合将整数紧密地存储在⼀个连续的内存块中，没有额外的指针或元数据开销。

• 操作速度快：对于整数集合中的元素，Redis可以直接通过数组索引访问，这使得查找、添加和删除整数的操作⾮常快速。

• 然⽽，整数集合也有其局限性。由于它要求集合中的元素必须是整数，并且元素数量较少，因此在处理⾮整数元素或⼤量元素时，整数集合可能不是最优的选择。

有序集合的底层实现：跳表和压缩列表

Redis的有序集合（Sorted Sets）是⼀个有序的、元素不重复的集合，其中每个元素都关联了⼀个分数（score）。为了实现这种数据结构及其相关操作的⾼效性，Redis在底层主

要使⽤了两种数据结构：压缩列表（ziplist）和跳表（skiplist）。

跳表（skiplist）

当有序集合的元素数量较多或元素的⼤⼩较⼤时，Redis会使⽤跳表作为底层实现。跳表是⼀种多层的有序链表，它通过维护多个层次的指针来加快查找、插⼊和删除操作的速度。

查找效率⾼：通过维护多个层次的指针，跳表可以在平均情况下提供O(log N)时间复杂度的查找操作，其中N是元素的数量。

• 插⼊和删除操作快速：跳表的插⼊和删除操作只需要局部地调整指针，⽽不需要移动⼤量的数据。

• ⽀持范围查询：跳表可以⽅便地⽀持按照分数范围查询元素的操作