第1节-Redis单线程 VS 多线程入门

最新推荐文章于 2024-04-07 23:26:27 发布

白给的阿威

最新推荐文章于 2024-04-07 23:26:27 发布

阅读量118

点赞数

分类专栏： redis高阶文章标签： redis 缓存数据库

本文链接：https://blog.csdn.net/qwe780310/article/details/125007397

版权

redis高阶专栏收录该内容

6 篇文章 0 订阅

订阅专栏

1.1 Redis为什么选择单线程

这种问法其实并不严谨，为啥这么说呢?

Redis的版本很多3.x、4.x、6.x，版本不同架构也是不同的，不限定版本问是否单线程也不太严谨。

1、版本3.x ，最早版本，也就是大家口口相传的redis是单线程，阳哥2016年讲解的redis就是3.X的版本。

2、版本4.x，严格意义来说也不是单线程，而是负责处理客户端请求的线程是单线程，但是开始加了点多线程的东西(异步删除)。—貌似

3、最新版本的6.0.x后，告别了大家印象中的单线程，用一种全新的多线程来解决问题。—实锤

有几个里程碑式的重要版本

5.0版本是直接升级到6.0版本，对于这个激进的升级。Redis之父antirez表现得很有信心和兴奋，所以第一时间发文来阐述6.0的一些重大功能"Redis 6.0.0 GA is out!":

厘清⼀个事实我们通常说，Redis是单线程究竟何意？

Redis是单线程

主要是指Redis的网络IO和键值对读写是由一个线程来完成的，Redis在处理客户端的请求时包括获取 (socket 读)、解析、执行、内容返回 (socket 写) 等都由一个顺序串行的主线程处理，这就是所谓的“单线程”。这也是Redis对外提供键值存储服务的主要流程。

但Redis的其他功能，比如持久化、异步删除、集群数据同步等等，其实是由额外的线程执行的。Redis工作线程是单线程的，但是，整个Redis来说，是多线程的；

1.2 Redis3.x单线程时代但性能依旧很快的主要原因：

1、基于内存操作：Redis 的所有数据都存在内存中，因此所有的运算都是内存级别的，所以他的性能比较高；

2、数据结构简单：Redis 的数据结构是专门设计的，而这些简单的数据结构的查找和操作的时间大部分复杂度都是 O(1)，因此性能比较高；

3、多路复用和非阻塞 I/O：Redis使用 I/O多路复用功能来监听多个 socket连接客户端，这样就可以使用一个线程连接来处理多个请求，减少线程切换带来的开销，同时也避免了 I/O 阻塞操作

4、避免上下文切换：因为是单线程模型，因此就避免了不必要的上下文切换和多线程竞争，这就省去了多线程切换带来的时间和性能上的消耗，而且单线程不会导致死锁问题的发生

作者原话：

他的大体意思是说Redis 是基于内存操作的，因此他的瓶颈可能是机器的内存或者网络带宽而并非 CPU，既然 CPU 不是瓶颈，那么自然就采用单线程的解决方案了，况且使用多线程比较麻烦。但是在 Redis 4.0 中开始支持多线程了，例如后台删除等功能。

Redis 4.0 之前一直采用单线程的主要原因有以下三个：

1、使用单线程模型是 Redis 的开发和维护更简单，因为单线程模型方便开发和调试；

2、即使使用单线程模型也并发的处理多客户端的请求，主要使用的是多路复用和非阻塞 IO；

3、对于 Redis 系统来说，主要的性能瓶颈是内存或者网络带宽而并非 CPU。

1.3 既然单线程这么好，为什么逐渐又加入了多线程特性？

单线程也有单线程的苦恼

正常情况下使用 del 指令可以很快的删除数据，而当被删除的 key 是一个非常大的对象时，例如时包含了成千上万个元素的 hash 集合时，那么 del 指令就会造成 Redis 主线程卡顿。

这就是redis3.x单线程时代最经典的故障，大key删除的头疼问题，

由于redis是单线程的，del bigKey ..... 等待很久这个线程才会释放，类似加了一个synchronized锁，你可以想象高并发下，程序堵成什么样子？

如何解决

使用惰性删除可以有效的避免 Redis 卡顿的问题

比如当我（Redis）需要删除一个很大的数据时，因为是单线程同步操作，这就会导致 Redis 服务卡顿，于是在 Redis 4.0 中就新增了多线程的模块，当然此版本中的多线程主要是为了解决删除数据效率比较低的问题的。

unlink key 
flushdb async  #生成不能这么搞
flushall async # 一样 把redis干没了
上述操作是
把删除工作交给了后台的（子线程）异步来删除数据了。

因为Redis是单个主线程处理，redis之父antirez一直强调"Lazy Redis is better Redis".

而lazy free的本质就是把某些cost(主要时间复制度，占用主线程cpu时间片)较高删除操作，从redis主线程剥离让bio子线程来处理，极大地减少主线阻塞时间，从而减少删除导致性能和稳定性问题。

注意：

在Redis4.0 就引入了多个线程来实现数据的异步惰性删除等功能，但是其处理读写请求的仍然只有一个线程，所以仍然算是狭义上的单线程。

1.4 redis6的多线程和IO多路复用入门篇

Redis的性能瓶颈：

对于Redis主要的性能瓶颈是内存或者网络带宽而并非 CPU。所以开多线程其实没啥用，反而可能会降低读写效率。

（现在内存不值钱了，所以最关键的还是网络IO）

最后Redis的瓶颈可以初步定为：网络IO redis6，真正多线程登场（使用了非阻塞IO多路复用）

unix网络编程中的五种IO模型：

Blocking IO 阻塞IO
NoneBlocking IO 非阻塞IO
IO multiplexing IO多路复用
signal driven IO 信号驱动IO
asynchornons IO 异步IO

IO multiplexing IO多路复用

这是IO模型的一种，即经典的Reactor设计模式，

I/O 多路复用，简单来说就是通过监测文件的读写事件再通知线程执行相关操作，保证 Redis 的非阻塞 I/O 能够顺利执行完成的机制。

多路指的是多个socket连接，

复用指的是复用一个线程。多路复用主要有三种技术：select，poll，epoll。

epoll是最新的也是目前最好的多路复用技术。采用多路 I/O 复用技术可以让单个线程高效的处理多个连接请求（尽量减少网络IO的时间消耗），且Redis在内存中操作数据的速度非常快（内存内的操作不会成为这里的性能瓶颈），主要以上两点造就了Redis具有很高的吞吐量。

总结：

Reids工作线程是单线程的，但是对于整个Redis来说，是多线程的。

IO的读和写本身是堵塞的，比如当socket中有数据时，Redis会通过调用先将数据从内核态空间拷贝到用户态空间，再交给redis调用，而这个拷贝的过程就是阻塞完成的，当数据量越大时拷贝所需要的时间越多，而这些操作都是基于单线程完成的。

在Redis6.0中新增了多线程的功能来提高IO的读写性能，他的主要实现思路是将主线程的IO读写任务拆分成一组独立的线程去执行，这样就可以使多个socket的读写任务拆分给一组独立的线程去执行，这样就可以使多个socket的读写并行化了，采用多路IO复用技术可以让单个线程高效的多个连接请求（尽量减少网络IO的时间消耗）将最耗时的Socket的读取、请求解析、写入单独外包出去，剩下的命令执行仍然由主线程串行执行并和内存的数据交互。