Redis 多路复用

旷野历程

已于 2023-07-28 10:15:14 修改

阅读量4k

点赞数 4

分类专栏： # Redis 文章标签： redis 缓存多路复用

于 2022-12-23 09:30:42 首次发布

本文链接：https://blog.csdn.net/xhaimail/article/details/128415409

版权

Redis 专栏收录该内容

24 篇文章 1 订阅

订阅专栏

名词解析

多路：多个客户端连接（连接就是套接字描述符）

复用：使用单进程就能够实现同时处理多个客户端的连接

IO多路复用是一种通过一种机制使一个进程能同时监视多个文件描述符（包括套接字等）的状态变化，从而实现对多个IO操作的并发处理的技术。在传统的IO模型中，通常使用阻塞IO来进行IO操作，即当一个IO操作没有准备好时，进程会一直阻塞等待，直到IO操作准备就绪。这样在处理多个IO操作时，需要使用多线程或多进程来实现并发，增加了系统开销和复杂性。

而IO多路复用技术则可以在单个线程内同时监听多个IO事件的状态变化，一旦有IO事件就绪，就立即进行处理，而不需要阻塞等待。这种方式可以大大提高IO操作的并发性和性能。

在Unix/Linux系统中，常用的IO多路复用机制有以下几种：

select：是最早引入的IO多路复用机制，通过select函数来监视多个文件描述符的状态变化，但其缺点是性能不高，同时对文件描述符的数量有一定的限制。
poll：是select的改进版本，没有了描述符数量的限制，但其性能仍然不是很高。
epoll：是Linux特有的IO多路复用机制，是目前性能最好的IO多路复用技术。它使用了事件驱动的方式，通过epoll_ctl函数注册文件描述符的事件，然后通过epoll_wait函数等待IO事件的发生。epoll在处理大量连接时具有更好的扩展性和性能。

IO多路复用的主要优点包括：

节省了线程/进程的创建和销毁开销，降低了系统资源的占用。
可以实现高并发处理，提高系统的性能和吞吐量。
编程模型相对简单，代码量较少，易于维护和管理。

因此，IO多路复用是网络编程中常用的技术，特别适用于处理大量连接和高并发的场景。

为什么 Redis 中要使用 I/O 多路复用？

首先，Redis 是在单线程执行，所有的操作都是按顺序线性执行的，但是由于读写操作等待用户输入或输出都是阻塞的，所以 I/O 操作在一般情况下往往不能直接返回，这会导致某一文件的 I/O 阻塞导致整个进程无法对其它客户提供服务，而 I/O 多路复用就是为了解决这个问题而出现的。

Redis 的 IO 模型主要是基于 epoll 实现的，不过它也提供了 select 和 kqueue 的实现，默认采用 epoll 。

Redis 使用多路复用技术，可以处理并发的连接。非阻塞 IO 内部实现采用epoll，采用了epoll+自己实现的简单的事件框架。epoll 中的读、写、关闭、连接都转化成了事件，然后利用 epoll 的多路复用特性，绝不在io上浪费一点时间。

在多路复用IO模型中，会有一个内核线程不断地去轮询多个 socket 的状态，只有当真正读写事件发送时，才真正调用实际的IO读写操作。因为在多路复用IO模型中，只需要使用一个线程就可以管理多个socket，系统不需要建立新的进程或者线程，也不必维护这些线程和进程，并且只有真正有读写事件进行时，才会使用IO资源，所以它大大减少来资源占用。

多路I/O复用模型是利用 select、poll、epoll 可以同时监察多个流的 I/O 事件的能力，在空闲的时候，会把当前线程阻塞掉，当有一个或多个流有 I/O 事件时，就从阻塞态中唤醒，于是程序就会轮询一遍所有的流（epoll 是只轮询那些真正发出了事件的流），并且只依次顺序的处理就绪的流，这种做法就避免了大量的无用操作。

采用多路 I/O 复用技术可以让单个线程高效的处理多个连接请求（尽量减少网络 IO 的时间消耗），且 Redis 在内存中操作数据的速度非常快，也就是说内存内的操作不会成为影响Redis性能的瓶颈。

多路复用快的原因在于，操作系统提供了这样的系统调用，使得原来的 while 循环里多次系统调用，变成了一次系统调用 + 内核层遍历这些文件描述符。

为啥Redis单线程模型也能效率这么高？

纯内存操作

Redis 将所有数据放在内存中，内存的响应时长大约为 100 纳秒，这是 redis 的 QPS 过万的重要基础。

核心是基于非阻塞的IO多路复用机制

有了非阻塞 IO 意味着线程在读写 IO 时可以不必再阻塞了，读写可以瞬间完成然后线程可以继续干别的事了。

redis 需要处理多个 IO 请求，同时把每个请求的结果返回给客户端。由于 redis 是单线程模型，同一时间只能处理一个 IO 事件，于是 redis 需要在合适的时间暂停对某个 IO 事件的处理，转而去处理另一个 IO 事件，这就需要用到IO多路复用技术了，就好比一个管理者，能够管理个socket的IO事件，当选择了哪个socket，就处理哪个socket上的 IO 事件，其他 IO 事件就暂停处理了。