背景
IO多路复用:https://blog.csdn.net/weixin_44609676/article/details/129582208
阻塞/非阻塞、同步/异步:https://blog.csdn.net/weixin_44609676/article/details/130073079
多线程:https://blog.csdn.net/weixin_44609676/article/details/129547844
基于上面的知识,我们接着了解reactor/proactor的演进
演进
reactor模式是非阻塞同步网络模式
proactor是异步网络模式
reactor模式就是大佬们在IO多路复用的基础上进行了一层封装,使用者不需要考虑底层的api细节。
reactor模式主要有Reactor和处理资源池两部分组成:
- Reactor:负责监听和分发事件,包括连接事件、读写事件;
- 处理资源池:负责处理事件,read—业务逻辑—send
Reactor和处理资源池都可以有一个或多个,所以reactor模式也有以下方案可以选:
- 单Reactor单进程/线程
- 单Reactor多进程/线程
多Reactor单进程/线程(不如单Reactor单线程)- 多Reactor多进程/线程
Reactor 模式的工作流程:
Proactor 模式的工作流程:
reactor
单Reactor单进程/线程
C语言实现的是进程方案,java使用的是单线程方案,因为java是运行在java虚拟机中的,虚拟机中有很多线程,Java程序只是其中一个。
- Reactor:监听、分发事件
- Acceptor:获取连接
- Handler:处理业务
该方案的运行逻辑为:
- Reactor 对象通过 select (IO 多路复用接口) 监听事件,收到事件后根据时间类型进行分发
- 如果是连接建立的事件,则交由 Acceptor 对象通过 accept 方法获取连接,并创建一个 Handler 对象来处理后续的响应事件
- 如果不是连接建立事件,则交由当前连接对应的 Handler 对象来进行响应;Handler 对象通过 read -> 业务处理 -> send 的流程来完成完整的业务流程。
该方案的缺点是:
- 无法充分发挥多核cpu的优势
- 当在处理事务时无法响应新的事务,有延迟
Redis就是使用的这个方案
单 Reactor 多进程 / 线程
与单线程的区别是:
- Handler不再负责业务处理,只负责数据的接收发送,当读取到数据后,会移交子线程Processor处理业务
- Processor处理完后,发给Handler,Handler再send给client
该方案充分发挥了多核CPU的性能,但是要注意多线程访问共享资源的问题,在共享资源的前面加上互斥锁。
多线程的线程是可以共享数据,而多进程实现还要考虑子进程和父进程之间的数据通信,子进程要将结果移交父进程,父进程需要知道是哪个client的数据。多进程很少用。
该方案的缺点是:
- 一个Reactor对象承担所有事件的监听响应,在面对瞬间高并发的场景时容易成为性能瓶颈
多Reactor多进程/线程
多个Reactor就解决了单Reactor多线程的缺点。
与单Reactor多线程的区别是:
- 收到事件后通过Acceptor使用accept获取连接后,将新的链接分配给某个子线程
- 子线程中的SubReactor对象将MainReactor对象分配的连接加入select继续坚挺,并创建一个Handler用于处理连接的响应事件
优点:
- 主线程和子线程分工明确,主线程只负责接收新连接,已建立的连接的所有业务处理都由子线程自己负责。
- 主线程只需要把新连接传给子线程,子线程也无需返回数据
Netty和Memcache都是此方案
Nginx是多进程方案
Proactor
- Reactor 是非阻塞同步网络模式,感知的是就绪可读写事件。在每次感知到有事件发生(比如可读就绪事件)后,就需要应用进程主动调用 read 方法来完成数据的读取,也就是要应用进程主动将 socket 接收缓存中的数据读到应用进程内存中,这个过程是同步的,读取完数据后应用进程才能处理数据。
- Proactor 是异步网络模式, 感知的是已完成的读写事件。在发起异步读写请求时,需要传入数据缓冲区的地址(用来存放结果数据)等信息,这样系统内核才可以自动帮我们把数据的读写工作完成,这里的读写工作全程由操作系统来做,并不需要像 Reactor 那样还需要应用进程主动发起read/write 来读写数据,操作系统完成读写工作后,就会通知应用进程直接处理数据。
工作流程: - Proactor Initiator 负责创建 Proactor 和 Handler 对象,并将 Proactor 和 Handler 都通过 Asynchronous Operation Processor 注册到内核
- Asynchronous Operation Processor 负责处理注册请求,并处理 I/O 操作
- Asynchronous Operation Processor 完成 I/O 操作后通知 Proactor
- Proactor 根据不同的事件类型回调不同的 Handler 进行业务处理
- Handler 完成业务处理;
linux下异步IO不完善,windows下可以使用IOCP
参考:https://www.zhihu.com/question/26943938/answer/1856426252