关于网络IO
网络io、io多路复用select/poll/epoll、基于事件驱动的reactor
https://zhuanlan.zhihu.com/p/636811356
Reactor 线程模型
https://blog.csdn.net/weixin_44471490/article/details/114606481
Reactor 简介
Reactor是异步事件驱动框架,Reactor模型分为三种,主要由多路复用器(Acceptor)、事件分发器(Dispatcher)、事件处理器(Handler)组成。
1、多路复用器:由操作系统提供,在 linux 上一般是 select, poll, epoll等系统调用。
2、事件分发器:将多路复用器中返回的就绪事件分到对应的处理函数中。
3、事件处理器:负责处理特定事件的处理函数。
Handler:Handler与Event组队出现,它携带着用于处理一个已经触发的事件的具体逻辑(或者说代码)。Handler所携带的逻辑必须是非阻塞的。
Event Queue:一个存储着所有待处理Event(以及其Handler)的队列。
Event Loop:Reactor的核心loop,持续从Event Queue中消费Event并执行其关联的Handler,当Handler中包含I/O操作时,向Event Demultiplexer注册监听。
Netty是Reactor模型的一种实现,采用Reactor第三种模型:主从线程模型。一组线程池(boss)接收请求,一组线程池(worker)处理IO。
事件驱动的reactor原理
单线程模型
- 单线程模型:一个线程干所有的事情,既要处理客户端连接,又要处理IO业务。
缺点:忙不过来。只要有一个地方堵塞就全部卡住。
Redis采用的NIO Reactor模型就是单线程的Reactor模型。单线程模型实现起来简单且可控性强,所以Redis很自然的选择了这种模式。
多线程模型
多线程模型有如下特点:有专门一个线程,即Acceptor 线程用于监听客户端的TCP 连接请求。
客户端连接的IO 操作都由一个特定的NIO 线程池负责.每个客户端连接都与一个特定的NIO 线程绑定,因此在这个客户端连接中的所有IO 操作都是在同一个线程中完成的。
客户端连接有很多,但是NIO 线程数是比较少的,因此一个NIO 线程可以同时绑定到多个客户端连接中。
主从线程模型
主从多线程模型
主线程只处理客户端连接。只将服务端的Socket参数传递,绑定端口,不传递select事件。
方案说明:
Reactor 主线程 MainReactor 对象通过 select 监听连接事件,收到事件后,通过 Acceptor 处理连接事件;
当 Acceptor 处理连接事件后,MainReactor 将连接分配给 SubReactor;
Subreactor 将连接加入到连接队列进行监听,并创建 Handler 进行各种事件处理;
当有新事件发生时,SubReactor 就会调用对应的 Handler 进行处理;
Handler 通过 read 读取数据,分发给后面的 Worker 线程进行处理;
Worker 线程池分配独立的 Worker 线程进行业务处理,并返回结果;
Handler 收到响应的结果后,再通过 send 将结果返回给 Client;
Reactor 主线程可以对应多个 Reactor 子线程,即 MainRecator 可以关联多个 SubReactor。
模板代码(模拟例子)
MainReactor
TCPReactor.java
接收客户端连接请求,完成后继续返回进行事件轮询
dispatch
根据事件之key绑定的对象开新线程
Acceptor.java
从线程 SubReactor
传递参数ssc 和 OP_READ事件
Acceptor初始化多个SubReactor,进行分发处理
已连接的客户端是否有消息需要发送;如果有则获取已就绪事件的key;根据事件的key进行调度
Handler 处理业务逻辑
TCPHandler.java
参考资料
https://www.bilibili.com/video/BV1sp4y117ED?p=2
https://www.cnblogs.com/minikobe/p/12168085.html
https://www.cnblogs.com/luoxn28/p/11875340.html
网络io、io多路复用select/poll/epoll、基于事件驱动的reactor
https://zhuanlan.zhihu.com/p/636811356
Reactor 线程模型
https://blog.csdn.net/weixin_44471490/article/details/114606481