多reactor模式模拟Proactor模式的C++高性能高并发HTTP服务器

多reactor模式模拟Proactor模式的C++高性能高并发HTTP服务器

github地址:https://github.com/1249302623/myWebServer

介绍

本项目为linux下C++11编写的Web资源服务器,支持web端用户实现注册、登录功能,可以请求服务器图片和视频文件,实现同步/异步日志系统,记录服务器运行状态,经压力测试可以实现至少两万的并发连接客户端,50s内处理请求200w个,0失败,每秒响应请求4w多个。

环境

  • 操作系统: Ubuntu 16.04.12
  • 编译器: g++ 5.4.0
  • IDE:vscode
  • 服务器配置:4核8G华为云主机
  • 数据库:mysql

运行

进入build目录,执行./LiuServerPro文件
必须在build目录执行,否则无法正确识别HTML文件

  • cd build

  • ./LiuServerPro

运用技术

  • 使用主从Reactor线程池模拟Proactor模式,reactor线程池充当Proactor的异步IO线程。
  • 使用Epoll边沿触发的IO多路复用技术构建Reactor线程池,主reactor线程只负责accept请求,并以RoundRobin的方式分发给从reactor线程。从reactor线程池在接收完数据后通知Proactor用户线程。
  • 构建Proactor用户线程池,对tcp数据进行处理,执行用户函数。
  • 使用基于小根堆的定时器关闭超时请求
  • 使用muduo库的buffer类实现高性能的输入输出缓冲区
  • 使用eventfd实现了线程的异步唤醒
  • 使用双缓冲区技术实现了异步日志系统
  • 使用状态机解析HTTP请求报文,支持解析GET和POST请求
  • 访问服务器数据库实现web端用户注册、登录功能,可以请求服务器图片和视频文件
  • 为减少内存泄漏的可能,使用智能指针等RAII机制
  • 重构了muduo库的框架,用继承和虚函数的方式代替了回调函数,框架更加清晰。

模型

并发模型为主从Reactor线程池(Procator异步线程)+用户线程池(Proactor同步线程)。
在这里插入图片描述

参考

测试

使用Apache Benchmark(简称ab)进行服务器压力测试,ab是Apache安装包中自带的压力测试工具.
输入命令:
ab -t 60 -n 2000000 -c 20000 -r -k http://127.0.0.1:8080/

命令解释:测试实现限制在60s,并发连接用户数2w个(2w并不是服务器的最大连接数,而是ab压力测试所能模拟的最大客户端数量),并发请求数200w个 ,保持常连接,出错时直接返回,结果如下:
在这里插入图片描述

可以看到,
完成请求200w次,0失败
每秒响应请求数41036次,
带宽21239.4kb/s,
最大请求响应时间797ms

演示

web端用户实现注册、登录功能,可以请求服务器图片和视频文件
https://github.com/1249302623/myWebServer/blob/master/TestPic/%E6%9C%8D%E5%8A%A1%E5%99%A8%E6%BC%94%E7%A4%BA.mp4

  • 3
    点赞
  • 27
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
### 回答1: Reactor模式Proactor模式是两种常见的事件驱动模式,它们的主要区别在于处理事件的方式不同。 Reactor模式是一种同步的事件驱动模式,它使用一个事件循环来监听事件,当有事件发生时,事件循环会通知相应的处理程序来处理事件。在Reactor模式中,处理程序需要自己负责处理事件的所有细节,包括读取数据、解析数据、处理数据等。 Proactor模式是一种异步的事件驱动模式,它使用一个I/O处理器来处理事件,当有事件发生时,I/O处理器会自动读取数据、解析数据、处理数据等,然后通知相应的处理程序来处理数据。在Proactor模式中,处理程序只需要关注业务逻辑,不需要关注事件的细节。 因此,Reactor模式适用于处理简单的事件,而Proactor模式适用于处理复杂的事件。在实际应用中,可以根据具体的需求选择合适的事件驱动模式。 ### 回答2: ReactorProactor是两种常用的异步I/O模式,它们是网络编程中很重要的概念。 Reactor模式是指当一个网络连接到来时,操作系统会产生一个事件,这个事件会被一个叫做Reactor的模块监控。Reactor会将事件分配给处理器,处理器根据事件来选择相应的处理方式,将请求处理完成后,返回给Reactor,由其去做出相应的操作。 Proactor模式是指当一个网络连接到来时,操作系统会产生一个事件,这个事件会被一个叫做Proactor的模块检查并处理。Proactor会调用相应的处理器去处理该事件,并将处理结果通知给调用者。 两种模式最大的区别在于Reactor是事件驱动的,将不同的事件分给不同的处理器去处理,而Proactor是数据驱动的,将相同的数据分给不同的处理器去处理。在Reactor中,处理器需要主动地去获取事件,而在Proactor中,Proactor是主动地去获取事件的。 另外,在实践中,Reactor模式一般使用同步I/O,而Proactor模式则常常使用异步I/O。因为在同步I/O中,当一个连接到来时,操作系统会将该连接上的数据读取完毕后才返回,而在异步I/O中,操作系统会将数据读取任务分配给Proactor,当数据读取完成后再通知Proactor完成,由Proactor再去处理数据。异步I/O的效率比同步I/O,而Proactor的数据驱动特性也更适合异步I/O的应用场景。 ### 回答3: Reactor模式Proactor模式是两种常见的事件处理模式,都是异步编程模式的应用。它们在I/O的高并发情况下能够更加效地处理事件,但采用的设计思路和实现方式略有不同。 Reactor模式是以事件驱动为主要特点,线程通过监听文件描述符(例如socket)上的事件(读、写、连接、断开连接),然后触发事件回调函数来处理对应的I/O操作。其主要的工作包括I/O事件监听,事件分发和应用程序回调函数的调用。关键角色包括Demultiplexer、EventHandler和ConcreteEventHandler。 Proactor模式是在Reactor模式的基础上增加了更多的应用程序逻辑,通过线程池来实现异步I/O操作。线程通过向操作系统注册请求,在I/O操作完毕之后才通知应用程序进行读写,相比于Reactor模式Proactor模式更加强调异步I/O,显著减少了线程并发数,避免了线程切换的额外开销。其主要的工作包括I/O事件数据结构、异步I/O启动器、应用程序任务队列和具体任务处理器。 简单来说,Reactor模式是以事件驱动为核心,由主线程对所有的操作进行监听,当监听到事件发生时才会执行相应的回调函数,而Proactor模式则是以任务为核心,主线程只负责将任务提交给操作系统的线程池,由线程池来进行实际的I/O操作,完成后通知应用程序。因此Proactor模式适用于线程池资源较为充足的情况下,而Reactor模式适用于I/O资源较为充足的情况下。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值