发布一个基于 Reactor 模式的 C++ 网络库

最新推荐文章于 2023-09-27 18:31:19 发布
VIP文章 最新推荐文章于 2023-09-27 18:31:19 发布
阅读量9.4w 收藏 115
点赞数 20
分类专栏： muduo c++ 多线程 文章标签： 网络 c++ descriptor 多线程 服务器 io
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Solstice/article/details/5848547
版权

发布一个基于 Reactor 模式的 C++ 网络库

陈硕 (giantchen_AT_gmail)

Blog.csdn.net/Solstice

2010 Aug 30

本文主要介绍 muduo 网络库的使用。其设计与实现将有另文讲解。

目录

由来 1

下载与编译 2

例子 2

基本结构 3

公开接口 4

内部实现 4

线程模型 5

结语 5

由来

半年前我写了一篇《学之者生，用之者死——ACE历史与简评》，其中提到“我心目中理想的网络库”的样子：

  • 线程安全，支持多核多线程
  • 不考虑可移植性，不跨平台，只支持 Linux，不支持 Windows。
  • 在不增加复杂度的前提下可以支持 FreeBSD/Darwin，方便将来用 Mac 作为开发用机，但不为它做性能优化。也就是说 IO multiplexing 使用 poll 和 epoll。
  • 主要支持 x86-64，兼顾 IA32
  • 不支持 UDP，只支持 TCP
  • 不支持 IPv6，只支持 IPv4
  • 不考虑广域网应用，只考虑局域网
  • 只支持一种使用模式：non-blocking IO + one event loop per thread，不考虑阻塞 IO
  • API 简单易用，只暴露具体类和标准库里的类，不使用 non-trivial templates，也不使用虚函数
  • 只满足常用需求的 90%，不面面俱到，必要的时候以 app 来适应 lib
  • 只做 library，不做成 framework
  • 争取全部代码在 5000 行以内（不含测试）
  • 以上条件都满足时，可以考虑搭配 Google Protocol Buffers RPC

在想清楚这些目标之后，我开始第三次尝试编写自己的 C++ 网络库。与前两次不同，这次我一开始就想好了库的名字，叫 muduo （木铎），并在 Google code 上创建了项目： http://code.google.c

最低0.47元/天 解锁文章
陈硕
关注
  • 20
    点赞
  • 踩
  • 115
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 76
    评论
专栏目录
现代 C++ 网络库 muduo
10-29
muduo 是一个基于 Reactor 模式的现代 C++ 网络库，它采用非阻塞 IO 模型，基于事件驱动和回调，原生支持多核多线程，适合编写 Linux 服务端多线程网络应用程序
C++ Treasure Box,C++百宝箱,是一个基于 Reactor 模式的服务型 开发框架 与 组件库
06-21
C++的百宝箱，是一个完备的Linux应用l软件开发工具库与运行框架。 它有通信库（TCP/UDP/串口）、HTTP、线程池、定时器池、协程、日志、命令终端、状态机、行为树等非常实用的开发组件，它还有完备实用的启动框架。 它可以让应用开发者从实现细节中解放出来，专注于功能逻辑。应用于智能硬件，如：机器人（扫地机、商用服务机器人）、IPC、无人机、车载等；边缘计算组件，如：智能家居网关、IOT边缘网关等；后台服务型软件，如：cpp-socks5；
基于IO复用（epoll）的Reactor模式网络库封装
m0_73939403的博客
09-24 97
基于epoll的Reactor模式网络库封装
c++ netty.zip
06-22
基于tcp通讯，涉及java的netty服务器的推送功能和c++socket的封装以及protobuf在java和c++中的使用。
Easy-Reactor是一个基于Reactor模式的Linux C++网络服务器框架
02-08
Easy Reactor Easy-Reactor是一个基于Reactor模式的Linux C++网络服务器框架，支持多线程TCP服务器，单线程TCP服务器，单线程UDP服务器等形式，可以让使用者完全专注于业务，快速开发出一个高效的服务器应用。 在工作中开发基础服务器的经验总结、以及阅读陈硕《muduo》一书的收获，使得我以沉淀的心态做了这个项目 功能 对TCP服务器端： 支持设置：收到某类消息后回调函数，连接接收后回调函数，连接关闭前回调函数； 对TCP客户端： 支持设置：收到某类消息后回调函数，connect成功后回调函数，连接关闭前回调函数； 对UDP服务端、客户端： 都仅支持收到某类消息后回调函数 各服务端、客户端都可以主动发消息 此外，对多线程模式的TCP服务器 ，支持：向某个or ALL子线程发送待执行任务pendingTask回调函数，可以在一次poll循环后执行pendingTask内容
Herm(一套快速开发高性能的网络应用的C++库)
10-26
1.1 什么是Herm Herm是一套快速开发高性能的网络应用的C++库。比如开发网络游戏、即时通信、流媒体、文件下载、P2P等基于TCP/IP网络应用。 Herm包括三个组件： （1）Utilities 最基础的组件，提供线程、一读一写线程不加锁的ring buffer、二进制消息解析器、支持多态的对象管理器等。 （2）Socket 用面向对象和泛型的方法抽象了TCP/UDP的Socket IOs；抽象了Win32 Select、Linux epoll和FreeBSD kqueue的多路复用API。统一了三者水平模式（Level Triggered）的语义（一套代码在Win32/Linux/FreeBSD运行结果是一样的），Linux上也支持了边缘模式（Edge Triggered）。 （3）Framework 基于Utilities和Socket的简化开发网络应用的框架，抽象出Peer和Session对象。Peer和Session对象以及Framework实现的功能将在第2章介绍。 Herm目前仅支持Linux/Windows/FreeBSD 32bits平台。调用者可以基于不同的需求使用不用的组件。 1.2 最简单的例子 本节给出两个分别用Framework和Socket组件实现的简单TCP Server的例子。所有的例子可以参考examples frameworks和multiplexors目录。 1.2.1 用Framework实现TCP Server 首先，实现一个Listener， class Listener : public Herm::Listener { virtual void Accept(Herm::Session* session) { // 在这里得到一个于客户端通信的Session // 注册用于处理收到的消息的handler // 用Session::Push将数据写到发送buffer，最终数据传给client } }; 实现一个App， class App : public Herm::App { virtual bool Init() { // 1. 创建Network Herm::Network* net = CreateNetwork(); // 2. 创建一个TCP Server Peer，将Listener注册到Peer，进行监听 Herm::Peer* peer = net->CreateTCPServer(addr, new Listener); } }; 1.2.2 用Socket实现TCP Server 用Socket实现TCP Server更灵活，但实现者要做一些额外的工作，比如tcp stream解析，缓冲队列处理等等。 首先实现一个AcceptHandler，处理Client连接， class AcceptHandler : public Herm::EventHandler { virtual int Receive(int) { m_acceptor->Accept(streamHandler->GetStream()); g_reactor->Register(streamHandler, Herm::READ_MASK); ... } private: Herm::Acceptor* m_acceptor; }; 实现StreamHandler, 处理数据收发， class StreamHandler : public Herm::EventHandler { // Handle onle int param on FreeBSD, pls see the example of FreeBSD_tcp_server virtual int Receive(int) { m_stream->Recieve(buf, .......); ..... } private: Herm::Stream* m_stream; }; 最后，在一个线程里把上面Handler执行起来， while (true) g_reactor->Run(); 1.3 Herm地址 https://sourceforge.net/projects/speed/ 1.4 下一章话题 下章将较详细地介绍Framework组件，主要介绍如何用Framework实现真实可用的网络游戏的接入网关Server(gated)和逻辑Server(zoned)。 转这个主要是看代码质量不错. 转自CSDN的herm_lib http://hi.csdn.net/herm_lib
C++实现分布式网络通信RPC框架
woodslay的博客
08-15 4000
完整的RPC过程如下图：远程调用需传递服务对象、函数方法、函数参数，经序列化成字节流后传给提供服务的服务器，服务器接收到数据后反序列化成服务对象、函数方法、函数参数，并发起本地调用，将响应结果序列化成字节流，发送给调用方，调用方接收到后反序列化得到结果，并传给本地调用。以user.proto中的Login//Login函数的参数{}得到user.pb.cc和user.pb.h，每个message结构体都生成个类。...
比较好的c++ rpc库，c++序列化、反序列化库
yekoufeng的专栏
04-25 605
rpc库 序列化、反序列化库
c++的几个RPC库
seebit的专栏
12-20 9194
<br />1. RCF: 纯c++的RPC, 不引入IDL, 大量用到boost，比较强大.<br />2. casocklib:  protobuf + asio 较完善实现<br />3. eventrpc: protobuf + libevent 较完善实现<br />4. evproto: protobuf + libevent 简单实现<br />5. febird：同样无IDL的c++ RPC，自己实现了串行化和网络IO.<br />6. libHttp, xmlrpc 都是xml封装的RPC
使用C++开发RPC框架
Jacky__Ren的博客
02-28 4356
使用C++开发RPC框架 RPC(Remote Procedure Call)框架使得远端的一个进程可以调用远端另一个进程所提供的方法，是构建分布式系统的基础通信协议。本项目使用了C++开发了一个RPC框架所需要的各个模块。 github地址：https://github.com/shiyu-ren/myrpc RPC框架原理 集群与分布式 假如我们现有一个数独求解服务器，包含了登录服务模块、计算求解模块与后台管理模块。开始时候数独求解服务器部署在单机上，但随着用户的增多与请求计算量的增多，单机环境撑不住高
一个c++RPC实现
qq_43082206的博客
11-16 3532
一个c++RPC实现简述1.线程池2.RPC2.1RpcServer2.2RpcClient3.测试 简述   1.本文主要由三个部分，第一个是线程池的实现，第二个是RPC的实现，第三个是一些测试的代码。   2.ROC网络的部分使用我另一篇文章的网络服务实现，所以这里的RPC实现完全没有一行关于网络的代码。   3.因为使用的是现成的网络轮子，很多地方的接口也不得不受限于其提供的接口。 1.线程池   这个线程池是我直接拿来别人的改改，来自link.   threadpool.h文件 class CThr
一个开源的c++网络事件库
07-05
Chaos是一个基于Linux平台, reactor模式的网络事件库, 目前仅支持TCP传输协议, 仅在x86_64下编译, 并遵循3-clause BSD开源协议. 在使用上, 可以说它很像boost asio, 可能是由于我对boost asio的接口设计很有爱吧, 而且对于boost asio在异步编程方面的思想, 我个人也比较认同, 但至今我也没有仔细阅读过boost asio的源码, 一是boost的模板化编程在可读性上让我比较折磨, 其二则是不想在对设计先入为主的情况下去开发chaos, 很多事情只有我们自己亲自去思考, 才能有所收获.
net:基于Reactor 模式的多线程现代化C++11网络库
05-17
net 个人毕设作品。。。。。。 目前初步完成。继续完善中。。。 net是一个基于Reactor 模式的现代化C++11网络库。 自带TCP协议的异步非阻塞式的服务器和客户端库。 实现上深度借鉴和两个开源网络库。 性能上没太多测试，不过个人感觉性能还不错。。。 没啥第三方库依赖，只要支持c++11就行。。。 需要的linux版本没测试。。。有时间再说。。。 使用时,需要确保TcpClient和TcpServer的生命周期至少在EvnetLoop::run()函数退出之后结束 特性 现代版的C++11接口 非阻塞异步接口都是C++11的functional形式的回调仿函数 非阻塞纯异步多线程TCP服务器/客户端 单核环境支持 线程安全 线程安全的退出，重启 客户端断线自动重连 服务端可同时监听多个ip/port ipv6支持 例子 Tcp Echo Server #include"TcpSe
最好用的Boost.Asio：现代C++网络编程
最新发布
crr411422的博客
09-27 521
本节我们探讨了Boost.Asio的一些高级主题，学习了如何在Boost.Asio中利用多线程来优化性能，如何使用定时器来执行定时任务，如何通过SSL来加密通信内容，以及Boost.Asio的扩展性如何帮助我们更加灵活地解决问题。Boost.Asio起源于Boost库，是一款专为网络I/O、定时器、串行端口通信设计的库，提供了同步和异步的编程模型，用以简化网络和低级I/O的操作。：Boost.Asio的官方文档是学习该库的最主要和最权威的资源，提供了详细的API文档和教程。
uv-cpp：基于libuv实现的C++11风格网络库
草上爬的博客
03-15 1444
libuv是一个跨平台的的基于事件驱动的异步io库。但是他提供的功能不仅仅是io，包括进程、线程、信号、定时器、进程间通信等。libuv主要设计应用于Nodejs，由于其卓越的性能，越来越多的知名项目也使用了这一库。libuv是一个C语言库，意味着回调函数是C语言的回调，所以直接使用libuv网络消息回调，相关对象必须是全局的或者static对象，作为一个C++开发者，这是令人难以容忍的。于是本文将要介绍的uv-cpp应运而生。uv-cpp是基于libuv实现的C++11风格网络库。
【C++实现】RPC框架的简单实现介绍
jhao的博客
06-25 1370
以下博客覆盖内容：集群和分布式概念原理；RPC远程调用过程和实现；为什么采用protobuf；分布式节点机器如何得知哪台机器部署哪个具体的服务？服务注册中心。ZooKeeper 分布式一致性协调服务应用以及编程muduo网络库编程；在进入正文之前，我们需要了解为什么需要RPC框架，什么时候使用RPC框架:1.为什么要使用分布式的架构？单机架构受限于硬件资源，单机的服务器不能承受太高的用户并发量。模块化的设计，当某个模块的内容需要修改的时候，需要编译整个项目。
C++|Java工作笔记-google protobuf基本使用
IT1995的博客
11-23 5114
目录 前言 protoc生成 Java相关 C++相关 前言 这里主要是生成序列号，在我所做的项目中，一般是把数据序列化后扔到消息总线上，消费者读取了，自行解析。 个人感觉这种方式比Json和XML都方便，从数据大小来看，也比Json及XML小得多。 本次使用的protoc版本为2.5.0 protoc生成 通过编写proto文件，让protoc生...
Dubbo API形式 简单入门
weixin_34290631的博客
09-03 238
2019独角兽企业重金招聘Python工程师标准>>> ...
C++实现轻量级RPC分布式网络通信框架
m0_67391401的博客
07-31 626
2022/4/14更新在我重新回顾这篇文章的时候，我觉得里面内容有点乱，主要还是因为RPC里面涉及到很多概念和知识点。本来代码内容就已经挺抽象了，还要结合各种概念，让人难以阅读，所以特地写了下面这一篇文章，梳理了RPC框架的基本原理和知识点，顺便拓展了一些RPC在实际应用中会遇到的问题。RPC框架基础篇链接地址本次项目用C++实现了一个简单的RPC分布式网络通信框架，因此写下本篇文章梳理一下该框架的实现逻辑和相关知识点。）。然后就能生成user.cc和user.h文件了。类给caller使用，...
reactor c++
09-07
Reactor是一种高效的服务端模式，它使用IO多路复用技术，比如select、epoll、poll等来实现。在C语言中，使用Reactor模式可以通过使用epoll和线程API等工具来实现。 在给出的引用中，我们可以看到一个使用C语言实现的Reactor模式的代码示例。这段代码中使用了单例模式来创建Reactor的一个实例。首先，在init_reactor函数中，通过epoll_create函数创建了一个epoll实例，然后初始化了一些数据结构。接着，在getInstance函数中，通过判断是否已经存在一个Reactor实例，如果不存在则创建一个，并初始化相关的数据。最后，返回这个Reactor实例。 总的来说，Reactor模式是一种高效的服务端模式，用于处理大量的并发连接。它使用IO多路复用技术来实现高性能的网络应用。在C语言中，可以使用epoll和线程API等工具来实现Reactor模式。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [C++中的Reactor原理与实现](https://blog.csdn.net/m0_58687318/article/details/126633420)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 33.333333333333336%"] - *2* [reactor-cpp-testing:玩转 C++ 11 和 Reactor 模式](https://download.csdn.net/download/weixin_42168341/19565666)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 33.333333333333336%"] - *3* [使用c++实现简单的reactor模式](https://blog.csdn.net/weixin_43326322/article/details/109912795)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 33.333333333333336%"] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 76
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

陈硕

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值