使用C++构建高性能网络服务

最新推荐文章于 2024-07-08 10:29:00 发布
最新推荐文章于 2024-07-08 10:29:00 发布
阅读量3.2k 收藏
点赞数
文章标签： c++ 网络 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lisheng0947/article/details/121743539
版权
本文介绍了如何使用C++基于epoll和线程池构建高性能网络服务，避免惊群效应并实现异步日志。讨论了线程池替代多进程的优缺点，详细阐述了kingpin框架的架构设计，包括Server和Client的API设计，以及epoll+线程池的网络服务模型。同时，展示了异步日志的实现和相关示例。
摘要由CSDN通过智能技术生成

基于epoll与线程池实现的C++网络库，其中服务端采用线程间共享互斥锁避免惊群效应。详解架构设计、异步日志、支持非阻塞IO的缓冲。阅读时长约20min。

从Nginx说起

Nginx是使用多进程与IO多路复用实现的高性能C++服务端，但是Nginx为什么要使用多进程，而不是多线程呢？

子线程与子进程的主要区别在于子进程有独立的PID与地址空间，独立PID在并发编程时使得信号的处理更加方便，因为信号根据种类不同，作用于线程组时的行为也有很大的不一样。但由于父子进程各自的地址空间是独立的，所以nginx在避免惊群效应时使用了进程锁，分析源代码底层有两种实现：

①基于CAS(Compare and Swap)与共享内存，其中CAS需要CPU硬件支持。②使用fcntl系统调用实现记录锁。

进程锁的实现相对麻烦，以前甚至碰到过fcntl系统调用对记录锁的实现有BUG。

作者尝试使用posix线程库实现线程池以替换多进程，同样可以实现高性能，框架命名为kingpin。

架构设计

对于一个库而言，设计者最开始就要想清楚的是，想要解决的问题、针对的业务场景、怎样设计API？

King

最低0.47元/天 解锁文章
DIC专业信息提供者
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
深入探索：使用C++构建顶级性能的网络服务器
一个梦想做程序员的编程小白
04-11 443
同时，C++的模板元编程、面向对象编程以及泛型编程等多种编程范式，使得开发者能够根据不同的应用场景，灵活选择最适合的编程方式，以最大化服务器的性能。未来，我们将继续关注新兴技术的发展趋势，如量子计算、边缘计算等，探索如何将这些技术应用于网络服务器中，进一步提升服务器的性能。我们采用了内存池技术，预分配一块连续的内存空间，用于快速分配和回收内存块，减少了频繁的内存分配和释放带来的开销。通过不断的技术创新和实践探索，我们可以打造出更加高效、稳定、安全的网络服务器，为互联网的发展提供强有力的支持。
C++编写高性能服务器实例教程
12-17
总之，通过学习和实践如何使用Wangle构建Echo服务器，你不仅可以掌握C++的高级特性，还能了解到如何构建高性能、异步的服务架构。这对于任何希望在分布式系统或高性能网络应用领域工作的开发者来说，都是一个非常有...
成员函数指针与高性能的C++委托（下篇）
小发猫
12-01 2136
成员函数指针与高性能的C++委托（下篇）撰文：Don Clugston（接中篇） 委托（delegate）和成员函数指针不同，你不难发现委托的用处。最重要的，使用委托可以很容易地实现一个Subject/Observer设计模式的改进版[GoF, p. 293]。Observer（观察者）模式显然在GUI中有很多的应用，但我发现它对应用程序
C/C++服务器基础（网络、协议、数据库）
最新发布
小星AI
07-08 1066
包含Socket通信、Select和IOCP管理模型、文件异步、多线程、libuv使用、protobuf、TCP、UDP、Websocket、mysql、redis、Json和Base64编码解码、HTTP等
高性能c++网络库
ChengChengCheng的博客
03-16 687
pink：https://github.com/PikaLabs/pink，360开源 muduo：陈硕
C++编程服务
08-20 310
C++编程服务 C++是一种广泛使用的计算机程序设计语言。它是一种通用程序设计语言，静态数据类型检查，支持多重编程范式, 例如过程化程序设计、数据抽象化、面向对象程序设计、泛型程序设计、基于原则设计等。 宇枫工作室对C/C++的各类程序编写和小游戏的开发上有着丰富的开发经验，曾参加过迷宫，俄罗斯方块，贪吃蛇等小游戏的开发工作。  宇枫工作室 - 专业的编程工作
C++高性能服务器框架 – SYLAR简介
sylar的专栏
06-13 7811
视频地址 [C++高级教程]从零开始开发服务器框架(sylar) 视频教程内容： 1.日志模块 支持流式日志风格写日志和格式化风格写日志，支持日志格式自定义，日志级别，多日志分离等等功能 流式日志使用：SYLAR_LOG_INFO(g_logger) << “this is a log”; 格式化日志使用：SYLAR_LOG_FMT_INFO(g_logger, “%s”, “this...
基于C++11的ZLToolKit高性能网络框架源码
03-25
项目概述：ZLToolKit是基于C++11的一个高性能网络框架。该框架采用轻量级设计，通过线程池技术优化，实现了高并发网络I/O处理能力。项目主要采用C++语言编写，同时融合了C、Shell等脚本语言以支持多样化的构建和配置...
C++项目设计和高性能服务开发-视频教程网盘链接提取码下载 .txt
07-06
非常推荐的一个C++入门的集群聊天开源项目,课程主要讲解集群聊天服务器设计,软件分层设计思路,用muduo网络库实现高性能的聊天服务器,cmake构建项目集成编译环境,负载均衡器的介绍和项目的整套开发流程,bug调试定位等...
Linux高性能服务器编程,linux高性能服务器编程 pdf,C,C++
09-10
《Linux高性能服务器编程》这本书是针对那些希望深入理解并掌握Linux环境下服务器开发技术的...通过学习这本书，读者将能够从多个层面理解和实践Linux高性能服务器编程，从而设计和构建出更为高效、稳定的服务端应用。
WebsocketPP C++构建Web服务器源代码
11-11
WebSocketPP是一个基于C++的WebSocket库，用于构建高性能的Web服务器。这个库的出现解决了C++开发者在构建实时Web应用程序时的需求，它充分利用了C++的特性，如模板元编程和面向对象编程，来提供一个高效且易于使用...
Herm(一套快速开发高性能的网络应用的C++库)
10-26
1.1 什么是Herm Herm是一套快速开发高性能的网络应用的C++库。比如开发网络游戏、即时通信、流媒体、文件下载、P2P等基于TCP/IP网络应用。 Herm包括三个组件： （1）Utilities 最基础的组件，提供线程、一读一写线程不加锁的ring buffer、二进制消息解析器、支持多态的对象管理器等。 （2）Socket 用面向对象和泛型的方法抽象了TCP/UDP的Socket IOs；抽象了Win32 Select、Linux epoll和FreeBSD kqueue的多路复用API。统一了三者水平模式（Level Triggered）的语义（一套代码在Win32/Linux/FreeBSD运行结果是一样的），Linux上也支持了边缘模式（Edge Triggered）。 （3）Framework 基于Utilities和Socket的简化开发网络应用的框架，抽象出Peer和Session对象。Peer和Session对象以及Framework实现的功能将在第2章介绍。 Herm目前仅支持Linux/Windows/FreeBSD 32bits平台。调用者可以基于不同的需求使用不用的组件。 1.2 最简单的例子 本节给出两个分别用Framework和Socket组件实现的简单TCP Server的例子。所有的例子可以参考examples frameworks和multiplexors目录。 1.2.1 用Framework实现TCP Server 首先，实现一个Listener， class Listener : public Herm::Listener { virtual void Accept(Herm::Session* session) { // 在这里得到一个于客户端通信的Session // 注册用于处理收到的消息的handler // 用Session::Push将数据写到发送buffer，最终数据传给client } }; 实现一个App， class App : public Herm::App { virtual bool Init() { // 1. 创建Network Herm::Network* net = CreateNetwork(); // 2. 创建一个TCP Server Peer，将Listener注册到Peer，进行监听 Herm::Peer* peer = net->CreateTCPServer(addr, new Listener); } }; 1.2.2 用Socket实现TCP Server 用Socket实现TCP Server更灵活，但实现者要做一些额外的工作，比如tcp stream解析，缓冲队列处理等等。 首先实现一个AcceptHandler，处理Client连接， class AcceptHandler : public Herm::EventHandler { virtual int Receive(int) { m_acceptor->Accept(streamHandler->GetStream()); g_reactor->Register(streamHandler, Herm::READ_MASK); ... } private: Herm::Acceptor* m_acceptor; }; 实现StreamHandler, 处理数据收发， class StreamHandler : public Herm::EventHandler { // Handle onle int param on FreeBSD, pls see the example of FreeBSD_tcp_server virtual int Receive(int) { m_stream->Recieve(buf, .......); ..... } private: Herm::Stream* m_stream; }; 最后，在一个线程里把上面Handler执行起来， while (true) g_reactor->Run(); 1.3 Herm地址 https://sourceforge.net/projects/speed/ 1.4 下一章话题 下章将较详细地介绍Framework组件，主要介绍如何用Framework实现真实可用的网络游戏的接入网关Server(gated)和逻辑Server(zoned)。 转这个主要是看代码质量不错. 转自CSDN的herm_lib http://hi.csdn.net/herm_lib
【分享】高性能日志组件（C++）
08-14
/****************************************************************************** Module: VC-Logger Purpose: 记录程序日志。 1. 把日志信息输出到指定文件 2. 对于 GUI 程序，可以把日志信息发送到指定窗口 3. 对于Console应用程序，可以把日志信息发往标准输出 (std::cout) Desc: 1、功能： -------------------------------------------------------------------------------------- a) 把日志信息输出到指定文件 b) 每日生成一个日志文件 c) 对于 GUI 程序，可以把日志信息发送到指定窗口 d) 对于Console应用程序，可以把日志信息发往标准输出 (std::cout) e) 支持 MBCS / UNICODE，Console / GUI，win32 / x64 程序 f) 支持动态加载和静态加载日志组件 DLL g) 支持 DEBUG/TRACE/INFO/WARN/ERROR/FATAL 等多个日志级别 2、可用性： -------------------------------------------------------------------------------------- a) 简单纯净：不依赖任何程序库或框架 b) 使用接口简单，不需复杂的配置或设置工作 c) 提供 CStaticLogger 和 CDynamicLogger 包装类用于静态或动态加载以及操作日志组件，用户无需关注加载细节 d) 程序如果要记录多个日志文件只需为每个日志文件创建相应的 CStaticLogger 或 CDynamicLogger 对象 e) 只需调用 Log()/Debug()/Trace()/Info()/Warn()/Error()/Fatal() 等方法记录日志 f) 日志记录方法支持可变参数 g) 日志输出格式： 3、性能： -------------------------------------------------------------------------------------- a) 支持多线程同时发送写日志请求 b) 使用单独线程在后台写日志，不影响工作线程的正常执行 c) 采用批处理方式批量记录日志 Usage: 方法一：（静态加载 Logger DLL） -------------------------------------------------------------------------------------- 0. 应用程序包含 StaticLogger.h 头文件 1. 创建 CStaticLogger 对象（通常为全局对象） 2. 调用 CStaticLogger->Init(...) 初始化日志组件 3. 使用 CStaticLogger->Log()/Debug()/Trace()/Info()/Warn()/Error()/Fatal() 等方法写日志 4. 调用 CStaticLogger->UnInit(...) 清理日志组件（CStaticLogger 对象析构时也会自动清理日志组件） 方法二：（动态加载 Logger DLL） -------------------------------------------------------------------------------------- 0. 应用程序包含 DynamicLogger.h 头文件 1. 创建 CDynamicLogger 对象（通常为全局对象） 2. 调用 CDynamicLogger->Init(...) 初始化日志组件 3. 使用 CDynamicLogger->Log()/Debug()/Trace()/Info()/Warn()/Error()/Fatal() 等方法写日志 4. 调用 CDynamicLogger->UnInit(...) 清理日志组件（CDynamicLogger 对象析构时也会自动清理日志组件） 方法三：（直接用导出函数加载 Logger DLL） -------------------------------------------------------------------------
C++网络编程-高性能服务器编程
www131864的博客
05-30 2514
一个进程给其他进程发送信号的api是kill函数。
C++,高性能服务器，高级编程思想
身份验证的专栏
08-20 951
C++高性能服务器研究10)http://blog.csdn.net/zhuky/article/category/660471
C++ 高性能服务器网络框架设计细节
热门推荐
技术杂谈
10-12 3万+
GitChat 作者：范蠡 这篇文章我们将介绍服务器的开发，并从多个方面探究如何开发一款高性能高并发的服务器程序。需要注意的是一般大型服务器，其复杂程度在于其业务，而不是在于其代码工程的基本框架。大型服务器一般有多个服务组成，可能会支持CDN，或者支持所谓的“分布式”等
C++服务框架
芒种、的博客
02-05 1788
一、服务框架初步 1. 目录结构规划（make编译） 注意：不管是目录还是文件，文件名一律不要带空格和用中文，最好的方式：字母、数字、下划线 规定项目的主目录，例如：nginx include目录：专门存放各种头文件 app目录：放主应用程序.c(main()函数所在的文件)以及一些比较核心的文件。 2.1 link_obj：临时目录，会存放临时的.o文件，这个目录不手动创建，后续makefile脚本来创建。 2.2 dep：临时目录，会存放临时的.d开头的依赖文件，依赖文件能够告知系统哪些相关的文件
奉献一个高性能C++网络库，欢迎STAR
chengzhou2075的博客
02-21 347
奉献一个高性能C++网络库，欢迎STAR，曾用于游戏和期货交易系统中 https://github.com/dong96888/loong 转载于:https://my.oschina....
【c++项目基础】高性能服务器程序框架
hoppipolla
03-11 340
Mongols：C++高性能网络服务器手册
Mongols是一个强大的网络库，提供多协议支持、脚本语言集成以及丰富的扩展功能，适合用于构建高性能的网络应用和服务。开发者可以通过BookStack.CN获取最新文档，参与社区，共享知识，共同推进技术的发展。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值