(四)Windows网络模型之完成端口模型详解

Windows网络模型之完成端口模型


完成端口模型是重叠IO模型的升级优化版,解决了重叠IO模型的不足,是Windows下效率最好的网络模型。


重叠IO模型有什么不足?

  • 对于事件通知:需要程序员进行循环询问,当并发量较高时,延迟增高,并且做了许多无用功;此外每次调用WSASend()WSARecv()等函数投递给OS处理,其实都是在另开一根线程,这将不可变避免导致线程量增多,不好管理且效率下降。
  • 对于完成例程:此时程序员只需等待服务器socket的事件即可;但是仍会存在大量的线程,相比事件通知模型还多出了执行回调函数(完成例程中的例程)所需要创建的线程,因此在并发量很大时,线程数目会急剧增加,导致效率下降。

这就引申出了一个新问题:为什么线程数增加的时候,效率会降低呢?

  • 首先并不是线程数越多,CPU的利用效率就会越高
  • 因为线程切换时需要保存当前线程上下文恢复目标线程上下文。如果线程过多,会让CPU忙于切换和调度,浪费过多的时间在线程切换上,由此降低了效率。因此程序的线程数目不能太多,理论上和CPU核心数目差不多或稍微多一点即可。

说句拓展:有时会说线程数增加时,会提高程序的执行速度?为啥?

  • 这是因为当增加当前程序的线程数时,会获得更多的CPU时间片,其挤压了其他程序或进程的CPU时间片。虽然当前程序执行速度可能会得到一定的提升,但是却牺牲了其他程序的执行效率且增加了CPU调度和线程切换的资源用量,本质上还是降低了计算机整体的执行效率,是一种"自私"的做法!

完成端口模型是如何解决线程过多问题的?

完成端口模型 是基于重叠IO模型的改进,该模型依然使用了重叠结构OverlappedAcceptEx()WSARecv()WSASend()等异步函数。此外还使用了完成端口变量—需由CreateIoCompletionPort()创建。

该模型模仿消息队列,由OS维护一个通知队列,当上述的异步函数完成后就会产生通知,OS将通知放进通知队列中;程序员根据计算机的性能合理创建一定数目的线程,读取通知队列的头部通知,并进行分类处理


完成端口模型的使用逻辑

  1. 开启网络库

  2. 创建服务器socket

  3. 绑定本地IP与port

  4. 创建完成端口,只需要一个完成端口,需要将每一个socket(服务器socket和客户端通信socket)都绑定到同一个完成端口上。

    // 功能1:创建完成端口
    HANDLE CreateIoCompletionPort(
      [in]           HANDLE    FileHandle,				// 填写INVALID_HANDLE_VALUE
      [in, optional] HANDLE    ExistingCompletionPort,	// 填写NULL
      [in]           ULONG_PTR CompletionKey,			// 忽略,填0即可
      [in]           DWORD     NumberOfConcurrentThreads// 最重要的参数:并发线程数目,填0表示默认
    );
    // 如:
    HANDLE hPort = CreateIoCompletionPort(INVALID_HANDLE_VALUE, 0, 0, 0);
    
    
    // 功能2:绑定socket到完成端口上
    HANDLE CreateIoCompletionPort(
      [in]           HANDLE    FileHandle,				// 需要绑定的socket的句柄
      [in, optional] HANDLE    ExistingCompletionPort,	// 完成端口的句柄
      [in]           ULONG_PTR CompletionKey,			// 传进去一个参数,它会在GetQueuedCompletionStatus()时传出,因此可以借助该参数标记以及识别socket
      [in]           DWORD     NumberOfConcurrentThreads// 忽略,填0即可
    );
    // 如:
    HANDLE hRes = CreateIoCompletionPort((HANDLE)sockListen, hPort, sockListen, 0);
    
  5. 绑定服务器socket与完成端口

  6. 启动服务器监听

  7. 然后创建合理数目的线程,在每个线程中使用GetQueuedCompletionStatus()函数,获取通知队列中的通知,然后根据传出参数进行分类,并处理。保证线程循环执行,不断读取通知队列中的通知并处理。

    BOOL GetQueuedCompletionStatus(
      [in]  HANDLE       CompletionPort,			// 完成端口句柄,只有与完成端口绑定的socket上发生的事件才可以被监测到
            LPDWORD      lpNumberOfBytesTransferred,// 接收或发送的字节数
      [out] PULONG_PTR   lpCompletionKey,			// 传出了在绑定socket与完成端口时,传入的一个参数3,可以用于标记socket
      [out] LPOVERLAPPED *lpOverlapped,				// 传出了与socket绑定在一起的重叠结构,注意重叠结构是在调用异步函数时传入的
      [in]  DWORD        dwMilliseconds				// 超时时间
    );
    
    // 返回值: true 执行成功  false 执行失败
    
  8. 对于线程处理函数,主要工作就是循环调用GetQueuedCompletionStatus()处理通知队列的通知

    • 对于建立连接的请求要及时对新的客户端socket绑定重叠结构以及完成端口,然后投递。
    • 对于收发数据的请求,要及时处理数据,并继续投递数据收发任务

如何回答:讲讲你理解的完成端口模型?

完成端口模型重叠IO模型的升级版,它解决了重叠IO模型中线程过多导致效率下降的问题。

完成端口模型中,我们新创建一个完成端口变量,并将所有的socket(包括服务器socket和客户端通信socket)都绑定到完成端口上。然后使用AcceptEx()WSARecv()WSASend()函数异步投递相应的任务,等任务完成后操作系统将完成通知放进通知队列中。

之后程序员创建合理数目的线程,在线程函数中取出通知队列的头部,然后分析并分类处理。

该模型所有函数执行部分都是异步的,而且不存在线程滥用问题,因此效率非常高!


完成端口模型的流程图


  • 3
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
最近有项目要做一个高性能网络服务器,去网络上搜到到的都是C++版本而且是英文或者简单的DEMO,所以自己动手写了C# 的DEMO。 网络上只写接收到的数据,没有说怎么处理缓冲区数据,本DEMO简单的介绍如何处理接收到的数据。简单易用,希望对大家有用. 1、在C#中,不用去面对完成端口的操作系统内核对象,Microsoft已经为我们提供了SocketAsyncEventArgs类,它封装了IOCP的使用。请参考:http://msdn.microsoft.com/zh-cn/library/system.net.sockets.socketasynceventargs.aspx?cs-save-lang=1&cs-lang=cpp#code-snippet-1。 2、我的SocketAsyncEventArgsPool类使用List对象来存储对客户端来通信的SocketAsyncEventArgs对象,它相当于直接使用内核对象时的IoContext。我这样设计比用堆栈来实现的好处理是,我可以在SocketAsyncEventArgsPool池中找到任何一个与服务器连接的客户,主动向它发信息。而用堆栈来实现的话,要主动给客户发信息,则还要设计一个结构来存储已连接上服务器的客户。 3、对每一个客户端不管还发送还是接收,我使用同一个SocketAsyncEventArgs对象,对每一个客户端来说,通信是同步进行的,也就是说服务器高度保证同一个客户连接上要么在投递发送请求,并等待;或者是在投递接收请求,等待中。本例只做echo服务器,还未考虑由服务器主动向客户发送信息。 4、SocketAsyncEventArgs的UserToken被直接设定为被接受的客户端Socket。 5、没有使用BufferManager 类,因为我在初始化时给每一个SocketAsyncEventArgsPool中的对象分配一个缓冲区,发送时使用Arrary.Copy来进行字符拷贝,不去改变缓冲区的位置,只改变使用的长度,因此在下次投递接收请求时恢复缓冲区长度就可以了!如果要主动给客户发信息的话,可以new一个SocketAsyncEventArgs对象,或者在初始化中建立几个来专门用于主动发送信息,因为这种需求一般是进行信息群发,建立一个对象可以用于很多次信息发送,总体来看,这种花销不大,还减去了字符拷贝和消耗。 6、测试结果:(在我的笔记本上时行的,我的本本是T420 I7 8G内存) 100客户 100,000(十万次)不间断的发送接收数据(发送和接收之间没有Sleep,就一个一循环,不断的发送与接收) 耗时3004.6325 秒完成 总共 10,000,000 一千万次访问 平均每分完成 199,691.6 次发送与接收 平均每秒完成 3,328.2 次发送与接收 整个运行过程中,内存消耗在开始两三分种后就保持稳定不再增涨。 看了一下对每个客户端的延迟最多不超过2秒。
完成端口是一种异步输入/输出(I/O)模型,在网络编程中起到了重要的作用。它是Windows操作系统中提供的一种高效的I/O完成机制。 完成端口的工作方式是通过一个预先创建的I/O完成端口对象来管理I/O操作。在应用程序中,可以创建多个完成端口对象,用于不同的I/O操作。完成端口对象会与一个执行线程相关联,这个线程会在I/O操作完成时被唤醒。当一个I/O操作完成时,操作系统会将完成的消息发送给完成端口对象,并唤醒相应的线程。 使用完成端口的好处是可以实现高效的并发I/O操作。通过使用线程池,可以有效地处理多个客户端请求,并且不会因为等待I/O操作而造成线程的闲置。此外,完成端口还可以用于实现高性能的服务器应用程序,因为它能够轻松地处理大量的并发I/O操作。 完成端口的使用步骤如下: 1. 创建完成端口对象,并绑定执行线程。 2. 创建一个I/O请求(例如读取或写入操作)。 3. 将I/O请求与完成端口对象关联。 4. 执行I/O操作,并等待操作完成。 5. 当操作完成时,线程被唤醒,并处理完成的I/O请求。 总之,完成端口是一种强大而高效的I/O完成机制,在网络编程中非常实用。它能够提供高并发的I/O操作能力,使得应用程序能够高效地处理多个客户端请求。通过合理地利用完成端口,在网络编程中可以实现高性能和高效率。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

咖啡与乌龙

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值