Linux网络编程之I/O复用

Linux编程之IO多路复用(I/O Multiplexing)

程序设计过程中有时候会对多个输入进行操作,例如标准输入或者多个socket。那么如果在对某个进行处理的时候阻塞住的话,另外的输入进来的话会得不到及时的处理。(比如客户端程序调用fgets/cin的时候会阻塞在标准输入的地方,此时如果有监听的socket请求连接的话是得不到及时处理的)。

对于这种情况就需要当内核发现我们指定的IO条件就绪的时候主动的通知进程。这种行为就是IO复用,(个人认为复用的是进程而不是IO)

一个输入操作通常包含两个阶段:

  1. 等待数据准备好
  2. 从内核向进程复制数据

针对如下场合就需要用到IO复用:

  1. 当客户处理多个描述符时候
  2. 一个同时处理多个套接字的时候
  3. 如果一个TCP服务器既要处理监听套接字,又要处理已连接套接字的时候
  4. 如果一个服务器既要处理TCP又要处理UDP
  5. 如果一个服务器要处理多个服务或者多个协议的时候

首先先介绍下Linux环境下一共具有的5种IO模型

  1. 阻塞式IO
  2. 非阻塞式IO
  3. IO复用
  4. 信号驱动式IO
  5. 异步IO

前四种IO模型都是同步IO模型,因为其中真正的IO操作都是会阻塞进程的。

阻塞/非阻塞 以及 同步/异步 的区别

同步和异步的区别:数据拷贝的时候进程是否阻塞
阻塞和非阻塞的区别:应用程序的调用是否立即返回

上面介绍了基本概念之后,下面就来介绍下Linux系统中实现IO复用的函数。

select()函数

#include<sys/select.h>
#include<sys/time.h>
int select(int maxfd1, fd_set *readset, fd_set *writeset, fd_set *exceptset,
            const struct timeval *timeout);
返回:若有就绪描述符则为其数目,若超时则返回0,出错返回-1

上面的参数中,
第1个参数是使用的fd中最大的描述符+1,这个是告诉内核只需要测试的fd,而对于其余的fd是不需要进行检测的。比方说我们现在关心的描述符是1,4,7 那么这个参数应该传入8。这个参数完全是为了效率原因,我们告诉内核这个参数那么内核在进程与内核之间就无需复制描述集中不必要的部分,从而不测试那些总是为0的位,提高了效率。

第5个参数是一个timeout时间,告诉内核select需要阻塞多少,有三种可能:要么永远等待、要么等待一段固定时间、要么不等待(如果不等待的话那么就可以考虑设计成为定时器)

第2、3、4的参数分别就是我们关心的读、写和异常条件的描述符。如果有某个我们不关心的可以直接设置为NULL。这三个参数是值-结果参数,即select返回的时候结果也是在这三个参数里面的,在调用select之前我们把关心描述符设置为1,当返回的时候未就绪的会变成0,而就绪的就为1。

对于上面说到的fd_set类型有如下几个操作函数:

void FD_ZERO(fd_set *fdset);
void FD_SET(int fd, fd_set *fdset);
void FD_CLR(int fd, fd_set *fdset);
void FD_ISSET(int fd, fd_set *fdset);

调用select之前一定需要先将fd_set初始化,然后设置自己关心的描述符,当返回的时候调用FD_ISSET()来查看哪些是就绪的。

如下例子:

void func(FILE *fp, int socketfd)
{
    int maxfd1;
    fd_set rset;
    char sendline[MAXLINE], recvline[MAXLINE];
    FD_ZERO(&rset);
    for(; ;)
    {
        FD_SET(fileno(fp), &rset);
        FD_SET(sockfd, &rset);
        maxfd1 = max(fileno(fd), socketfd)+1;

        select(maxfd1, &rset, NULL, NULL, NULL);
        if(FD_ISSET(sockfd, &rset))
        {
            /*socket is readable*/
        }
        if(FD_ISSET(fileno(fp), &rset))
        {
            /*input is readable*/
        }
    }
}

shutdown()函数

通常终止网络连接的方法是调用close()函数,不过close有两个限制,却可以是用shutdown()函数来避免。

  1. close是把描述符的引用减少1,仅仅在计数变为0的时候才会关闭套接字。而shutdown可以不管引用计数就激发TCP的正常终止序列
  2. close终止读和写两个方向的数据传送。而shutdown却可以单方向的关闭套接字的一半。比如当我们给服务器的数据发送关闭,我们可以直接关闭写这一半,即使服务器这时候还是有数据要发给我们的话我们仍然可以读连接。
#include<sys/socket.h>
int shutdown(int sockfd, int howto);
返回:成功则为0,出错则为-1

第二个参数可以指定如下值:SHUT_RD、SHUT_WR、SHUT_RDWR分别指明需要关闭连接的哪一半

pselect()函数

pselect相对于select来说主要是有两个区别,首先设置超时时间的参数类型变化了,这导致pselect可以精确到纳秒级别,而就结构只能指定微秒级别。第二个不同点是pselect增加了一个参数,指向信号掩码的指针。在调用pselect之前先保存当前进程的信号掩码,禁止递交某些信号。等到pselect返回之后再恢复信号掩码。防止了信号的丢失。

#include<sys/select.h>
#include<signal.h>
#include<time.h>
int pselect(int maxfd1, fd_set *readset, fd_set *writeset, fd_set *exceptset,
            const struct timespec *timeout, const sigset_t *sigmask);
返回:若有就绪描述符则为其数目,若超时则为0,若出错则为-1

poll()函数

对于poll函数其实机制和select差不多,区别就是poll()是通过一个结构数组来指定关心的描述符,另外对于每个描述符可以分别指定触发的事件,这些都是通过 struct pollfd 结构体来实现的

struct pollfd {
    int fd;
    short events;
    short revents;
}

#include<poll.h>
int poll(struct pollfd *fdarray, unsinged long nfds, int timeout);
返回:若有就绪描述符则为其数目,若超时则为0,若出错则为-1

pollfd结构体中第一个即为描述符,第二个成员即为关心的事件类型,第三个成员即为返回的时候该描述符发生的事件类型。注:这个不是值-参数类型的,而select函数是值-参数类型的,返回的时候结果还是在那三个参数中,而这个是分别在events和revents成员中的

epoll()函数

select和poll函数是当关心的描述符如果有就绪事件发生,返回之后它们是不清楚哪个描述符发生了什么事的,必须去一个一个轮询,那么当描述符数量较多的时候效率很明显会下降,而epoll函数是通过为每个描述符注册一个callback回调函数,当描述符有就绪事件发生的时候,就会直接调用callback函数。不过当描述符较多的时候并且很多描述符都会激活的情况epoll的效率不一定比select/poll会高,select/poll适合那种描述符就绪状态变化频率较少的场景
另外epoll使用mmap用户空间映射到进程虚拟地址空间,加速了从内核空间到用户空间的消息传递。
epoll还区分是边缘触发(Edge Triggered)水平触发(Level Triggered)。对于前者,只有在状态变化的时候才得到通知,即使缓冲区内还有未处理的数据也是得不到通知的。而后者是只要缓冲区有数据,就会一直有通知。

  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: libevent是一个开源的C语言网络编程库,主要用于处理高并发网络连接。它提供了对事件驱动的支持,使得开发者可以方便地编写高效的并发网络应用程序。 libevent的核心是事件循环机制。在传统的网络编程中,通常需要使用多线程或多进程来处理并发连接,而使用libevent可以通过一个事件循环来处理多个连接。在事件循环中,可以注册多个事件,并定义回调函数来处理事件的触发。当有事件发生时,libevent会调用相应的回调函数来处理事件的处理逻辑。这样可以大大简化并发编程的复杂性,并提高程序的性能。 libevent的事件模型基于操作系统提供的I/O多路复用机制,如select、poll和epoll等。它可以在不同的操作系统平台上运行,并提供一致的接口和高效的事件处理机制。借助这些机制,libevent可以同时处理大量的并发连接,并保持低延迟和高吞吐量。 除了处理网络连接,libevent还提供了其他常用的功能,如定时器和信号处理等。它允许开发者在事件循环中注册定时器事件,可以用于定时任务的调度。同时,libevent还可以处理来自操作系统的信号,并提供了对信号的处理接口,以便开发者能够处理各种系统事件。 总之,libevent是一个功能强大、简单易用的高并发网络编程库,适用于开发各种类型的网络应用。无论是开发服务器、代理、聊天程序还是实时应用,libevent都能帮助开发者快速编写高性能的并发网络程序。 ### 回答2: libevent是一个开源的C/C++网络库,用于高性能的事件驱动编程。它提供了一个轻量级、可移植的框架,用于开发高并发的网络应用程序。 它的设计目标是提供一个高效的事件处理器,可以处理成千上万个并发连接,并且支持多线程并发处理。libevent基于事件驱动模型,通过异步I/O和回调函数来实现高并发处理网络请求。 libevent提供了一系列的函数来注册和监听各种网络事件,包括读、写、超时和信号等等。当一个事件发生时,libevent会调用相应的回调函数来处理事件。通过这种方式,我们可以非常方便地处理并发连接,并实现高性能的网络编程。 libevent的优点主要包括: 1. 高性能:libevent使用异步I/O和事件驱动模型,能够处理成千上万个并发连接,具有很高的处理能力。 2. 可移植性:libevent提供了统一的接口,可以在多种操作系统上运行,包括Linux、Windows、Mac等。 3. 易用性:libevent简单易用,只需注册感兴趣的事件和相应的回调函数,就可以实现高效的网络编程。 4. 多线程支持:libevent支持多线程并发处理,可以充分利用多核CPU的性能优势。 总之,libevent是一款非常适合高并发网络编程的开源库,它可以帮助我们实现高性能的服务器程序,提升系统的并发处理能力。无论是开发网络服务器还是网络应用程序,libevent都是一个不错的选择。 ### 回答3: libevent 是一个用于高并发网络编程的 C/C++ 库。它提供了一个跨平台的异步事件驱动的网络编程框架,能够实现高效地处理大量并发连接的需求。 libevent 的主要特点包括: 1. 异步事件驱动:libevent 使用事件驱动模型,主要利用非阻塞 I/O 和事件回调机制,能够高效地处理大量并发事件。 2. 跨平台支持:libevent 提供了跨不同操作系统的支持,包括 Windows、Linux、Unix 等,并且提供了统一的 API 接口,方便开发者进行跨平台开发。 3. 支持多种网络协议:libevent 支持 TCP、UDP、HTTP 等多种网络协议,为开发者提供了丰富的网络编程能力。 4. 高性能:libevent 的设计目标之一是高性能,它通过使用多路复用技术,将系统资源高效地利用起来,能够同时处理大量并发连接,并且保持低延迟。 5. 灵活易用:libevent 提供了简洁的 API,使用起来非常方便,可以快速实现高并发网络编程的需求。 总之,libevent 是一个强大而灵活的 C/C++ 库,适用于各种需要处理高并发连接的网络应用程序。无论是开发高性能服务器、代理、负载均衡器还是其他类似应用,libevent 都是一个值得推荐的选择。它的高效性能、跨平台支持和简洁易用的 API 接口使得开发者能够快速构建稳定可靠的高并发网络应用。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值