Select pool 和 epoll的区别
Select , poll ,epoll都是IO多路复用的机制。IO多路复用就是通过一种机制,可以监视多个描述符,一旦某个描述符就绪(一般是读就绪或者写就绪),能能够通知程序进行相应的读写操作。但select,poll,epoll本质上都是同步IO,因为他们都需要在读写事件就绪后自己负责进行读写,也就是说这个读写过程是阻塞的,而异步IO则无需自己负责进行读写,异步IO的实现会负责把数据从内核拷贝到用户空间。
Fd_set名词解释:fd_set其实这是一个数组的宏定义,实际上是一long类型的数组,每一个数组元素都能与一打开的文件句柄(socket、文件、管道、设备等)建立联系,建立联系的工作由程序员完成,当调用select()时,由内核根据IO状态修改fd_set的内容,由此来通知执行了select()的进程哪个句柄可读。
Select 函数:
- select使用copy_from_user从用户空间拷贝fd_set到内核空间
- 注册回调函数_pollwait
- 遍历所有的fd,调用对应的poll方法(对于socket,这个poll方法是sock_poll,sock_poll根据情况会调用tcp_poll,udp_poll或者datagram_poll)
- 以tcp_poll为例,其核心实现就是_pollwait,也就是上面注册的回调函数。
- 回调函数的主要工作就是把current(当前进程)挂到设备的等待队伍中,不同设备有不同的等待队伍,对于tcp_poll来说,等待队列为sk->sk_sleep(注意把进程挂到等待对我并不代表进程已经睡眠)。在设备收到一条消息(网络设备)或填写完文件数据(磁盘设备)后,会唤醒设备等待队列上睡眠的进程,这时current就被唤醒了。
- Poll方法返回一个描述读写操作是否就绪的mask掩码,根据这个mask掩码给fd_set赋值。
- 如果遍历完所有的fd,都没有返回一个可读写的mask,则会调用schedule_timeout是调用select的进程(current)进入睡眠。当设备驱动发生自身资源可读写后,会唤醒等等队列上睡眠的进程。如果超时(schedule_timeout指定),无人唤醒,则调用select的进程会重新被唤醒获取CPU,进而重新遍历fd,判断有没有就绪的fd.
- 把fd_set从内核空间拷贝到用户空。
总结:
Select缺点:
- 每次调用select,都需要把fd集合从用户空间拷贝到内核空间,这个开销在fd很多时会很多。
- 同事每次调用select都需要在内核遍历传递进来的所有fd,这个开销在fd很多时也很大。
- Select支持的文件描述数量太小,默认1024.
Poll 函数
相比select模型,poll使用链表保存文件描述符,因此没有了监视文件数量的限制,但其他三个缺点依然存在。
poll的实现和select非常相似,只是描述fd集合的方式不同,poll使用pollfd结构而不是select的fd_set结构,其他的都差不多。
Epoll 函数:
Epoll的改进,epoll提供了三个函数,epoll_create,epoll_ctl和epoll_wait,epoll_create是创建一个epoll句柄;epoll_ctl是注册要监听的事件类型;epoll_wait则是等待事件的产生。
第一个缺点,epoll解决方法在epoll_ctl函数中。每次注册新的事件到epoll句柄中时(在epoll_ctl中指定EPOLL_CTL_ADD),会把所有的fd拷贝进内核,而不是在epoll_wait时重复拷贝,epoll保证了每个fd在整个过程中只拷贝一次。
第二个缺点,epoll解决方法不像select或poll每次都把current轮流加入fd对应的设备等待队列,而只在epoll_ctl时把current挂一遍(这次必不可少)并为每个fd指定一个回调函数,当设备就绪,唤醒队列上的等待者时,就调用这个回调函数,而这个回调函数会把就绪的fd加入一个就绪链表。Epoll_wait实际工作就是到这个就绪表查看有没有就绪的fd(利用schedule_timeout)实现睡一会,判断一会的效果和select实现的第7步类似。
第三个缺点,epoll没有这个限制,它支持fd上限是最大可以打开文件的数目。
总结:
(1)select,poll实现需要自己不断轮询所有fd集合,直到设备就绪,期间可能要睡眠和唤醒多次交替。而epoll其实也需要调用epoll_wait不断轮询就绪链表,期间也可能多次睡眠和唤醒交替,但是它是设备就绪时,调用回调函数,把就绪fd放入就绪链表中,并唤醒在epoll_wait中进入睡眠的进程。虽然都要睡眠和交替,但是select和poll在“醒着”的时候要遍历整个fd集合,而epoll在“醒着”的时候只要判断一下就绪链表是否为空就行了,这节省了大量的CPU时间。这就是回调机制带来的性能提升。
(2)select,poll每次调用都要把fd集合从用户态往内核态拷贝一次,并且要把current往设备等待队列中挂一次,而epoll只要一次拷贝,而且把current往等待队列上挂也只挂一次(在epoll_wait的开始,注意这里的等待队列并不是设备等待队列,只是一个epoll内部定义的等待队列)。这也能节省不少的开销。