高级IO函数
pipe
#include <unistd.h>
int pipe(int fd[2]); // 成功返回0,并将一对打开的文件描述符填入fd数组
管道单工,fd[0]读端,fd[1]写端。默认都是阻塞的,即管道空读阻塞,管道满写阻塞。
如果要实现双向数据传输,需要2个管道;
自内核2.6.11起,管道容量默认65536字节,可使用fcntl修改管道容量。
如果管道写端fd[1]引用计数减少到0,即没有任何进程写管道,此时读端fd[0]的read操作将返回0,即读到文件结束标记EOF;如果管道读端fd[0]引用计数减少到0,即没有任何进程读管道,此时写端fd[1]的write操作将失败,并引发SIGPIPE信号。
#include <sys/types.h>
#include <sys/socket.h>
int socketpair(int domain, int type, int protocol, int fd[2]);
// domain只能填AF_UNIX,仅能在本地使用这个双向管道
// 管道双向全双工,两端可读可写
dup/dup2
dup函数创建一个新的文件描述符,总是返回系统当前可用的最小整数值,此特性多用于重定向。
#include <unistd.h>
int dup(int fd);
int dup2(int fd1, int fd2);
- close(STDOUT_FILENO);
- dup(peerfd); // 返回1
- 此后打印到标准输出的内容会被重定向到peerfd
readv/writev
readv将数据从文件描述符读到分散的内存块中,即分散读;
writev将多块分散的内存数据一并写入文件描述符中,即集中写。
#include <sys/uio.h>
ssize_t readv(int fd, const struct iovec* vector, int count);
ssize_t writev(int fd, const struct iovec* vector, int count);
成功返回字节数,失败返回-1,相当于简化版recvmsg/sendmsg
sendfile
sendfile在两个文件描述符之间直接传递数据,(完全在内核),从而避免了内核缓冲区和用户缓冲区之间的数据拷贝,效率很高,称零拷贝。
#include <sys/sendfile.h>
ssize_t sendfile(int out_fd, int in_fd, off_t* offset, size_t count);
// in_fd 必须是一个支持类似mmap的文件描述符,即真实的文件而非socket和管道
// out_fd 必须是socket描述符
// 成功返回字节数,失败-1
mmap/munmap
mmap用于申请一段内存,这段内存可以作为进程间共享内存,也可以将文件直接映射其中。munmap解除映射。
#include <sys/mman.h>
// start 允许用户自行自定某个特定地址作为这段内存开始,NULL系统自动分配
// prot 指定访问权限,如PROT_READ,PROT_WRITE等
// flags 控制内存端内容被修改后程序的行为 MAP_SHARED,MAP_HUGETLB等
// 成功返回内存首地址,失败返回(void*)-1
void* mmap(void *start, size_t length, int prot, int flags, int fd, off_t offset);
int munmap(void *start, size_t length);
splice
用于两个文件描述符之间移动数据,也是零拷贝操作
#include <fcntl.h>
// flags SPLICE_F_MOVE 如何合适按整页内存移动数据,只是一个提示,自内核2.6.21无效果
// SPLICE_F_NONBLOCK 非阻塞,但实际还是受到文件描述符本身阻塞状态影响
// SPLICE_F_MORE 给内核一个提示,后续splice系统调用将读取更多数据
ssize_t splice(int fd_in, loff_t* off_in, int fd_out, loff_t* off_out,
size_t len, unsigned int flags);
fd_in和fd_out至少一个必须是管道,若是管道,则offset填NULL
可通过splice实现简单的EchoServer,将客户端发送的数据发送到管道写端fd[1];再从fd[0]将数据发送回peerfd。这未涉及recv/send,内核用户之间的数据拷贝。
tee
在两个管道文件描述符之间复制数据,也是零拷贝。不消耗数据,所以是复制
操作与splice相同,但两个fd都必须是管道文件描述符。
#include <fcntl.h>
ssize_t tee(int fd_in, int fd_out, size_t len, unsigned int flags);
fcntl
#include <fcntl.h>
int fcntl(int fd, int cmd, ...);
// 根据cmd指定何种类型的操作,第三个参数类型不唯一