高级I/O函数(writev、senfile、dup、mmap、splice、tee)

本文总结自《Linux高性能服务器编程》中第六章

pipe

#include <unistd.h>
int pipe(int fd[2]);  //创建一管道,用于进程间通信

往fd[1]写入数据,从fd[0]读出
另外:socket的基础API中有一个创建双向管道的方法:

#include <sys/socket.h>
int socketpair(int domain, int type, int protocol, int fd[2]);
//domain:只能使用UNIX本地域协议族(AF_UNIX),因为仅能在本地使用该双向管道

dup

把标准输入重定向到一个文件 / 把标准输出重定向到一网络连接:

#include <unistd.h>
int dup(int file_descriptor);            //失败:返回-1,并设置errno
int dup2(int file_descriptor_one, int file_descriptor_two);

dup():创建一新文件描述符,该新文件描述符与原文件描述符(file_descriptor)指向相同的文件、管道/网络连接。并且,该新文件描述符必为系统当前可用的最小整数值。但,不继承原文件描述符的属性。
eg:

int connfd = accept(...);
close(STDOUT_FILENO);   //关闭标准输出文件描述符(STDOUT_FILENO值为1)
                        /*
                        STDIN_FILENO  0
                        STDOUT_FILENO 1
                        STDERR_FILENO 2
                        */
dup(connfd);            //系统可用的min值:-1,所以将标准输出重定向到connfd上了
printf("abcd\n");
close(connfd);

dup2():返回第一个不小于file_descriptor_two的整数值

readv、writev

#include <sys/uio.h>
ssize_t readv(int fd, const struct iovec *vector, int count);
//将数据从文件描述符读到分散的内存块中 —> 分散读
ssize_T writev(int fd, const struct iovec *vector, int count);
//将多块分散的内存数据一并写入文件描述符中 —> 集中写

iovec:描述一块内存区的结构体

struct iovec
{
    void *iov_base;   //内存起始地址
    size_t iov_len;   //这块内存的长度
}

count:vector数组的长度(有多少块内存数据读写)
成功:返回读出/写入fd的字节数; 失败:-1,errno

eg:

struct iovec iv[2];

struct stat file_stat;
stat(file_name, &file_stat);

iv[0].iov_base = buffer1;
iv[0].iov_len = strlen(buffer1);
iv[1].iov_base = file_buf;
iv[1].iov_len = file_stat.st_size;

ret = writev(connfd, iv, 2);

sendfile

#include <sys/sendfile.h>
ssize_t sendfile(int out_fd, int in_fd, off_t *offset, size_t count);

在两个文件描述符间直接传递数据(完全在内核中操作)—>避免了内核缓冲区和用户缓冲区之间的数据拷贝,提高效率,称为 零拷贝

out_fd:待写入内容的文件描述符 必为一socket
in_fd: 待读出内容的文件描述符 必指向真实的文件(不能是socket或管道)
offset:从读入文件流的哪个位置开始读
count:在in_fd和out_fd之间传输的字节数
成功:返回传输的字节数; 失败:返回-1,errno

eg:

int filefd = open(file_name, O_RDONLY);
struct stat stat_buf;
fstat(filefd, &stat_buf);
...
sendfile(connfd, filefd, NULL, stat_buf.st_size);
//没有为目标文件分配任何用户空空间的缓存,也没有执行读文件的操作,实现了文件的发送

mmap、munmap

#include <sys/mman.h>
void *mmap(void *start, size_t length, int port, int flags, int fd, off_t offset);
//申请一段内存空间 —> 作为进程间通信的共享内存 / 将文件直接映射到其中

start:使用某个特定的地址作为该段内存的起始地址,NULL:系统自动分配
length:内存段的长度
port:设置内存段的访问权限:

PROT_READ: 内存段可读
PROT_WRITE:内存段可写
PROT_EXEC: 内存段可执行
PROT_NONE: 内存段不可被访问

flags:控制内存段内容被修改后程序的行为

MAP_SHARED:在进程间共享这段内存 —> 对该内存修改会映射到文件中
MAP_PRIVATE:内存段为进程私有(与MAP_SHARED互斥)
MAP_ANONYMOUS:内存不是从文件映射的 —> 初始化为全0 ->忽略后2个参数
MAP_FIXED: 内存段必须位于start指定的地址处(start:内存页面大小(4096字节)的整数倍)

fd:被映射文件的文件描述符(open() 获得)
offset:从文件何处开始映射

成功:返回指向目标内存区域的指针; 失败:MAP_FAILED((void *)-1), errno

int munmap(void *start, size_t length);
//释放由mmap() 创建的内存空间,成功:0,失败:-1,errno

splice、tee

splice()

#include <fcntl.h>
ssize_t splice(int fd_in, loff_t *off_in, int fd_out, loff_t *off_out,
                size_t len, unsigned int flags);
//在两个文件描述符之间移动数据,零拷贝操作

fd_in:待输入data的文件描述符(若为管道,off_in必为NULL)

fd_in、fd_out至少有一个是管道文件描述符

len:移动数据的长度
成功:返回移动字节的数量; 失败:-1,errno

eg:

/*将客户发来的再发给客户,未用到recvsend,-> 未涉及用户空间、内核空间之间的拷贝*/
int pipefd[2];
pipe(pipefd);
splice(connfd, NULL, pipefd[1], NULL, 32768, SPLICE_F_MORE);
    //SPLICE_F_MORE:给内核一提示,后续splice将读更多的data
splice(pipefd[0], NULL, connfd, NULL, 32768, SPLICE_F_MORE);

tee()

ssize_t tee(int fd_in, int fd_out, size_t len, unsigned int flags);

在两个管道文件描述符之间赋值数据,零拷贝操作
不消耗data -> 源fd上的data仍可用于后续的读操作
成功:返回复制的字节数(0:代表无数据); 失败:-1,errno

fcntl

#include <sys/fcntl.h>
int fcntl(int fd, int cmd, ...);

cmd:

F_GETFL: 获取fd的状态标识
    O_APPEND, O_CREAT -> 用于open()
    O_RDONLY, O_WRONLY, O_RDWR -> 访问模式
F_SETFL: 设置fd的状态标识

eg:

int old_option = fcntl(fd, F_GETFL);
int new_option = old_option | O_NONBLOCK;
fcntl(fd, F_SETFL, new_option);
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值