UNIX高级编程-高级I/O

第14章高级I/O

14.1 非阻塞I/O

高级I/O:非阻塞I/O、记录锁、系统V流机制、I/O多路转接、readv和writev函数以及存储映射I/O

低速系统调用可能会永远阻塞进程:

1) 某些文件(管道、终端设备、网络设备)的数据不存在,读操作会导致调用者永远阻塞

2) 数据不能立即被上述同样类型的文件接受,写操作会导致调用者永远阻塞

3) 在某种条件发生之前,打开某些类型的文件会被阻塞

4) 对已经加上强制性记录锁的文件进行读写

5) 某些ioctl操作

6) 某些进程间通信函数

 

对于给定的文件描述符有两种方法对其指定非阻塞I/O

1) 调用open获得文件描述符,指定O_NONBLOCK标志

2) 对于已经打开的文件描述符,调用fcntl,打开O_NONBLOCK文件状态标志

 

14.2 记录锁

功能:当某个进程正在读/写文件的某部分时,可以阻止其他进程修改同一文件区。

Int fcntl(int filedes.,int cmd,/*structflock *flockptr */);

Cmd:F_GETLK、F_SETLK、F_SETLKW

Struct flock{

Short l_type;  //共享读锁,独占性写锁,解锁

Off_t l_start;  //加锁或者解锁文件区域的其实字节偏移量

Short l_whence;//SEEK_SET,SEEK_CUR,orSEEK_END

Off_t l_len; //文件区域的字节长度

Pid_t l_pid;//能阻塞当前进程的锁的进程号,返回F_GETLK

}

F_GETLK:判断flockptr所描述的锁是否被另一把锁排斥

F_SETLK:设置flockptr所描述的锁

F_SETLKW:F_SETLK的阻塞版本

通过将l_start设置为0,whence设置为SEEK_SET可以锁住整个文件,多个进程访问同一个文件时,新锁会替换旧锁,当加读锁时,文件描述符必须为读打开,当加写锁时,文件描述符必须写打开

死锁产生的情况:当两个进程相互等待对方持有并锁定的资源时

 

锁的隐含继承与释放:

1) 进程终止,则它所建立的全部锁会释放;当关闭任意文件描述符,其引用的文件上的全部锁释放

2) Fork产生的子进程不继承父进程设置的锁

3) 执行exec后,新程序可以继承原执行程序的锁。

 

建议性锁和强制性锁

强制性锁会对每个read,write,open系统调用都会进行检查,检查调用进程对访问的文件是否违背了某一把锁的作用

14.4 STREAMS

STREAMS(流)是系统V提供的构造内核设备驱动程序和网络协议包的一种通用方法,流首可以压入处理模块,可以通过ioctl命令实现,所有的STREAMS设备都是字符特殊文件。

 

流首和用户进程的输入和输出都基于消息,并使用read,write,ioctl,getmsg,getpmsg,putmsg和putpmsg交换消息

struct strbuf{

int maxlen;

int len;

char *buf;

}

消息的类型分为三种,M_DATA(I/O用户数据),M_PROTO(协议控制信息),M_PCPROTO(高优先级协议控制信息),每个STREAMS模块有两个输入队列,流的方向正好相反。

 

STREAMS ioctl操作:
int isastream(int filedes); //判断一个描述符是否引入了流

Int ioctl(int filedes,int cmd,…) ;//对设备的I/O通道进行管理

int putmsg(int filedes,const struct strbuf *ctlptr,const structstrbuf *dataptr,int flag);//STREAMS消息写入流

int putpmsg(int filedes,const struct strbuf *ctlptr,const structstrbuf *dataptr,int band,int flag);//可以设置优先级

int getmsg(int filedes,struct strbuf *restrict ctlptr,structstrbuf *restrict dataptr,int *restrict flagptr);//返回流首读队列的下一个消息

int getpmsg(int filedes,struct strbuf *restrict ctlptr,structstrbuf *restrict dataptr,int *restrict bandptr,int *restrict flagptr);

 

1)写模式:request设置为I_GWROPT(该流的当前写模式在第三个参数中返回),若request设置为I_SWROPT(则第三个参数成为该流的新的写模式)

写模式值包括

SNDZERO:0长度写不发送消息

SNDPIPE:当流已出错后,若调用write或者putmsg则调用进程发送SIGPIPE信号

2) 读模式:默认是字节流模式(忽略流中消息的边界),调用ioctl时request设置为I_GRDOPT和I_SRDOPT与写模式作用相似。

读模式值包括:

RNORM:普通,字节流模式

RMSGN:消息不丢弃模式,某次读取一部分,则剩余一部分消息仍保留在流中

RMSGD:消息丢弃模式,某次读一部分,则另一部分丢弃

 

14.5 I/O多路转接

异步I/O基本思想是进程告诉内核,当一个描述符准备好时,用一个信号通知它。

I/O多路转接:先构造一张有关描述符的列表,然后调用一个函数,直到这些描述符中的一个已经准备好进行I.O时,返回告诉进程哪些描述符已经准备好进行I/O。

#include <sys/select.h>

Int select(int maxfdp1,fd_set *restrictreadfds,fd_set *restrict writefds,fd_tset *restrict exceptfds,struct timeval*restrict tvptr);

tvptr:NULL一直等待直到捕捉到一个信号或者描述符中的一个已经准备好;tvptr->tv_sec==0&&tvptr->tv_usec==0完全不等待(测试所有描述符并立即返回)

readfds,writefds,exceptfds可读,可写或者处于异常条件的各个描述符

maxfdp1;在三个fd_set中找到最大的描述符+1

返回值:-1出错,0没有准备好的描述符,其他则是准备好的文件描述符

 

Poll函数类似于select,与STREAMS系统息息相关

#include <poll.h>

Int poll(struct pollfd fdarray[],nfds_tnfds,int timeout);

struct poolfd{

int fd;

short events;//告诉内核描述符关心的事件

short revents;  //返回时,内核设置revents成员说明描述符发生了什么事件

}

Nfds:第一个数组包含多少个元素

当一个描述符被挂断后(POLLHUP),就不能再写向该描述符,但可以读

 

异步I/O:系统V中的异步I/O信号是SIGPOLL;BSD系统中的异步I/O信号是SIGIO和SIGURG

 

Readv(散布读)和writev(聚集写)

#include <sys/uio.h>

Ssize_t readv(int filedes,const structiovec *iov,int iovcnt);

Struct iovec{

Void *iov_base;  //缓冲区起始地址

Size_t iov_len;  //缓冲区长度

}

Ssize_t writev(int filedes,const structiovec *iov,int iovcnt);(适合一次写大量数据)

Ssize_t readn(int filedes,void *buf,size_tnbytes);  //从文件中读N个字节数据

Ssize_t written(int filedes,void*buf,size_t nbytes);//从文件中写N个字节数据

 

存储映射I/O

将文件与缓冲区映射在一起,读/写缓冲区相当于读/写文件

#include<sys/mman.h>

Void *mmap(void *addr,size_t len,intprot,int flag,int filedes,off_t off);

addr:映射区的起始地址

filedes:被映射的文件的描述符

len:映射的字节数

off:映射字节在文件中的起始偏移量

prot:对映射存储区域的保护要求,PROT_READ(映射区可读),PROT_WRITE(映射区可写),PROT_EXEC(映射区可执行),PROT_NONE(映射区不可访问),不超过open的权限

flag:设置不同标志

int mprotect(void *addr,size_t len,int prot);//更改现有映射区的权限

int msync(void *addr,size_t len,int flags);//flags有两种选择,MS_ASYNC标志简化被写页的调度,如果希望返回之前等待写操作完成则设置为MS_SYNC标志,将共享存储区中的已修改数据冲洗至文件中

int munmap(caddr_t addr,size_t len);//解除映射关系


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
目 录 译者序 译者简介 前言 第1章 UNIX基础知识 1 1.1 引言 1 1.2 登录 1 1.2.1 登录名 1 1.2.2 shell 1 1.3 文件和目录 2 1.3.1 文件系统 2 1.3.2 文件名 2 1.3.3 路径名 2 1.3.4 工作目录 4 1.3.5 起始目录 4 1.4 输入和输出 5 1.4.1 文件描述符 5 1.4.2 标准输入、标准输出和标准 出错 5 1.4.3 不用缓存的I/O 5 1.4.4 标准I/O 6 1.5 程序和进程 7 1.5.1 程序 7 1.5.2 进程和进程ID 7 1.5.3 进程控制 7 1.6 ANSI C 9 1.6.1 函数原型 9 1.6.2 类属指针 9 1.6.3 原始系统数据类型 10 1.7 出错处理 10 1.8 用户标识 11 1.8.1 用户ID 11 1.8.2 组ID 12 1.8.3 添加组ID 12 1.9 信号 12 1.10 UNIX时间值 14 1.11 系统调用和库函数 14 1.12 小结 16 习题 16 第2章 UNIX标准化及实现 17 2.1 引言 17 2.2 UNIX标准化 17 2.2.1 ANSI C 17 2.2.2 IEEE POSIX 18 2.2.3 X/Open XPG3 19 2.2.4 FIPS 19 2.3 UNIX实现 19 2.3.1 SVR4 20 2.3.2 4.3+BSD 20 2.4 标准和实现的关系 21 2.5 限制 21 2.5.1 ANSI C限制 22 2.5.2 POSIX限制 22 2.5.3 XPG3限制 24 2.5.4 sysconf、pathconf 和fpathconf 函数 24 2.5.5 FIPS 151-1要求 28 2.5.6 限制总结 28 2.5.7 未确定的运行时间限制 29 2.6 功能测试宏 32 2.7 基本系统数据类型 32 2.8 标准之间的冲突 33 2.9 小结 34 习题 34 第3章 文件I/O 35 3.1 引言 35 3.2 文件描述符 35 3.3 open函数 35 3.4 creat函数 37 3.5 close函数 37 3.6 lseek函数 38 3.7 read函数 40 3.8 write函数 41 3.9 I/O的效率 41 3.10 文件共享 42 3.11 原子操作 45 3.11.1 添加至一个文件 45 3.11.2 创建一个文件 45 3.12 dup和dup2函数 46 3.13 fcntl函数 47 3.14 ioctl函数 50 3.15 /dev/fd 51 3.16 小结 52 习题 52 第4章 文件和目录 54 4.1 引言 54 4.2 stat, fstat和lstat函数 54 4.3 文件类型 55 4.4 设置-用户-ID和设置-组-ID 57 4.5 文件存取许可权 58 4.6 新文件和目录的所有权 60 4.7 access函数 60 4.8 umask函数 62 4.9 chmod和fchmod函数 63 4.10 粘住位 65 4.11 chown, fchown和 lchown函数 66 4.12 文件长度 67 4.13 文件截短 68 4.14 文件系统 69 4.15 link, unlink, remove和rename 函数 71 4.16 符号连接 73 4.17 symlink 和readlink函数 76 4.18 文件的时间 76 4.19 utime函数 78 4.20 mkdir和rmdir函数 79 4.21 读目录 80 4.22 chdir, fchdir和getcwd函数 84 4.23 特殊设备文件 86 4.24 sync和fsync函数 87 4.25 文件存取许可权位小结 88 4.26 小结 89 习题 89 第5章 标准I/O库 91 5.1 引言 91 5.2 流和FILE对象 91 5.3 标准输入、标准输出和标准出错 91 5.4 缓存 91 5.5 打开流 94 5.6 读和写流 96 5.6.1 输入函数 96 5.6.2 输出函数 97 5.7 每次一行I/O 98 5.8 标准I/O的效率 99 5.9 二进制I/O 100 5.10 定位流 102 5.11 格式化I/O 103 5.11.1 格式化输出 103 5.11.2 格式化输入 103 5.12 实现细节 104 5.13 临时文件 105 5.14 标准I/O的替代软件 108 5.15 小结 108 习题 108 第6章 系统数据文件和信息 110 6.1 引言 110 6.2 口令文件 110 6.3 阴影口令 112 6.4 组文件 113 6.5 添加组ID 114 6.6 其他数据文件 115 6.7 登录会计 116 6.8 系统标识 116 6.9 时间和日期例程 117 6.10 小结 121 习题 121 第7章 UNIX进程的环境 122 7.1 引言 122 7.2 main 函数 122 7.3 进程终止 122 7.3.1 exit和_exit函数 122 7.3.2 atexit函数 124 7.4 命令行参数 125 7.5 环境表 126 7.6 C程序的存储空间布局 126 7.7 共享库 127 7.8 存储器分配 128 7.9 环境变量 130 7.10 setjmp 和longjmp函数 132 7.10.1 自动、寄存器和易失变量 134 7.10.2 自动变量的潜在问题 136 7.11 getrlimit 和setrlimit函数 136 7.12 小结 139 习题 140 第8章 进程控制 141 8.1 引言 141 8.2 进程标识 141 8.3 fork函数 142 8.4 vfork 函数 145 8.5 exit函数 147 8.6 wait和waitpid函数 148 8.7 wait3和wait4函数 152 8.8 竞态条件 153 8.9 exec函数 156 8.10 更改用户ID和组ID 160 8.10.1 setreuid 和setregid函数 162 8.10.2 seteuid和 setegid函数 163 8.10.3 组ID 163 8.11 解释器文件 164 8.12 system函数 167 8.13 进程会计 171 8.14 用户标识 175 8.15 进程时间 176 8.16 小结 178 习题 178 第9章 进程关系 180 9.1 引言 180 9.2 终端登录 180 9.2.1 4.3+BSD终端登录 180 9.2.2 SVR4终端登录 182 9.3 网络登录 182 9.3.1 4.3+BSD网络登录 182 9.3.2 SVR4网络登录 183 9.4 进程组 183 9.5 对话期 184 9.6 控制终端 185 9.7 tcgetpgrp 和tcsetpgrp函数 187 9.8 作业控制 187 9.9 shell执行程序 189 9.10 孤儿进程组 193 9.11 4.3+BSD实现 195 9.12 小结 197 习题 197 第10章 信号 198 10.1 引言 198 10.2 信号的概念 198 10.3 signal函数 203 10.3.1 程序起动 205 10.3.2 进程创建 206 10.4 不可靠的信号 206 10.5 中断的系统调用 207 10.6 可再入函数 209 10.7 SIGCLD语义 211 10.8 可靠信号术语和语义 213 10.9 kill和raise函数 213 10.10 alarm和pause函数 214 10.11 信号集 219 10.12 sigprocmask 函数 220 10.13 sigpending函数 222 10.14 sigaction函数 223 10.15 sigsetjmp 和siglongjmp函数 226 10.16 sigsuspend函数 229 10.17 abort函数 234 10.18 system函数 235 10.19 sleep函数 240 10.20 作业控制信号 241 10.21 其他特征 243 10.21.1 信号名字 243 10.21.2 SVR4信号处理程序的附 加参数 244 10.21.3 4.3+BSD信号处理程序的附 加参数 244 10.22 小结 244 习题 244 第11章 终端I/O 246 11.1 引言 246 11.2 综述 246 11.3 特殊输入字符 250 11.4 获得和设置终端属性 254 11.5 终端选择标志 254 11.6 stty命令 258 11.7 波特率函数 259 11.8 行控制函数 260 11.9 终端标识 260 11.10 规范方式 263 11.11 非规范方式 266 11.12 终端的窗口大小 270 11.13 termcap, terminfo和 curses 271 11.14 小结 272 习题 272 第12章 高级I/O 273 12.1 引言 273 12.2 非阻塞I/O 273 12.3 记录锁 275 12.3.1 历史 276 12.3.2 fcntl记录锁 276 12.3.3 锁的隐含继承和释放 280 12.3.4 4.3+BSD的实现 281 12.3.5 建议性锁和强制性锁 284 12.4 流 288 12.4.1 流消息 289 12.4.2 putmsg和putpmsg函数 290 12.4.3 流ioctl操作 291 12.4.4 write至流设备 294 12.4.5 写方式 294 12.4.6 getmsg和getpmsg函数 294 12.4.7 读方式 295 12.5 I/O多路转接 296 12.5.1 select函数 298 12.5.2 poll函数 301 12.6 异步I/O 303 12.6.1 SVR4 303 12.6.2 4.3+BSD 303 12.7 readv和writev函数 304 12.8 readn和writen函数 306 12.9 存储映射I/O 307 12.10 小结 311 习题 311 第13章 精灵进程 312 13.1 引言 312 13.2 精灵进程的特征 312 13.3 编程规则 313 13.4 出错记录 314 13.4.1 SVR4流log驱动程序 315 13.4.2 4.3+BSD syslog设施 316 13.5 客户机-服务器模型 319 13.6 小结 319 习题 319 第14章 进程间通信 320 14.1 引言 320 14.2 管道 320 14.3 popen和pclose函数 325 14.4 协同进程 330 14.5 FIFO 333 14.6 系统V IPC 335 14.6.1 标识符和关键字 336 14.6.2 许可权结构 337 14.6.3 结构限制 337 14.6.4 优点和缺点 337 14.7 消息队列 338 14.8 信号量 342 14.9 共享存储 346 14.10 客户机-服务器属性 351 14.11 小结 353 习题 353 第15章 高级进程间通信 355 15.1 引言 355 15.2 流管道 355 15.3 传送文件描述符 358 15.3.1 SVR4 360 15.3.2 4.3BSD 361 15.3.3 4.3+BSD 364 15.4 open服务器第1版 366 15.5 客户机-服务器连接函数 371 15.5.1 SVR4 372 15.5.2 4.3+BSD 375 15.6 open服务器第2版 378 15.7 小结 385 习题 385 第16章 数据库函数库 386 16.1 引言 386 16.2 历史 386 16.3 函数库 386 16.4 实现概述 388 16.5 集中式或非集中式 390 16.6 并发 391 16.6.1 粗锁 391 16.6.2 细锁 391 16.7 源码 392 16.8 性能 409 16.8.1 单进程的结果 410 16.8.2 多进程的结果 410 16.9 小结 412 习题 412 第17章 与PostScript打印机通信 413 17.1 引言 413 17.2 PostScript通信机制 413 17.3 假脱机打印 415 17.4 源码 417 17.5 小结 434 习题 434 第18章 调制解调器拨号器 435 18.1 引言 435 18.2 历史 435 18.3 程序设计 436 18.4 数据文件 437 18.5 服务器设计 439 18.6 服务器源码 439 18.7 客户机设计 463 18.7.1 终端行规程 463 18.7.2 一个进程还是两个进程 464 18.8 客户机源码 465 18.9 小结 474 习题 474 第19章 伪终端 476 19.1 引言 476 19.2 概述 476 19.2.1 网络登录服务器 477 19.2.2 script程序 478 19.2.3 expect程序 479 19.2.4 运行协同进程 479 19.2.5 观看长时间运行程序的输出 479 19.3 打开伪终端设备 480 19.3.1 SVR4 481 19.3.2 4.3+BSD 482 19.4 pty_fork函数 484 19.5 pty程序 486 19.6 使用pty程序 489 19.6.1 utmp文件 489 19.6.2 作业控制交互 489 19.6.3 检查长时间运行程序的输出 491 19.6.4 script程序 491 19.6.5 运行协同进程 492 19.6.6 用非交互模式驱动交互式 程序 492 19.7 其他特性 494 19.7.1 打包模式 494 19.7.2 远程模式 494 19.7.3 窗口大小变化 495 19.7.4 信号发生 495 19.8 小结 495 习题 495 附录A 函数原型 497 附录B 其他源代码 512 附录C 习题答案 518 参考书目 536

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值