APUE 第三章 文件I/O 文件的打开、读写、设置等

原创 2011年01月15日 10:49:00

本章介绍了UNIX系统中文件操作的函数,主要包括open、read、write、lseek、close等。这些函数被称为unbuffered I/O,unbuffered意味着每次调用read、write都会调用一个系统调用,这些函数不是ISO C的组成部分,但是是POSIX的组成部分。

本章的所有内容基本可以用这样一个图来描述,理解了这个图,基本就理解了本章的内容。

clip_image001

从上图可以看出在整个关系链中,出现了进程、文件描述符(fd)、文件表、进程表、v-node表等。

系统维护了一张进程表,其中的每一项称为进程表项,即上图最左边的是表示进程表中的一个条目,一个进程表条目可以理解为是一个数组,包括了该进程打开的所有文件的描述。在对文件的描述中包括了某个文件描述符的flag(主要是close-on-exec标记)和指向文件表项的指针。(即fd flags和file pointer)

如果进程重新打开一个文件,那么会增加一条fd和file pointer组成的条目。

文件指针指向的是文件表项,文件表项中包含看对文件属性的描述(例如以读的方式打开、写的方式打开、读写方式打开、append方式、nonblock方式等),同时标记了文件当前的偏移量和执行v-node的指针

v-node表项可以理解为是文件的信息吧(其实不一定是),包括了文件的信息,例如文件大小等等

从上面可以知道,这是一个三级结构,而我们主要关注的有文件描述符fd的flag、文件的属性等,这两个是完全不同的概念,fd flags是对文件描述符性质的描述,主要说明该文件描述符的性质,目前主要是由close-on-exec属性组成的。

而文件的属性主要是文件操作的一些性质,例如以读的方式打开、写的方式打开、读写方式打开、append方式、nonblock方式等,可见他不同于文件描述符的属性

关于什么是close-on-exec,我个人的理解是这样的:当调用fork后,子进程会很父进程拥有同样的文件描述符,如下图所示

clip_image002

此后子进程可能会调用exec函数执行其他的程序,而close-on-exec属性就在这里有所显示了,如果某个文件描述符fd设置了close-on-exec属性的话,那么子进程中的这个文件描述符fd在执行exec函数时就会被关闭。!!!例如如果fd0设置了close-on-exec属性,那么在执行exec函数族后,子进程中的fd0会被关闭。下面是一种解释:

clip_image003

有了上面对close-on-exec属性的了解,下面可以介绍fcntl函数了,fcntl函数主要是用于设置文件描述符fd的属性、文件的属性(读方式打开、写方式打开等)、dup(复制)已经存在的文件描述符等其他功能

fcntl函数可以设置文件描述符fd是否是close-on-exec的;可以设置文件的属性是读方式打开的、写方式打开的还是其他等等。

综上所述,文件描述符fd的属性和文件的属性是完全不同的概念,文件描述符的属性目前主要有close-on-exec属性;而文件的属性有O_RDONY、O_WRONLY、O_RDWR、O_APPEND、O_NONBLOCK、O_SYNC、O_DSYNC、O_RSYNC、O_FSYNC、O_ASYNC等

好,下面从头分析文件的描述符。

  • 在linux中,系统为打开的文件用一个非负整数来标识文件。这个非负整数就是文件描述符,在一般文件的操作过程中,他是通过int open(const char* pathname, int flag, ...)的返回值来获得的。其中flag的值就是用来指明文件打开时的属性的,主要有O_RDONY、O_WRONLY、O_RDWR、O_APPEND、O_NONBLOCK、O_SYNC、O_CREAT、O_EXCL、O_TRUNC等,其中O_RDONY、O_WRONLY、O_RDWR这三个只能选一个,他们是互斥的关系,而后面的可以与这三个中的一个进行共存。O_APPEND表示打开文件后在文件尾进行操作。O_CREAT表示如果要打开的文件不存在,则新建一个同名的文件。
  • 打开文件后,就可以对文件进行读写、seek等操作了,在操作结束后,调用close函数将文件描述符关闭,调用close过程是不必须的,因为在进程结束的时候会自动将其自己打开的文件全部关闭,但直接调用close是一个很好的习惯。
  • 可以利用lseek函数对文件的offset进行移动,这是一个非常有用途的操作,例如在你操作一个文件时想在某个指定位置对文件进行操作,那么就可以利用off_t lseek(int fd, off_t offset, int whence)函数来对文件偏移量进行操作。具体的offset是根据whence的不同有不同的含义:

1、当whence=SEEK_SET的时候,表示偏移量是相当于文件开始算起的

2、当whence=SEEK_CUR的时候,表示偏移量是相当于现在的偏移量算起的

3、当whence=SEEK_END的时候,表示偏移量是相当于文件末尾算起的

  • 在打开了文件后就可以利用read函数对文件进行读操作了

ssize_t read(int fd, void *buf, size_t nbytes);

如果read读取成功,那么实际读取的字节数会被返回,如果是读到文件结尾了,会返回0;如果是在读的过程中发生了错误,返回-1

有一些情况下read实际读取的字节数是比请求的nbytes字节数要小的,具体有这些情况:

1、例如在读取一个文件时,每次要读取100个字节(即nbytes=100),但文件的大小不是100字节的整数倍,比如文件是230个字节,那么前两次每次都是读取100个字节,到第三次的时候银行文件剩余不到100个字节,那么实际读取的是30个字节。在第四次读取的时候,发现已经到文件结尾了,则返回0

2、当从终端设备读的时候

3、当从网络接口读取的时候,例如socket

4、当从pipe或者FIFO读取的时候

5、当从一个以record为条目的文件中读取的时候

6、当已经读了部分数据,但被信号中断的时候

等等

因此当利用read读取数据的时候,不能简单通过判断实际读取的字节数和请求的字节数是否相同来判断,下面简要给出一个read的封装版本:

int my_read(int fd, void *buf, int nbytes)

{

int cur_bytes = 0;//标记实际读取了多少字节数

while(cur_bytes < nbytes)

{

int ret_bytes = read(fd, buf+cur_bytes, nbytes - cur_bytes);

//标记实际读取的字节数

if(ret_bytes < 0 && EINTR == errno) //EINTR表示在未进行读取任何数据前被信号中断了

clip_image004

{

continue;

}

else

if(ret_bytes < 0)

{

err_msg("read error.");//读取错误

return -1;

}

else

if(ret_bytes == 0)

{

break; //读取完毕

}

else

{

cur_bytes += ret_bytes;

}

}

return cur_bytes;

}

  • 在打开文件后,就开对文件进行写操作了,写操作主要是利用write函数来实现的。

ssize_t write(int fd, const void *buf, size_t nbytes);//-1 on error;返回实际写的字节数

如果在打开文件的时候设置了O_APPEND属性的话,那么在执行每次写操作的时候,文件的offset都是指向文件的尾部的。即使是多进程同时写的时候,例如有的进程先写,而其他进程后写,那么也能保证其他进程是将数据写到文件的末尾了,例如一些log的写操作,需要加上O_APPEND属性。这个属性可以保证原子操作

当然多个进行同时读取同一个文件是没有问题的,因为大家每个进程都有自己的文件偏移量,在读的过程中不会发生问题。

下面给出一个write的实现:

int my_write(int fd, const void *buf, int nbytes)

{

int cur_bytes = 0;

while(cur_bytes < nbytes)

{

int ret_bytes = write(fd, buf+cur_bytes, nbytes - ret_bytes);

if(ret_bytes <= 0 && EINTR == errno) //EINTR 表示在没有进行写任何数据前被信号中断了

clip_image005

{

continue;

}

else

if(ret_bytes <= 0)

{

err_msg("write error.");

return -1;

}

else

{

cur_bytes += ret_bytes;

}

}

return cur_bytes;

}

  • dup、dup2函数

dup函数是用来复制一个文件描述符的,将两个文件描述符指向同一个文件表项,进行完这个操作后,两个文件描述符指向了同一个文件表项,则他们的文件属性是相同的,例如文件是以可读、可写等方式打开,但需要注意的是两个文件描述符的属性可能是不同的,即两者的close-on-exec属性是不一定相同的。dup函数操作后,新的文件描述符的close-on-exec标志经常会被清除掉

clip_image006

APUE读书笔记-第三章 文件I/O

今天看得挺快的,一下子就把第二章看完了,不过第二章也确实看得不仔细,这一章其实在程序设计中还是非常重要的,因为这一章的内容决定了程序的可移植性。 好了,回到这一章的主题文件I/O。  3.2节主要对文...
  • u012927281
  • u012927281
  • 2016年06月15日 15:25
  • 2216

[APUE]第三章:文件I/O

第三章:文件I/O Linux对文件操作有open、read、write、close、lseek,这些api都是不带缓冲的函数,相对于c库,这些可移植的api内部实现是有缓冲区的。 int ope...
  • youkuxiaobin
  • youkuxiaobin
  • 2013年05月15日 23:55
  • 1115

apue《UNIX环境高级编程第三版》第二章答案详解

转载请标明本博客地址 UNIX高级编程第二章习题答案:
  • hubbybob1
  • hubbybob1
  • 2015年11月11日 22:11
  • 1356

《APUE》笔记-第三章-文件I/O

1.引言 本章讲解的函数有:open、read、write、lseek、close、dup、fcntl、sync、fsync、ioctl都是系统调用,都是不带缓冲的I/O 2.文件描述符 open...
  • ZX714311728
  • ZX714311728
  • 2016年10月27日 11:09
  • 227

APUE笔记---第三章文件I/O

APUE笔记—第三章文件I/O1. C标准库函数与系统函数的区别 用户程序可以直接访问系统函数 用户程序也可以调用C标准库函数,C标准库函数间接调用系统函数 2. 文件描述符对于内核而言,所有打开的...
  • men_wen
  • men_wen
  • 2016年10月26日 21:20
  • 275

APUE学习: 第三章, 文件I/O

一, 基本函数 open, close, creat, lseek, read, write 这些是最原始的系统内核函数, 其他I/O函数例如fread, fwrite系列等都是由此派生而出的o...
  • poppick
  • poppick
  • 2016年04月01日 18:02
  • 131

APUE第三章 文件I/O

函数open和openat 调用open或openat函数可以打开或创建一个文件。 #include int open(const char *path, int flag, .../mode_t...
  • ASAP_Diablo
  • ASAP_Diablo
  • 2017年07月12日 17:08
  • 121

APUE学习笔记——第三章文件I/O

1、文件描述符:意思就是unix 环境下用open函数打开一个文件,正确执行后会返回个整型数值,这个就叫文件描述符。(个人理解的,解释可能完全不对)       基本的三种文件描述符:STDIN_F...
  • Acceptedxukai
  • Acceptedxukai
  • 2013年03月20日 21:39
  • 836

【APUE】3、第三章 文件I/O

第三章  文件I/O   3.1 引言   3.2 文件描述符       3.3 函数open和openat     对于参数的...
  • cutter_point
  • cutter_point
  • 2015年11月30日 18:41
  • 404

APUE第三章 文件I/O

APUE第三章 文件I/O 1、文件描述符
  • tianttt
  • tianttt
  • 2014年07月15日 18:34
  • 458
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:APUE 第三章 文件I/O 文件的打开、读写、设置等
举报原因:
原因补充:

(最多只允许输入30个字)