Python实用技巧讲解——如何正确读取大文件？

 

文件读写属于一种常见的IO操作，由于操作系统将底层操作磁盘的接口向上封装为一种通用接口，因此Python中读写文件的基本方法和JAVA、PHP等高级编程语言一样，先请求操作系统打开一个文件描述符，通过操作系统提供的接口从这个文件对象中读取数据，或者把数据写入这个文件中，最后当文件读写操作完成后关闭文件。

需要注意的是文件读写完成后必须及时关闭文件，一方面打开的文件会占用操作系统的资源，并且操作系统同一时间能打开的文件数量也是有限制的，比如Linux操作系统中我们可以使用ulimit -n命令查看最多可打开文件的数量。另一方面在写文件时，操作系统是把数据放到内存缓冲区异步写入磁盘中，并不会立刻把数据全部写入磁盘，而调用close()方法可以使操作系统把没有写入磁盘的数据全部写入磁盘中，防止数据丢失的情况。接下来我们先看下正确的文件打开方式。

文件打开的几种方式

Python内置了open()方法打开了一个文件，如下所示。文件打开模式有'r'、'w'、'a'、'r+'、'w+'、'a+'、'b'等，'r'只读模式打开文件，并将文件指针指向文件头，如果文件不存在会报错；'w'只写模式打开文件，并将文件指针指向文件头，如果文件存在则将其内容清空，不存在则创建；'a'以只追加可写模式打开文件，并将文件指针指向文件尾部，如果文件不存在则创建。对应于open()方法打开文件需要有close()方法关闭文件。

f = open('/mnt/media/log.txt', 'r&#