python读取txt文件的行数_如何用Python快速统计文本的行数

通常我们会用wc -l来统计文件行数，不过用Python统计也很简单。

要快速统计一个文本文件中的行数，其实就是要统计这个文本文件中换行符的个数。为了尽量提高速度，我们需要尽量多读一些文本然后一起处理。统计换行符的个数可以用bytes内置的count方法。

代码如下：

from __future__ import print_function

import time

if __name__ == '__main__':

import sys

start = time.time()

with open(sys.argv[1],'rb') as f:

count = 0

last_data = '\n'

while True:

data = f.read(0x400000)

if not data:

break

count += data.count(b'\n')

last_data = data

if last_data[-1:] != b'\n':

count += 1 # Remove this if a wc-like count is needed

end = time.time()

print(count)

print((end-start) * 1000)

上面的代码中，我们将文件尾没有换行符的不完整的部分也算作一行，这跟wc -l略有区别，如果要跟wc -l一致的话，可以将带注释的行删掉。

这里没有处理universal newline、忽略空行等逻辑，如果需要这些功能，