python-读取文件和计算文件行数

一、计算文件的行数

最简单的办法是把文件读入一个大的列表中,然后统计列表的长度.如果文件的路径是以参数的形式filepath传递的,那么只用一行代码就可以完成我们的需求了:

       count = len(open(filepath,'rU').readlines())

如果是非常大的文件,上面的方法可能很慢,甚至失效.此时,可以使用循环来处理:

       count = -1
       for count, line in enumerate(open(thefilepath, 'rU')):
               pass
       count += 1

另外一种处理大文件比较快的方法是统计文件中换行符的个数’\n ‘(或者包含’\n’的字串,如在windows系统中):

       count = 0
       thefile = open(thefilepath, 'rb')
       while True:
              buffer = thefile.read(8192*1024)
       if not buffer:
              break
       count += buffer.count('\n')
       thefile.close( )

参数’rb’是必须的,否则在windows系统上,上面的代码会非常慢.

linecache是专门支持读取大文件,而且支持行式读取的函数库。 linecache预先把文件读入缓存起来,后面如果你访问该文件的话就不再从硬盘读取。

二、读取文件某一行的内容(测试过1G大小的文件,效率还可以)

       import linecache

       count = linecache.getline(filename,linenum)

三、用linecache读取文件内容(测试过1G大小的文件,效率还可以)

      str = linecache.getlines(filename)

   str为列表形式,每一行为列表中的一个元素

   用read读取文件内容:

      a=open('/home/ubuntu/b.txt','rb')

      fr=a.read()  #一次读取文件内所有行内容

      fr1=b.readline()  #每次读取文件一行,知道全部读完

      fr2=c.readlines()  #读取文件内全部内容

感谢:http://blog.51cto.com/winters/1590683 的分享

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值