python 数据文件的读取



import time
nums=[]
start = time.time()
with open('111.txt') as f:
    for line in f:
#        a=[int(i) for i in line.split()]可换为这个。方法一
        a=(float(i) for i in line.split())#float可以换成int,但是速度float更快一点。方法二
        nums+=a
#另一种读取方式,速度更慢点。方法三
#l = open("111.txt").read().split()
#n=len(l)
#
#for i in xrange(n):
#    l[i] = int(l[i])
#对27M的数据文件测试:第一种方法7秒多,第二种方法6秒多,第三种8秒多,第二种换成float后为4秒多,不知道什么原因

aa=time.time()-start
print 'ok'   ,  aa


数据文件:


生成数据后可以直接用 numpy 对数据进行处理

例如:

import numpy

sss=numpy.asarray(nums,dtype=float)



当然还有更快的方式:

import numpy
import time
nums=[]

start = time.time()
with open('111.txt') as f:
    for line in f:

        a=line.split()
        nums+=a



sss=numpy.asarray(nums,dtype=float)
aa=time.time()-start
print 'ok'   ,  aa#print的输出为:ok 2.89900016785


  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值