python读二进制文件字节长度_在Python中读取二进制文件:读取某些字节需要很长时间...

这很奇怪

我正在使用Python中的numpy库阅读一些(不可否认的是非常大的:每个~2GB)二进制文件。

我用的是:thingy = np.fromfile(fileObject, np.int16, 1)

方法。

这就在一个嵌套循环的中间-我对每个'channel'执行这个循环4096次,对每个'receiver'执行这个'channel'循环9次,这个'receiver'循环4次(每个接收器有9个通道,其中有4个!)。这是针对每个“块”,其中每个文件大约有3600个。在

所以你可以看到,非常迭代,我知道这需要很长的时间,但它比我预期的要长得多-平均每一块8.5秒。在

我用时间时钟()等等,发现一切都在尽可能快的进行,除了每个“块”大约有1到2个样本(所以4096*9*4中有1个或2个),在那里它似乎“卡住”了几秒钟。现在这应该是从二进制返回一个简单的int16,而不是一个需要几秒钟时间的东西。。。为什么粘住了?在

从基准测试中,我发现它每次都粘在同一个地方(block 2,receiver 8,channel 3,sample 1085就是其中之一,记录在案!),每次运行它都会在那里停留大约相同的时间。在

有什么想法吗?!在

谢谢

邓肯

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值