pandas处理数据报错, MemoryError:,内存问题

错误提示:

MemoryError: Unable to allocate 114. MiB for an array with shape (37, 405020) and data type float64
处理的是37列,405万行的表格数据,运行的时候内存还有2000多M可用,但是还是报错了,不知道是什么原因,在哪个地方设置了内存限制。后面继续研究下。

解决方案

1、发现数据类型都是float64,我改成了float16,减小数据占用内存,后面就可以顺利执行了。
之前是写
astype(float)
改成
astype(np.folat16)
但是这样做,会改变原来数字的大小!!!!!!!不可以这么做。
所以解决方案请看2、
2、后面又不行了,就把原先的python解释器给换成64位的,之前下载的是python3.8-32版本,在64位的电脑上面也能运行。64为的python解释器内存空间大一点

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值