错误提示:
MemoryError: Unable to allocate 114. MiB for an array with shape (37, 405020) and data type float64
处理的是37列,405万行的表格数据,运行的时候内存还有2000多M可用,但是还是报错了,不知道是什么原因,在哪个地方设置了内存限制。后面继续研究下。
解决方案
1、发现数据类型都是float64,我改成了float16,减小数据占用内存,后面就可以顺利执行了。
之前是写
astype(float)
改成
astype(np.folat16)
但是这样做,会改变原来数字的大小!!!!!!!不可以这么做。
所以解决方案请看2、
2、后面又不行了,就把原先的python解释器给换成64位的,之前下载的是python3.8-32版本,在64位的电脑上面也能运行。64为的python解释器内存空间大一点