内存占用降低篇——输入数据压缩
在参加机器学习类比赛项目时,经常会遇到输入数据量过大,导致读入输入数据时占用内存过多的问题,对于配置较低的电脑造成较大的负担。对此,经常使用数据压缩(高精度数据类型转为低精度数据类型)的方法缓解这一问题,具体代码如下:
def reduce_mem_usage(df, verbose=True):
numerics = ['int16', 'int32', 'int64', 'floa...
原创
2019-11-20 22:55:58 ·
301 阅读 ·
0 评论