小量数据测试时没问题,数据量到几百万时killed
怀疑内存使用问题:
代码
for line in file.readlines():
改成:
for line in open("file","r")
下面这种不用一次性把数据读到内存。
小量数据测试时没问题,数据量到几百万时killed
怀疑内存使用问题:
代码
for line in file.readlines():
改成:
for line in open("file","r")
下面这种不用一次性把数据读到内存。