设定:
我正在运行python代码,其中:
我打开一个文件。
对于文件中的每一行,我创建一个对象
对对象进行一些操作
请注意,一旦完成操作部分,就不再需要该对象。每条新线都是独立的。
根据要求的相关代码:
我已经注释了我代码的所有部分,将下面的代码留在下面:
import gc
for l in range(num_lines):
inp = f.readline()[:-1]
collector = [int(i) for i in inp]
M = BooleanFunction(collector)
deg = M.algebraic_degree()
del M
gc.collect()
问题:
对象一旦创建,就会消耗一些内存。执行完操作后,我将无法释放它。因此,在遍历文件时,我的内存不断积累新对象,并且通过大约793行进入文件,我的16 GB RAM已完全耗尽。
我尝试过的
使用垃圾收集器:
import gc
del Object
gc.collect()
但是,垃圾收集器不会释放RAM(或者)python没有向系统释放内存。创建子进程是一个想法,但不是我想要的。
问题:
有什么办法可以将程序当前占用的所有内存释放给OS?这意味着删除所有变量(循环变量,全局变量等)。与按CTRL + C终止程序时发生的

这篇博客探讨了在Python中如何管理内存,特别是如何在处理大量数据时避免内存耗尽。作者遇到的问题是在读取文件并创建对象的过程中,内存不断累积导致内存不足。尝试使用`gc.collect()`进行垃圾回收并未成功释放内存。文章提出了可能的原因,包括意外的引用保留、垃圾收集器的限制以及可能的C扩展模块内存管理问题。建议包括使用调试标志检查垃圾回收状态、在Python调试器下运行代码以及注意可能导致内存泄漏的机制,如memoization。最后,提到了解决此问题的一种极端方法是终止程序来释放所有内存。
最低0.47元/天 解锁文章

被折叠的 条评论
为什么被折叠?



