我正在调查在Ubuntu 16.04(x86)上使用OpenCV(3.4.1,本地构建)的Python(3.5.2)应用程序中的内存泄漏(或“膨胀”)。
应用程序经常将图像写入文件,并为此使用.imwrite()方法。我发现使用.imwrite()会导致RAM的使用变得疯狂,但是我找不到这种行为的原因。在
为了调试此问题,我准备了以下简单的测试脚本:#!/usr/bin/python3
import cv2
import time
img = cv2.imread("vista.jpg")
idx = 0
while True:
filename = "/tmp/vista_copy_" + str(idx) + ".tiff"
cv2.imwrite(filename, img)
idx = idx + 1
time.sleep(1)
在运行这个脚本时,我监视了空闲RAM(每10秒采样一次空闲内存):
^{pr2}$
最后一个样本,其中自由内存返回到初始值,是在我从目标中删除图像文件之后,这可能暗示了这是OS问题,或者可能是文件没有被程序正确关闭(虽然我在C++源代码中找不到线索)。
我发现这种行为非常奇怪,更奇怪的是,imwrite是一种非常基本的方法。有人能帮忙调试和解决这个问题吗?在
编辑
显然,我的测试脚本中的内存消耗是由于/tmp实际上是一个RAM驱动器,但是当写入通过以太网适配器连接的外部驱动器时,问题仍然存在。在
更新
当写入物理驱动器上的本地文件夹时,问题再次出现。这似乎是一个与imwrite无关的一般操作系统问题。操作系统缓存文件,但从未释放缓存(可能它“认为”它有足够的内存来进行所有这些缓存)。
定期执行'echo 3 > /proc/sys/vm/drop_caches',正如建议的here和{a2}目前是一个合理的解决方案,但我们希望有一个侵入性/暴力性较小的解决方案,它可以防止系统使用如此多的缓存,或者可以使系统无需强制地释放缓存。在