如何解决Python2的内存泄漏问题

最新推荐文章于 2024-07-24 14:09:25 发布

xiejueheng

最新推荐文章于 2024-07-24 14:09:25 发布

阅读量3.7k

点赞数

分类专栏： Python 性能测试文章标签： python 内存泄漏 tcmalloc

本文链接：https://blog.csdn.net/xiejueheng/article/details/45798381

版权

本文探讨了Python2进程中遇到的内存泄漏问题，对比了原生pymalloc、无pymalloc和使用tcmalloc在处理大量对象时的内存管理效果。测试结果显示，tcmalloc在内存释放上表现出色，建议在生产环境中考虑使用tcmalloc编译的Python解释器以优化内存管理。

摘要由CSDN通过智能技术生成

python进程内存撑大了下不去，只能手动重启释放内存，这么坑爹的事情你遇到过吗？哪家内存分配器强？结果一目了然。

线上进程目前都是使用原生的Python内存分配器（pymalloc），在正常的情况下表现还算稳定，但如果来了一波类似于武神坛或者天下第一的比武大会，为手机瞬间带来了10倍于平时的流量，一阵狂虐之后，Python进程占用的内存被撑大就下不去了。关于Python的内存不释放问题，可以参考一下这两篇文章：python内存不释放原理，Python memory management and TCMalloc。

为了解决内存泄漏的问题，我专门使用了三种编译方式去编译Python2.7解释器

以下分别使用pymalloc、without-pymalloc、tcmalloc测试1千万个object的list内存释放情况（注：默认使用Python2.7）。