如何优化Python占用的内存

概述

如果程序处理的数据比较多、比较复杂,那么在程序运行的时候,会占用大量的内存,当内存占用到达一定的数值,程序就有可能被操作系统终止,特别是在限制程序所使用的内存大小的场景,更容易发生问题。下面我就给出几个优化Python占用内存的几个方法。

说明:以下代码运行在Python3。

举个栗子

我们举个简单的场景,使用Python存储一个三维坐标数据,x,y,z。

Dict

使用Python内置的数据结构Dict来实现上述例子的需求很简单。

>>> ob = {'x':1, 'y':2, 'z':3}
>>> x = ob['x']
>>> ob['y'] = y
PYthon学习企鹅裙:88198-2657  领取python自动化编程资料教程

查看以下ob这个对象占用的内存大小:

>>> print(sys.getsizeof(ob))
240
PYthon学习企鹅裙:88198-2657  领取python自动化编程资料教程

简单的三个整数,占用的内存还真不少,想象以下,如果有大量的这样的数据要存储,会占用更大的内存。

数据量 占用内存大小
1 000 000 240 Mb
10 000 000 2.40 Gb
100 000 000 24 Gb

Class

对于喜欢面向对象编程的程序员来说,更喜欢把数据包在一个class里。使用class使用同样需求:

class Point:
    #
    def __init__(self, x, y, z):
        self.x = x
        self.y = y
        self.z = z

>>> ob = Point(1,2,3)
PYthon学习企鹅裙:88198-2657  领取python自动化编程资料教程

class的数据结构和Dict区别就很大了,我们来看看这种情况下占用内存的情况:

字段 占用内存
PyGC_Head 24
PyObject_HEAD 16
_ weakref_ 8
_ dict_ 8
TOTAL 56

关于 __weakref__(弱引用)可以查看这个 文档 ,对象的__dict__中存储了一些self.xxx的一些东西。从Python 3.3开始,key使用了共享内存存储, 减少了RAM中实例跟踪的大小。

>
  • 4
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
回答: 要查看Python中对象的内存占用,可以使用以下方法: 1. 调用对象的内置属性`obj.__sizeof__`来获取对象的大小。 2. 使用Python的sys模块中的`sys.getsizeof(obj)`函数来获取对象的大小。 3. 使用Python内置的`total_size(obj)`函数来获取对象及其引用的所有对象的总大小。\[1\] 关于Python脚本运行时内存越来越大的问题,这可能是由于内存泄漏导致的。内存泄漏是指在程序运行过程中,分配的内存没有被正确释放,导致内存占用不断增加。解决这个问题的方法有: 1. 使用`del`关键字手动删除不再使用的变量,以释放其占用内存。 2. 调用`gc.collect()`函数来手动触发垃圾回收,清理不再使用的对象。 3. 检查代码中是否存在循环引用的情况,即两个或多个对象相互引用,导致无法被垃圾回收。 4. 使用内存分析工具,如`memory_profiler`来定位内存泄漏的具体位置,并进行修复。\[2\]\[3\] 通过以上方法,您可以查看Python对象的内存占用,并解决Python脚本运行时内存越来越大的问题。 #### 引用[.reference_title] - *1* [python 查看对象内存占用和对象形状/长度的方法小结-__size__of,sys.getsizeof(),ndarray.size,ndarray....](https://blog.csdn.net/PSpiritV/article/details/123224519)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^koosearch_v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [【解决】Python程序运行时所占内存越来越大](https://blog.csdn.net/qq_41858149/article/details/127581400)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^koosearch_v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值