分析python源码（1） list对象空间内存问题

最新推荐文章于 2024-04-23 12:57:25 发布
最新推荐文章于 2024-04-23 12:57:25 发布
阅读量2.4k 收藏 2
点赞数 1
分类专栏： Python源码小记 文章标签： Python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41854273/article/details/83059113
版权

问题引出

观察list的内存
我们发现*10和*=所创建的内存是不一样的

解释：

list是动态长度的，在必要时会重新分配内存
这里的* 和 *=是两个不同的指令，不同的指令导致分配的内存不一样。
a * 10 是将会调用list_repeat
内部源码
所以a * 10只会申请容纳10个元素的空间

而 *= 会调用 list_inplace_repeat
内部源码
这里通过 list_resize 进行扩容
这个是扩容规则。比方你需要7个空间，这个resize大概率会给你申请多余的比方10个。

另一个例子
append重新分配内存
b和c一样，都是list_resize 进行扩容,append会在空间不足时调用resize。这个有点类似C++中的vector，申请的空间一般会有预留，会在占用时进行扩容。

想看底层的话有一本《python源码剖析》

最后推荐一下教我的大佬的博客：栖迟于一丘
有很多关于Python源码的知识，更新了更详细全面的解释：https://www.hongweipeng.com/index.php/archives/1630/

Arrowarcher
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
3-Python内置结构-列表
大欣的IT之路
01-03 329
1 Python内置数据结构         Python内置了很多数据结构(容器),供我们直接进行使用，在学习结构之前，有一些小的知识点进行补充。 1.1 数值型 int、
python更新list内存不足_求助！！！小哥哥们看过来哦，为什么显示内存不足呢...
weixin_39603823的博客
12-05 209
该楼层疑似违规已被系统折叠隐藏此楼查看此楼# 采用TF-IDF方法提取文本关键词import sys,codecsimport pandas as pdimport numpy as npimport jieba.possegimport jieba.analysefrom sklearn import feature_extractionfrom sklearn.feature_extract...
Python如何优化代码以减少内存占用？
最新发布
LindRoland的博客
04-23 516
PyInstaller和Py2exe等工具可以将Python程序打包为独立的可执行文件，减少运行时对Python解释器的依赖，从而降低内存占用。然而，随着代码规模的扩大和复杂度的提高，如果不进行适当的优化，Python程序可能会消耗大量的内存资源，导致性能下降甚至程序崩溃。因此，在处理大量数据时，使用生成器可以显著减少内存占用。测试和验证：在优化代码后，我们应该进行充分的测试和验证，以确保优化效果符合预期且没有引入新的问题。在优化之前，我们应该先分析程序的性能瓶颈和内存占用情况，找出真正需要优化的部分。
python for循环时，列表内存分配紊乱，多个元素使用同一内存，导致元素相互覆盖，已解决！！！
qq_43381010的博客
02-17 739
列表内存紊乱一般是在list.append()发生的，使用相同内存的元素被加到列表，导致元素的值相互覆盖 解决办法： 事先申请列表内存，不适用list.append()随机分配 MATRIX_SIZE = 500 def filter_value(origin: list, except_value: int) -> list: return list(filter(lambda v...
Python清空列表list释放
qq_43511299的博客
03-21 968
a=[20, 24.49489742783178, 24.49489742783178, 24.49489742783178, 28.284271247461902, 23.664319132398468, 17.888543819998326, 8.944271909999175, 0, 15, 15] a=[] print(a) 输出 []
Python--清空list的方法
Ezio
09-19 1万+
1.大数据量的list，要进行局部元素删除，尽量避免用del随机删除，非常影响性能，如果删除量很大，不如直接新建list，然后用下面的方法释放清空旧list。（这里说的del随机删除是什么意思？）2.对于一般性数据量超大的list，快速清空释放内存，可直接用 a = [] 来释放。其中a为list。3.对于作为函数参数的list，用上面的方法是不行的，因为函数执行完后，list长度是不变的，但是可以
从Python的源码浅要剖析Python的内存管理
12-25
Python 的内存管理架构（Objects/obmalloc.c）： 复制代码 代码如下:  _____ ______ ______ ________  [ int ] [ dict ] [ list ] … [ string ] Python core | +3 | <—– Object-specific memory —–> ...
深入源码解析Python中的对象与类型
01-20
Python中对象分为两类: 定长(int等), 非定长(list/dict等) 所有对象都有一些相同的东西, 源码中定义为PyObject和PyVarObject, 两个定义都有一个共同的头部定义PyObject_HEAD(其实PyVarObject有自己的头部定义...
通过Cpython3.9源码分析下，为什么说python中一切皆对象
04-15
通过对CPython 3.9源码的分析，我们可以看到这些机制如何共同作用，确保了Python语言的动态特性和面向对象的特性得以完美实现。这种设计使得开发者可以轻松地创建新的数据类型，同时保证了代码的可扩展性和一致性。
Python编程源码.zip
06-16
在Python编程中，面向对象编程（OOP）是重要的概念，类（class）是创建对象的蓝图，而对象是程序中的实例。继承（inheritance）和多态（polymorphism）进一步增强了代码的复用性和灵活性。 关于"Python编程(第4版)...
Python源码剖析
02-09
《Python源码剖析》这本书是Python编程者深入理解Python内核的重要参考资料，它为我们揭示了Python语言背后的实现机制，帮助我们更好地理解和优化自己的代码。在Python的世界里，了解其源码不仅能提升编程技能，还能...
python 链表操作 优化_Python：如何修改列表时内存的使用和优化？
weixin_39992072的博客
11-27 90
问题我的关注点如下：我将一个相对性较大的数据集存储在一个经典的python列表中，为了处理数据，我必须多次迭代列表，对这些元素执行一些操作，并经常从列表中弹出一个项目。似乎从Python列表中删除一个项目花费O（N），因为Python必须将元素上方的所有项目复制到一个地方。 此外，由于要删除的项目数量与列表中元素的数量大致成比例，因此将导致O（N ^ 2）算法。我希望找到一个经济高效的解决方案（时...
python list 内存_3、顺序表、内存、类型、python中的list
weixin_39604557的博客
12-09 134
1、内存、类型本质、连续存储1、内存本质2、C 语言实例-计算 int, float, double 和 char 字节大小使用 sizeof 操作符计算int, float, double 和 char四种变量字节大小。sizeof 是 C 语言的一种单目操作符，如C语言的其他操作符++、--等，它并不是函数。sizeof 操作符以字节形式给出了其操作数的存储大小。#include intmai...
python列表全面讲解
iukede的博客
06-25 754
本文☆可以不掌握。 一、列表是python最重要的，几乎所有语言都要使用列表，包括C,java。 1、列表可以存放： 字符串，浮点数（小数），整型数 也可存放：元组、列表、字典 list=[‘spam’, ‘汉语’, 3.14，2021] a = [(20.21, ‘age’), [,‘name’, 2021], {‘键’: ‘值’}] ☆注意：列表长度有限制： 32位python的限制是 536870912 个元素 64位python的限制是 1152921504606846975 个元素 ...
python参数内存地址
m0_46926492的博客
04-24 2891
python参数内存地址 1.参数内存地址 查看某个值在内存中的地址 v1=123 id(v1) 函数值执行参数时，传递的是内存地址 #函数执行传参，传递的是内存地址 def func(data): print(data,id(data)) #wxy 2631904099312 v1='wxy' print(v1,id(v1)) # wxy 2631904099312 func(v1) python参数（传递内存地址）这个好处： 节省内存 对于可变类型在函数中修改元素内容，所有的地
python不同方式生成的list占用内存空间大小不同
qq_29007291的博客
03-05 3453
来源： https://www.bilibili.com/video/BV19S4y1F7xq?spm_id_from=333.999.0.0 说明：具体占用的byte和python版本，系统版本（不同的windows版本或者linux或者MAC OS）有关，大体上所表达的意思明白就好. 一、 现象 三个元素一样的列表，内存占用却不一样 import sys sys.getsizeof([0]*3) 80 sys.getsizeof([0,0,0]) 120 sys.getsizeof([0 for _
Python list动态分配内存示例
wx199308的专栏
09-07 6505
说明python采用动态顺序表结构，每次储存元素的空间使用完之后，将动态分配原有储存空间两倍的大小的新内存作为存储空间。示例>>> a = [] >>> a.__sizeof__() 40 >>> a.append('a') >>> a.__sizeof__() 72 >>> a.append('a') >>> a.__sizeof__() 72 >>> a.append('a') >>> a.__
Python返回数组（List）长度的方法//查看list变量的长度
热门推荐
weixin_43355618的博客
02-27 1万+
Python返回数组（List）长度的方法//查看list变量的长度 a = file.readlines() print(a) print(len(a))
python 中tolist()源码
05-30
在Python中，`tolist()`方法通常是用于将数组或列表转换为Python列表的方法。下面是一个简单的示例代码： ```python import numpy as np arr = np.array([1, 2, 3, 4, 5]) lst = arr.tolist() print(lst) ``` ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值