python __slots__ 详解(上篇)

python中的new-style class要求继承Python中的一个内建类型, 一般继承object,也可以继承list或者dict等其他的内建类型。
在python新式类中,可以定义一个变量__slots__,它的作用是阻止在实例化类时为实例分配dict,

默认情况下每个类都会有一个dict,通过__dict__访问,这个dict维护了这个实例的所有属性,举例如下:

class base(object):
    var=9 #类变量
    def __init__(self):
        pass

b=base()
print b.__dict__
b.x=2 #添加实例变量
print b.__dict__
运行结果:
{ }
{'x': 2}
可见:实例的dict只保持实例的变量,对于类的属性是不保存的,类的属性包括变量和函数。
由于每次实例化一个类都要分配一个新的dict,因此存在空间的浪费,因此有了__slots__。
__slots__是一个元组,包括了当前能访问到的属性。
当定义了slots后,slots中定义的变量变成了类的描述符,相当于java,c++中的成员变量声明,
类的实例只能拥有slots中定义的变量,不能再增加新的变量。注意:定义了slots后,就不再有dict。如下:

class base(object):
    __slots__=('x')
    var=8
    def __init__(self):
        pass

b=base()
b.x=88 #添加实例变量
print b.x
#b.y=99 #无法添加slots之外的变量 (AttributeError: 'base' object has no attribute 'y')
#print b.__dict__ #定义了__slots__后,就不再有__dict__ (AttributeError: 'base' object has no attribute '__dict__')
运行结果:
88
如果类变量与slots中的变量同名,则该变量被设置为 readonly!!!如下:

class base(object):
    __slots__=('y')
    y=22 # y是类变量,y与__slots__中的变量同名
    var=11
    def __init__(self):
        pass
    
b=base()
print b.y
print base.y
#b.y=66 #AttributeError: 'base' object attribute 'y' is read-only
运行结果:
22
22
Python是一门动态语言,可以在运行过程中,修改实例的属性和增删方法。一般,任何类的实例包含一个字典__dict__,
Python通过这个字典可以将任意属性绑定到实例上。有时候我们只想使用固定的属性,而不想任意绑定属性,
这时候我们可以定义一个属性名称集合,只有在这个集合里的名称才可以绑定。__slots__就是完成这个功能的。

class test_slots(object):
    __slots__='x','y'
    def printHello(self):
        print 'hello!'

class test(object):
    def printHello(self):
        print 'hello'

print dir(test_slots) #可以看到test_slots类结构里面包含__slots__,x,y
print dir(test)#test类结构里包含__dict__
print '**************************************'
ts=test_slots()
t=test()
print dir(ts) #可以看到ts实例结构里面包含__slots__,x,y,不能任意绑定属性
print dir(t) #t实例结构里包含__dict__,可以任意绑定属性
print '***************************************'
ts.x=11 #只能绑定__slots__名称集合里的属性
t.x=12 #可以任意绑定属性
print ts.x,t.x
ts.y=22 #只能绑定__slots__名称集合里的属性
t.y=23  #可以任意绑定属性
print ts.y,t.y
#ts.z=33 #无法绑定__slots__集合之外的属性(AttributeError: 'test_slots' object has no attribute 'z')
t.z=34 #可以任意绑定属性
print t.z 
运行结果:
['__class__', '__delattr__', '__doc__', '__format__', '__getattribute__', '__hash__', '__init__', '__module__', '__new__', '__reduce__', '__reduce_ex__', '__repr__', '__setattr__', '__sizeof__', ' __slots__', '__str__', '__subclasshook__', 'printHello', ' x', 'y']
['__class__', '__delattr__', ' __dict__', '__doc__', '__format__', '__getattribute__', '__hash__', '__init__', '__module__', '__new__', '__reduce__', '__reduce_ex__', '__repr__', '__setattr__', '__sizeof__', '__str__', '__subclasshook__', '__weakref__', 'printHello']
**************************************
['__class__', '__delattr__', '__doc__', '__format__', '__getattribute__', '__hash__', '__init__', '__module__', '__new__', '__reduce__', '__reduce_ex__', '__repr__', '__setattr__', '__sizeof__', ' __slots__', '__str__', '__subclasshook__', 'printHello', ' x', 'y']
['__class__', '__delattr__', ' __dict__', '__doc__', '__format__', '__getattribute__', '__hash__', '__init__', '__module__', '__new__', '__reduce__', '__reduce_ex__', '__repr__', '__setattr__', '__sizeof__', '__str__', '__subclasshook__', '__weakref__', 'printHello']
***************************************
11 12
22 23
34

正如上面所说的,默认情况下,Python的新式类和经典类的实例都有一个 dict来存储实例的属性。这在一般情况下还不错,而且非常灵活,
乃至在程序中可以 随意设置新的属性。但是,对一些在”编译”前就知道有几个固定属性的小class来说,这个dict就有点浪费内存了。
当需要创建大量实例的时候,这个问题变得尤为突出。一种解决方法是在 新式类中定义一个__slots__属性。
__slots__声明中包含若干实例变量,并为每个实例预留恰好足够的空间来保存每个变量;这样Python就不会再使用dict,从而节省空间。

【使用memory_profiler模块,memory_profiler模块是在逐行的基础上,测量代码的内存使用率。尽管如此,它可能使得你的代码运行的更慢。使用装饰器@profile来标记哪个函数被跟踪。】

下面,我们看一个例子:
from  memory_profiler import profile
class A(object): #没有定义__slots__属性
    def __init__(self,x):
        self.x=x

@profile
def main():
    f=[A(523825) for i in range(100000)]

if __name__=='__main__':
    main()
运行结果,如下图:

第2列表示该行执行后Python解释器的内存使用情况, 第3列表示该行代码执行前后的内存变化
在没有定义__slots__属性的情况下,该代码共使用了20.8MiB内存。
从结果可以看出,内存使用是以MiB为单位衡量的,表示的mebibyte(1MiB = 1.05MB)
from  memory_profiler import profile
class A(object):#定义了__slots__属性
    __slots__=('x')
    def __init__(self,x):
        self.x=x

@profile
def main():
    f=[A(523825) for i in range(100000)]

if __name__=='__main__':
    main()
运行结果,如下图:

可以看到,在定义了__slots__属性的情况下,该代码共使用了6.1MiB内存,比上面的20.8MiB节省了很多内存!
综上所述,在确定了 类的属性固定的情况下,可以 使用__slots__来优化内存
提醒:不要贸然进行这个优化,把它用在所有地方。这种做法不利于代码维护,而且只有生成数以千计的实例的时候才会有明显效果。

(完)


  • 50
    点赞
  • 132
    收藏
    觉得还不错? 一键收藏
  • 4
    评论
`__slots__` 是 Python 中的一个特殊属性,它允许你显式地指定一个类的实例属性。通过使用 `__slots__`,你可以限制一个类实例可以存在的属性集合,从而优化内存使用和访问速度。 在 Python 中,每个类实例都有一个字典(`__dict__`)用于存储实例的属性。这使得你可以在运行时动态地给实例添加、修改或删除属性。然而,对于拥有大量实例的类,使用字典来存储属性可能会占用大量内存,并且属性查找会比较慢。 使用 `__slots__`,你可以预先声明一个固定的属性集合,从而避免了使用字典来存储实例的属性。通过这种方式,每个实例只会使用固定大小的内存,属性查找也变得更快。 要使用 `__slots__`,你可以在类定义中定义一个包含属性名称的元组。这些属性名称将成为实例的属性,而且除了这些属性之外,任何其他的属性都不能被添加到实例中。以下是一个示例: ```python class MyClass: __slots__ = ('attribute1', 'attribute2') def __init__(self, value1, value2): self.attribute1 = value1 self.attribute2 = value2 # 创建一个类实例 obj = MyClass(10, 20) # 访问实例属性 print(obj.attribute1) # 输出: 10 print(obj.attribute2) # 输出: 20 # 尝试添加新属性 obj.attribute3 = 30 # 抛出 AttributeError:'MyClass' object has no attribute 'attribute3' ``` 在上面的例子中,`MyClass` 类的实例只能具有 `attribute1` 和 `attribute2` 这两个属性。如果你尝试添加一个不在 `__slots__` 中的新属性,将会引发 `AttributeError` 异常。 需要注意的是,使用 `__slots__` 有一些限制和注意事项: - `__slots__` 只对当前类的实例有效,子类不受影响。 - 每个类实例仍然会有一个 `__dict__` 属性,但它只是一个空字典,不会包含实例的属性。 - 使用 `__slots__` 可能会导致一些特殊方法(例如 `__weakref__`)无法正常工作。 - 使用 `__slots__` 可能会限制动态性和灵活性。只有在确实需要优化内存和属性访问速度时才应该使用它。 希望这个解释能够帮到你!如果你还有其他问题,请随时提问。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值