一、问题的发现与提出
在Python类的方法(method)中,要调用父类的某个方法,在Python 2.2以前,通常的写法如代码段1:
代码段1:
class A:
def __init__(self):
print "enter A"
print "leave A"
class B(A):
def __init__(self):
print "enter B"
A.__init__(self)
print "leave B"
>>> b = B()
enter B
enter A
leave A
leave B
即,使用非绑定的类方法(用类名来引用的方法),并在参数列表中,引入待绑定的对象(self),从而达到调用父类的目的。
这样做的缺点是,当一个子类的父类发生变化时(如类B的父类由A变为C时),必须遍历整个类定义,把所有的通过非绑定的方法的类名全部替换过来,例如代码段2,
代码段2:
class B(C): # A --> C
def __init__(self):
print "enter B"
C.__init__(self) # A --> C
print "leave B"
如果代码简单,这样的改动或许还可以接受。但如果代码量庞大,这样的修改可能是灾难性的。
因此,自Python 2.2开始,Python添加了一个关键字super,来解决这个问题。下面是Python 2.3的官方文档说明:
super(type[, object-or-type])
Return the superclass of type. If the second argument is omitted the super object
returned is unbound. If the second argument is an object, isinstance(obj, type)
must be true. If the second argument is a type, issubclass(type2, type) must be
true. super() only works for new-style classes.
A typical use for calling a cooperative superclass method is:
class C(B):
def meth(self, arg):
super(C, self).meth(arg)
New in version 2.2.
从说明来看,可以把类B改写如代码段3:
代码段3:
class A(object): # A must be new-style class
def __init__(self):
print "enter A"
print "leave A"
class B(C): # A --> C
def __init__(self):
print "enter B"
super(B, self).__init__()
print "leave B"
尝试执行上面同样的代码,结果一致,但修改的代码只有一处,把代码的维护量降到最低,是一个不错的用法。因此在我们的开发过程中,super关键字被大量使用,而且一直表现良好。
在我们的印象中,对于super(B, self).__init__()是这样理解的:super(B, self)首先找到B的父类(就是类A),然后把类B的对象self转换为类A的对象(通过某种方式,一直没有考究是什么方式,惭愧),然后“被转换”的类A对象调用自己的__init__函数。考虑到super中只有指明子类的机制,因此,在多继承的类定义中,通常我们保留使用类似代码段1的方法。
有一天某同事设计了一个相对复杂的类体系结构(我们先不要管这个类体系设计得是否合理,仅把这个例子作为一个题目来研究就好),代码如代码段4:
代码段4:
class A(object):
def __init__(self):
print "enter A"
print "leave A"
class B(object):
def __init__(self):
print "enter B"
print "leave B"
class C(A):
def __init__(self):
print "enter C"
super(C, self).__init__()
print "leave C"
class D(A):
def __init__(self):
print "enter D"
super(D, self).__init__()
print "leave D"
class E(B, C):
def __init__(self):
print "enter E"
B.__init__(self)
C.__init__(self)
print "leave E"
class F(E, D):
def __init__(self):
print "enter F"
E.__init__(self)
D.__init__(self)
print "leave F"
>>> f = F()
enter F
enter E
enter B
leave B
enter C
enter D
enter A
leave A
leave D
leave C
leave E
enter D
enter A
leave A
leave D
leave F
明显地,类A和类D的初始化函数被重复调用了2次,这并不是我们所期望的结果!我们所期望的结果是最多只有类A的初始化函数被调用2次——其实这是多继承的类体系必须面对的问题。我们把代码段4的类体系画出来,如下图:
object
| \
| A
| / |
B C D
\ / |
E |
\ |
F
按我们对super的理解,从图中可以看出,在调用类C的初始化函数时,应该是调用类A的初始化函数,但事实上却调用了类D的初始化函数。好一个诡异的问题!
也就是说,mro中记录了一个类的所有基类的类类型序列。查看mro的记录,发觉包含7个元素,7个类名分别为:
F E B C D A object
从而说明了为什么在C.__init__中使用super(C, self).__init__()会调用类D的初始化函数了。 ???
我们把代码段4改写为:
代码段9:
class A(object):
def __init__(self):
print "enter A"
super(A, self).__init__() # new
print "leave A"
class B(object):
def __init__(self):
print "enter B"
super(B, self).__init__() # new
print "leave B"
class C(A):
def __init__(self):
print "enter C"
super(C, self).__init__()
print "leave C"
class D(A):
def __init__(self):
print "enter D"
super(D, self).__init__()
print "leave D"
class E(B, C):
def __init__(self):
print "enter E"
super(E, self).__init__() # change
print "leave E"
class F(E, D):
def __init__(self):
print "enter F"
super(F, self).__init__() # change
print "leave F"
>>> f = F()
enter F
enter E
enter B
enter C
enter D
enter A
leave A
leave D
leave C
leave B
leave E
leave F
明显地,F的初始化不仅完成了所有的父类的调用,而且保证了每一个父类的初始化函数只调用一次。
三、延续的讨论
我们再重新看上面的类体系图,如果把每一个类看作图的一个节点,每一个从子类到父类的直接继承关系看作一条有向边,那么该体系图将变为一个有向图。不能发现mro的顺序正好是该有向图的一个拓扑排序序列。
从而,我们得到了另一个结果——Python是如何去处理多继承。支持多继承的传统的面向对象程序语言(如C++)是通过虚拟继承的方式去实现多继承中父类的构造函数被多次调用的问题,而Python则通过mro的方式去处理。
但这给我们一个难题:对于提供类体系的编写者来说,他不知道使用者会怎么使用他的类体系,也就是说,不正确的后续类,可能会导致原有类体系的错误,而且这样的错误非常隐蔽的,也难于发现。
四、小结
1. super并不是一个函数,是一个类名,形如super(B, self)事实上调用了super类的初始化函数,
产生了一个super对象;
2. super类的初始化函数并没有做什么特殊的操作,只是简单记录了类类型和具体实例;
3. super(B, self).func的调用并不是用于调用当前类的父类的func函数;
4. Python的多继承类是通过mro的方式来保证各个父类的函数被逐一调用,而且保证每个父类函数
只调用一次(如果每个类都使用super);
5. 混用super类和非绑定的函数是一个危险行为,这可能导致应该调用的父类函数没有调用或者一
个父类函数被调用多次。
附录(以下内容是我收集的,不是转自原文):1. 纯python实现的一个Super类[1]:
class Super(object):
def __init__(self, type, obj=None):
self.__type__ = type
self.__obj__ = obj
def __get__(self, obj, type=None):
if self.__obj__ is None and obj is not None:
return Super(self.__type__, obj)
else:
return self
def __getattr__(self, attr):
if isinstance(self.__obj__, self.__type__):
starttype = self.__obj__.__class__
else:
starttype = self.__obj__
mro = iter(starttype.__mro__)
for cls in mro:
if cls is self.__type__:
break
# Note: mro is an iterator, so the second loop
# picks up where the first one left off!
for cls in mro:
if attr in cls.__dict__:
x = cls.__dict__[attr]
if hasattr(x, "__get__"):
x = x.__get__(self.__obj__)
return x
raise AttributeError, attr
class A(object):
def m(self):
return "A"
class B(A):
def m(self):
return "B" + Super(B, self).m()
class C(A):
def m(self):
return "C" + Super(C, self).m()
class D(C, B):
def m(self):
return "D" + Super(D, self).m()
print D().m() # "DCBA"
2. super的一些缺陷[2]:
1)参数不同可能导致的问题,上示例,
class A(object):
def __init__(self):
print "A"
super(A, self).__init__()
class B(object):
def __init__(self):
print "B"
super(B, self).__init__()
class C(A):
def __init__(self, arg):
print "C","arg=",arg
super(C, self).__init__()
class D(B):
def __init__(self, arg):
print "D", "arg=",arg
super(D, self).__init__()
class E(C,D):
def __init__(self, arg):
print "E", "arg=",arg
super(E, self).__init__(arg)
print "MRO:", [x.__name__ for x in E.__mro__]
E(10)
输出结果为:
MRO: ['E', 'C', 'A', 'D', 'B', 'object']
E arg= 10
C arg= 10
A
Traceback (most recent call last):
File "example1-2.py", line 27, in ?
E(10)
File "example1-2.py", line 24, in __init__
super(E, self).__init__(arg)
File "example1-2.py", line 14, in __init__
super(C, self).__init__()
File "example1-2.py", line 4, in __init__
super(A, self).__init__()
TypeError: __init__() takes exactly 2 arguments (1 given)
如下图所示, 导致错误的主要原因为A的__init__调用的是D的__init__, 而不是objcet的__init__, 记住super对象是依据__mro__的顺序依次调用,并一定就是当前类的父类。
遇到参数不同,具体的解决办法是使用*args 和**kwargs 传参,上例中可以正确运行的代码为:
class A(object):
def __init__(self,*args, **kwargs):
print "A"
try:
super(A, self).__init__(*args, **kwargs)
except:
super(A, self).__init__( )
class B(object):
def __init__(self,*args, **kwargs):
print "B"
try:
super(B, self).__init__(*args, **kwargs)
except:
super(B, self).__init__( )
class C(A):
def __init__(self, arg,*args, **kwargs):
print "C","arg=",arg
super(C, self).__init__(arg,*args, **kwargs)
class D(B):
def __init__(self, arg,*args, **kwargs):
print "D", "arg=",arg
super(D, self).__init__(arg,*args, **kwargs)
class E(C,D):
def __init__(self, arg,*args, **kwargs):
print "E", "arg=",arg
super(E, self).__init__(arg,*args, **kwargs)
print "MRO:", [x.__name__ for x in E.__mro__]
E(10)
需要说明的是, object对象初始化时除了对象本身(super的第二个参数)不接受其他任何参数的,所以在A和B类中使用了try...except..语句。
2. 正如在转载文章中所指出的一样,不用混用super和未绑定的函数,要用super都同得用super,上例子
class A(object):
def __init__(self):
print "A"
super(A, self).__init__()
pass
class B(object):
def __init__(self):
print "B"
super(B, self).__init__()
pass
# some other module defines this class, not knowing about super()
class C(A,B):
def __init__(self):
print "C"
A.__init__(self)
B.__init__(self)
pass
print "MRO:", [x.__name__ for x in C.__mro__]
print "Method Calls:"
C()
运行的结果为:
MRO: ['C', 'A', 'B', 'object']
Method Calls:
C
A
B
B
很清楚,B类的__init__被调用了两次,这就是由于混用super和未绑定函数A.__init__和B.__init__所造成的。
上例中是子类没有调用super,而是使用了传统的未绑定函数,其实如果是父类中不用,而子类中不用也会导致非预期的问题,如下例,
输出结果为:class A(object): def __init__(self): print "A" super(A, self).__init__() class B(object): def __init__(self): print "B" super(B, self).__init__() class N(object): def __init__(self): print "N" object.__init__(self) class M(object): def __init__(self): print "M" object.__init__(self) class F1(A,B,N): def __init__(self): print "F1" super(F1, self).__init__() class F2(A,N,B): def __init__(self): print "F2" super(F2, self).__init__() class F3(N,A,B): def __init__(self): print "F3" super(F3, self).__init__() class F4(A,B,N,M): def __init__(self): print "F3" super(F4, self).__init__() def test(cl): print "MRO:", [x.__name__ for x in cl.__mro__] print "Calls:" cl() test(F1) test(F2) test(F3) test(F4)
MRO: ['F1', 'A', 'B', 'N', 'object'] Calls: F1 A B N MRO: ['F2', 'A', 'N', 'B', 'object'] Calls: F2 A N MRO: ['F3', 'N', 'A', 'B', 'object'] Calls: F3 N MRO: ['F4', 'A', 'B', 'N', 'M', 'object'] Calls: F3 A B N
参考文献:
[1]http://www.python.org/download/releases/2.2.3/descrintro/#cooperation