在类中定义的函数无法使用multiprocessing.Pool多进程操作中无法被执行

在类中定义的函数无法使用multiprocessing.Pool多进程操作中无法被执行

原因:
stackoverflow上的解释:
Pool methods all use a queue.Queue to pass tasks to the worker processes. Everything that goes through the queue.Queue must be pickable. So, multiprocessing can only transfer Python objects to worker processes which can be pickled. Functions are only picklable if they are defined at the top-level of a module, bound methods are not picklable.

pool方法都使用了queue.Queue将task传递给工作进程。multiprocessing必须将数据序列化以在进程间传递。方法只有在模块的顶层时才能被序列化，跟类绑定的方法不能被序列化，就会出现上面的异常。

解决方法:

1、用线程替换进程
2、可以使用copy_reg来规避上面的异常.
3、dill 或pathos.multiprocesssing

链接地址