pool.apply_async函数不执行

Python并发编程:为什么传入进程池的目标函数不执行,也没有报错? - 知乎 (zhihu.com)

关键函数是:apply_async()

进程池中,这是大家使用最多的一个函数。

在上面的代码中,为 apply_async() 函数指定了一个可执行的函数对象、函数对象所需参数,以及一个处理结果的回调函数。

pool.apply_async(
            func.work,
            args=(k,),
            callback=func.call_back,
        )

这也是我们使用 apply_async() 最常见写法。这样写存在一个隐患,很容易出现指定函数不执行,也无报错的现象。

对于编程新手,这是非常难排查的bug!

查看 python 官方文档,我们可以看到 apply_async() 的定义如下:

apply_async(func[, args[, kwds[, callback[, error_callback]]]])

重点是最后的 “error_callback”参数。

如果指定了  callback , 它必须是一个接受单个参数的可调用对象。当执行成功时,  callback 会被用于处理执行后的返回结果,否则,调用  error_callback 。
如果指定了  error_callback , 它必须是一个接受单个参数的可调用对象。当目标函数执行失败时, 会将抛出的异常对象作为参数传递给  error_callback 执行。

比较坑的是,error_callback 是一个可选参数。

如果不传入error_callback,那么执行失败时, 抛出的异常就会被pass掉,让人误以为没有报错!

剩余内容具体参考:

Python并发编程:为什么传入进程池的目标函数不执行,也没有报错? - 知乎 (zhihu.com)

  • 4
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
`pool.apply_async()` 是 Python `multiprocessing` 模块中的一个方法,用于向进程池中提交异步任务。 其语法如下: ```python apply_async(func[, args[, kwds[, callback[, error_callback]]]]) ``` 其中,`func` 是要执行的任务函数,`args` 是要传入任务函数的参数,`kwds` 是要传入任务函数的关键字参数。`callback` 是任务执行完成后要调用的回调函数,`error_callback` 是任务执行发生错误时要调用的回调函数。 `apply_async()` 方法会立即返回一个 `AsyncResult` 对象,这个对象可以用来获取任务执行的结果或者等待任务执行完成。可以使用 `get()` 方法来获取任务的结果,或者使用 `wait()` 方法等待任务执行完成。 下面是一个使用 `pool.apply_async()` 方法的示例代码: ```python import multiprocessing def worker(num): """子进程要执行的任务""" result = num * 2 return result if __name__ == '__main__': # 创建进程池 pool = multiprocessing.Pool() # 提交任务到进程池中 results = [] for i in range(5): result = pool.apply_async(worker, args=(i,)) results.append(result) # 关闭进程池 pool.close() # 等待所有进程完成任务 pool.join() # 输出结果 for result in results: print(result.get()) ``` 在这个示例中,首先创建了一个进程池 `pool`,然后使用 `apply_async()` 方法向进程池提交任务,每个任务都会调用 `worker()` 函数,计算结果并返回。在提交完所有任务后,关闭进程池并等待所有进程完成任务。最后,遍历任务结果并输出。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值