python paralell,从python joblib parallel输出多个结果

本文探讨了如何在Python中使用joblib库进行并行计算,并尝试从并行函数中获取多个返回结果。在尝试过程中,遇到了一个PicklingError。目标是输出两个列表,一个是乘以5的结果,另一个是它们平方根的结果。代码中定义了一个producer函数,该函数产生这些结果,但在使用Parallel和delayed时出现错误。
摘要由CSDN通过智能技术生成

希望从python中的并行化函数输出多个结果(或返回)。出现了某种酸洗错误。请注意,我也希望在子流程中看到x的打印输出。

%%time

from math import sqrt

from joblib import Parallel, delayed

# pip install joblib

import multiprocessing

num_cores = multiprocessing.cpu_count()

def producer():

allOutput = []

allX = []

for x in range(0, 10):

x = x*5

print('Produced %s' % x)

output = sqrt(x)

print('Output sqrt %s' % output)

allOutput.append(output)

allX.append(x)

return allOutput, allX

allOutput, allX = Parallel(n_jobs=num_cores)(delayed(i) for i in producer())

输出应该是两个列表

x*5

sqrt(x*5)

.

Output sqrt 0.0

Produced 5

Output sqrt 2.23606797749979

Produced 10

Output sqrt 3.1622776601683795

Produced 15

Output sqrt 3.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值