python多进程使用进度条

python多进程使用进度条

废话不多说,上代码:

import tqdm
import multiprocessing

class MultiProcessBar(object): 
    '''multiprocess with tqdm bar'''   
    def __init__(self, fun, *args):
        self.func = fun
        self.args = args[0]
        self.pbar = tqdm.tqdm(total=len(*args))
        return
    def cbfun(self, arg): 
        self.pbar.update()
    def __call__(self, n_workers=multiprocessing.cpu_count()):
        pool = multiprocessing.Pool(processes = n_workers)
        print(self.args)
        for arge in self.args:
            pool.apply_async(func = self.func, args= (arge,), callback=self.cbfun)
        pool.close()
        pool.join()
        return

def fun(s): 
    '''测试用的函数'''
    time.sleep(s)
    print('sleep:',s)
if __name__ == '__main__': 
    a = [2,3,1,4,2,3,1,1.4,2.3,2.5]
    MultiProcessBar(fun,a)(3)

注意:在win系统中一定要使用if name == ‘main’:,且目标函数要放在if name == ‘main’: 外。

本代码绝对原创,如果各位爷觉得有用,麻烦动一动您们发财的小手指给我点个赞吧!

Python中,可以使用`multiprocessing`模块来实现多进程编程。而要在多进程中同时使用`tqdm`来显示进度条,可以采用以下步骤: 首先,导入所需的模块和函数: ```python from multiprocessing import Pool from tqdm import tqdm ``` 然后,定义一个要在多进程中执行的函数,例如`run_task`: ```python def run_task(arg): # 这里是要执行的任务代码,可以根据实际情况进行修改 return arg * arg ``` 接着,定义一个函数来初始化进程池,并使用`tqdm`来显示进度条: ```python def main(): # 定义进程池大小 pool_size = 5 # 定义要处理的任务数量 task_count = 10 # 初始化进程池 pool = Pool(pool_size) # 使用tqdm显示进度条 with tqdm(total=task_count) as pbar: # 使用imap函数在多个进程中执行任务 for result in pool.imap(run_task, range(task_count)): # 这里可以对result进行处理或输出 pbar.update(1) # 关闭进程池 pool.close() pool.join() ``` 最后,调用`main`函数来执行多进程编程并显示进度条: ```python if __name__ == '__main__': main() ``` 以上代码将使用`tqdm`库来显示进度条,同时使用`multiprocessing`模块实现多进程编程。其中,`pool_size`用于定义进程池的大小,`task_count`表示要处理的任务数量。在`for`循环中,通过`imap`函数在多个进程中执行任务,并在每次任务完成后更新进度条。 总结起来,使用Python的`multiprocessing`模块和`tqdm`库可以实现同时进行多个进程的任务并在处理过程中显示进度条
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值