2024年最全python3多进程实现

p = Process(target=run_process,args=(str(i),))

print(“Process will start.”)

p.start()

p.join()

print(“Process end”)

• 运行结果如下

Parent process 21073.

Process will start.

Process will start.

Process will start.

Process will start.

Process will start.

Child process 2 (21076) Running

Child process 3 (21077) Running

Child process 0 (21074) Running

Child process 4 (21078) Running

Process end

Child process 1 (21075) Running

使用线程池

• multiprocessing模块提供了一个Pool类来代表进程池对象,它可以提供指定数量的进程供用户调用,默认大小是CPU的核数.当有新的请求提交到Pool时,如果池还没有满,就会提供一个新的进程来执行该请求;但如果池中的进程数已经达到最大值,请求就会等待,知道池中有进程结束,才会提供新的进程来处理

import os,time,random

def run_task(name):

print(“Task %s (pid = %s) is running…”%(name,os.getpid()))

time.sleep(random.random()*3)

print(“Task %s end.”%(name))

if name ==“main”:

print(“Current process %s.”%os.getpid())

p = Pool(processes=3)

for i in range(5):

p.apply_async(run_task,args=(i,))

print(“Waiting for all subprocesses done…”)

p.close()

p.join()

print(“All subprocesses done”)

• 运行结果如下

Current process 21127.

Waiting for all subprocesses done…

Task 0 (pid = 21129) is running…

Task 1 (pid = 21130) is running…

Task 2 (pid = 21128) is running…

Task 1 end.

Task 3 (pid = 21130) is running…

Task 2 end.

Task 4 (pid = 21128) is running…

Task 4 end.

Task 0 end.

Task 3 end.

All subprocesses done

可以看出,由于制定了进程池中进程的数量为3,当调用的线程多余3个时,会阻塞

[

现在能在网上找到很多很多的学习资源，有免费的也有收费的，当我拿到1套比较全的学习资源之前，我并没着急去看第1节，我而是去审视这套资源是否值得学习，有时候也会去问一些学长的意见，如果可以之后，我会对这套学习资源做1个学习计划，我的学习计划主要包括规划图和学习进度表。

分享给大家这份我薅到的免费视频资料，质量还不错，大家可以跟着学习

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友，可以戳这里无偿获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！