python3多进程实现(1)

文末有福利领取哦~

👉一、Python所有方向的学习路线

Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。

👉二、Python必备开发工具

👉三、Python视频合集

观看零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

👉 四、实战案例

光学理论是没用的，要学会跟着一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。（文末领读者福利）

👉五、Python练习题

检查学习结果。

👉六、面试资料

我们学习Python必然是为了找到高薪的工作，下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料，并且有阿里大佬给出了权威的解答，刷完这一套面试资料相信大家都能找到满意的工作。

👉因篇幅有限，仅展示部分资料，这份完整版的Python全套学习资料已经上传

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

if name == “main”:

print(“current Process (%s) start …”%(os.getpid()))

pid = os.fork()

if pid < 0:

print(“error in fork”)

elif pid == 0:

print(“I am a child process (%s) and my parent process os(%s)”%(os.getpi d(),os.getppid()))

else:

print(“I (%s) created a child process (%s).”%(os.getpid(),pid))

• 运行结果如下:

current Process (21039) start …

I (21039) created a child process (21040).

[root@izhqmn61154vmrz pythonDemo]# I am a child process (21040) and my parent process os(1)

可以看出fork创建了一个新进程,用pid区分父进程和子进程,分别在其中运行对应的任务

2.使用multiprocessing模块实现

• multiprocessing提供了一个Process类来描述一个进程对象,创建子进程时,只需要传入一个执行函数和函数的参数,即可以完成一个Procees实例的创建,调用start方法启动,用join()方法让主线程等待线程执行完毕

from multiprocessing import Process

import os

def run_process(name):

print(“Child process %s (%s) Running”%(name,os.getpid()))

if name == “main”:

print(“Parent process %s.”%(os.getpid()))

for i in range(5):

p = Process(target=run_process,args=(str(i),))

print(“Process will start.”)

p.start()

p.join()

print(“Process end”)

• 运行结果如下

Parent process 21073.

Process will start.

Process will start.

Process will start.

Process will start.

Process will start.

Child process 2 (21076) Running

Child process 3 (21077) Running

Child process 0 (21074) Running

Child process 4 (21078) Running

Process end

Child process 1 (21075) Running

使用线程池

• multiprocessing模块提供了一个Pool类来代表进程池对象,它可以提供指定数量的进程供用户调用,默认大小是CPU的核数.当有新的请求提交到Pool时,如果池还没有满,就会提供一个新的进程来执行该请求;但如果池中的进程数已经达到最大值,请求就会等待,知道池中有进程结束,才会提供新的进程来处理

import os,time,random

def run_task(name):

print(“Task %s (pid = %s) is running…”%(name,os.getpid()))

time.sleep(random.random()*3)

print(“Task %s end.”%(name))

if name ==“main”:

print(“Current process %s.”%os.getpid())

p = Pool(processes=3)

for i in range(5):

p.apply_async(run_task,args=(i,))

print(“Waiting for all subprocesses done…”)

p.close()

p.join()

print(“All subprocesses done”)

• 运行结果如下

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！