Python 多进程

最新推荐文章于 2024-11-11 21:19:25 发布

光纤搬运工

最新推荐文章于 2024-11-11 21:19:25 发布

阅读量356

点赞数 8

文章标签： python 前端开发语言

本文链接：https://blog.csdn.net/Equinox_ji/article/details/135775701

版权

本文介绍了如何在Python中使用Process类实现单进程和多进程，以及Multiprocessing.Pool进程池的原理和使用场景，展示了进程同步和池化处理的优势。

摘要由CSDN通过智能技术生成

Python的多进程主要通过Process类来实现的

Process 类创建方式

# 单进程
import multiprocessing as mp


def job(a, b):
    print(a+b)


if __name__ == '__main__':  # 必须将进程过程放到main函数中去
    p1 = mp.Process(target=job, args=(1, 2))  
    p1.start()
    p1.join()
    
# 多进程 
import multiprocessing
import os


def run_proc(name):
    print('Child process {0} {1} Running '.format(name, os.getpid()))


if __name__ == '__main__':
    print('Parent process {0} is Running'.format(os.getpid()))
    for i in range(5):
        p = multiprocessing.Process(target=run_proc, args=(str(i),))
        print('process start')
        p.start()
    p.join()
    print('Process close')

star() 方法启动进程
join() 方法实现进程间的同步，等待所有进程退出才执行下面的代码
close() 用来阻止多余的进程涌入进程池 Pool 造成进程阻塞
target 是函数名字，需要调用的函数
args 函数需要的参数，以 tuple 的形式传入，当传入一个参数是，要加,号，因为(1)不是一个tuple，而(1,)才是一个tuple

Pool进程池

Multiprocessing.Pool可以提供指定数量的进程供用户调用，当有新的请求提交到pool中时，如果池还没有满，那么就会创建一个新的进程用来执行该请求；但如果池中的进程数已经达到规定最大值，那么该请求就会等待，直到池中有进程结束，才会创建新的进程来执行它。Pool类用于需要执行的目标很多，而手动限制进程数量又太繁琐时，如果目标少且不用控制进程数量则可以用Process类。