Python进程池与线程池

进程池

进程池：就是创建一定数量的进程 ， 当有任务进来执行的时候 ， 那么在池中的某一个进程进行处理任务 ， 当进程处理任务完毕 之后不关闭 ， 而是进入池中等到任务 。

进程池不会增加操作系统的调度难度 ， 还节省了开闭进程的时间 ， 在一定程度上能够事项并发效果

进程池的导入

# 进程池
from concurrent.futures import  ProcessPoolExecutor
# 线程池
from concurrent.futures import  ThreadPoolExecutor

from concurrent.futures import  ProcessPoolExecutor
import time
​
# 设置进程池对象 ， 传入参数，就代表这个进程池的大小（有多少个进程）
# 没有参数，会默认开设当前计算机CPU个数的进程
pool_p = ProcessPoolExecutor(10)
​
​
def func(name):
    print(f'{name}')
    time.sleep(2)
​
​
if __name__ == '__main__':
    for i in range(20):
        pool_p.submit(func , i)
# submit(func , i)这个是有返回值的 ， 返回的是Future对象 ， 这个对象result方法，该方法是用来获取返回值的正在数据结果
from concurrent.futures import  ProcessPoolExecutor
import time
​
# 设置进程池对象 ， 传入参数，就代表这个进程池的大小（有多少个进程）
# 没有参数，会默认开设当前计算机CPU个数的进程
pool_p = ProcessPoolExecutor(10)
​
​
def func(n):
    # print(f'{n}')
    time.sleep(2)
    return n + 1
​
​
if __name__ == '__main__':
    for i in range(20):
        res = pool_p.submit(func , i)
        print(res)  # 获取到Future对象
        print(res.result()) # 通过result方法获取到对象中每个任务返回的数据

# shutdown() 等待进程池中所有进程任务结束之后 ， 在执行主进程
from concurrent.futures import  ProcessPoolExecutor
import time
​
# 设置进程池对象 ， 传入参数，就代表这个进程池的大小（有多少个进程）
# 没有参数，会默认开设当前计算机CPU个数的进程
pool_p = ProcessPoolExecutor(10)
​
​
def func(n):
    # print(f'{n}')
    time.sleep(2)
    return n + 1
​
​
if __name__ == '__main__':
    # 将所有任务的返回值添加到列表
    ls = []
    for i in range(20):
        res = pool_p.submit(func , i)
        ls.append(res)
        print(res)  # 获取到Future对象
​
    # 等待进程池中所有进程任务结束之后 ， 在执行主进程
    pool_p.shutdown()
    for i in ls:
        print(i.result()) # 通过result方法获取到对象中每个任务返回的数据

# 进程池/线程池有一个回调机制——add_done_callback()
from concurrent.futures import  ProcessPoolExecutor
import time
​
# 设置进程池对象 ， 传入参数，就代表这个进程池的大小（有多少个进程）
# 没有参数，会默认开设当前计算机CPU个数的进程
pool_p = ProcessPoolExecutor(10)
​
​
def func(n):
    # print(f'{n}')
    time.sleep(2)
    return n + 1
​
def f(fun):
    print(f'获取到返回值结果{fun.result()}')
​
if __name__ == '__main__':
    # 将所有任务的返回值添加到列表
    ls = []
    for i in range(20):
        res = pool_p.submit(func , i)
        # 回调机制不需要对任务进行参数传递 ， 参数会根据对象进行传入
        res.add_done_callback(f)

进程是依靠电脑的操作系统进行调度；

线程是依靠电脑的CPU进行调度；

那么两者的调度顺序也是有操作系统或者CPU使用的调度决定的。