python multiprocessing

multiprocessing

执行结果为:


这段代码的执行过程:在主进程中创建子进程,然后调用start()启动子进程,调用join()等待子进程执行完,再继续执行主进程的整个的执行流程。 


执行结果:


这里三个进程执行花费约1s,说明程序是并发执行的。对于更多的并发进程,我们可以放到一个循环中进行处理。

当多个进程需要访问共享资源的时候,Lock可以用来避免访问的冲突


执行结果:


因为要访问共享文件,先获得锁的进程会阻塞后面的进程。

Semaphore 和 Lock 稍有不同,Semaphore 相当于 N 把锁,获取其中一把就可以执行了。 信号量的总数 N 在构造时传入,s = Semaphore(N)。 和 Lock 一样,如果信号量为0,则进程堵塞,直到信号大于0。Semaphore可用来控制对共享资源的访问数量,例如池的最大连接数。


执行结果:


信号量同步基于内部计数器,每调用一次acquire(),计数器减1;每调用一次release(),计数器加1.当计数器为0时,acquire()调用被阻塞。

multiprocessing中的 Pool 可以创建指定的进程池,让他轮流工作完成任务

多进程异步

注意:这里使用的是apply_async,多个进程异步执行;如果调用async,就变成阻塞版本了。 

执行结果:


Pool 进程池创建4个进程,不管有没有任务,都一直在进程池中等候。数据来的时候,若有空闲进程,则利用空闲的进程完成任务,直到所有任务完成为止;若没有空闲的进程,则需要等待,直到池中有进程结束。

共享内存



执行结果为:


这样子之前的执行的在内存中的结果会在下次调用中使用

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值