python io密集 多线程_IO密集型任务/计算密集型任务,分别适合采用python多线程or多进程...

首先一点,这里无论是IO密集型任务还是计算密集型任务,都默认存在可并行的子任务,如果任务中每一步都必须串行,那么讨论该问题没有意义。另外,默认多核CPU或多个CPU,否则多进程也没有意义。

对于IO密集型任务,由于CPU经常需要等待IO操作完成,因此,在等待过程中,CPU可以去做其他事情,因此采用多线程可以提高程序执行效率,这实质是并发处理。当然,由于多进程可以利用多核CPU真正实现并行处理,所以,采用多进程也可以提高IO密集型任务的执行效率。但是考虑到多线程是共享资源的,因此通信更方便,而多进程之间的资源相互独立,通信不是很方便,因此,综合来看,IO密集型任务,采用python多线程更合适。

对于计算密集型任务,由于python多线程为了实现同步锁安全机制,采用了全局锁机制,导致即使是多核CPU或多个CPU,同一时间,也只有一个线程在执行,因为全局锁只有一个,即在多核CPU或多个CPU情况下,python多线程仍然只能并发处理,而不能并行处理。而因为计算密集型任务,CPU几乎不存在空闲时间,使用python多线程,CPU频繁在各个线程之间切换所需时间反而会大大降低程序执行效率。而采用python多进程,可以实现真正意义上的并行处理,因此,计算密集型任务,采用python多进程更合适。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值