目录
一、协程和IO操作的简单理解
1、协程的理解
协程,又称微线程,纤程。英文名Coroutine。
协程是python个中另外一种实现多任务的方式,只不过比线程更小占用更小执行单元(理解为需要的资源)。 为啥说它是一个执行单元,因为它自带CPU上下文。这样只要在合适的时机, 我们可以把一个协程 切换到另一个协程。 只要这个过程中保存或恢复 CPU上下文那么程序还是可以运行的。
通俗的理解: 在一个线程中的某个函数,可以在任何地方保存当前函数的一些临时变量等信息,然后切换到另外一个函数中执行,注意不是通过调用函数的方式做到的,并且切换的次数以及什么时候再切换到原来的函数都由开发者自己确定。
适用场景:如果一个线程里面IO操作(网络等待、文件操作)比较多,协程就比较适用,适用于高并发处理。
2、简单实现协程
3、IO操作的简单理解
IO就是input/output,也就是输入和输出。
常见的IO操作:文件操作、网络等待
二、greenlet协程模块的使用
greenlet:是一个用C实现的协程模块,通过switch()来实现任务函数间的切换。
greenlet属于手动切换任务,当遇到IO操作,程序会阻塞,而不能进行自动切换。
greenlet为第三方库模块,需要在Terminal中输入下载命令:pip install greenlet
1、通过greenlet实现任务切换
导入模块:from greenlet import greenlet
实例化协程对象:greenlet(任务名)
下图代码逻辑
代码执行到g1.switch()时转换到eat()函数中运行,当执行到g2.switch()时任务切换到study()函数中运行
三、gevent模块的使用
原理是当一个greenlet遇到IO(指的是input output 输入输出,比如网络、文件操作等)操作时,比如访问网络,就自动切换到其他的greenlet,等到IO操作完成,再在适当的时候切换回来继续执行。 由于IO操作非常耗时,经常使程序处于等待状态,有了gevent为我们自动切换协程,就保证总有greenlet在运行,而不是等待IO。
gevent遇到IO操作,会进行自动切换,属于主动式切换。在gevent中用到的主要模式是greenlet
1、grevent的使用
- gevent.spawn(函数名)——创建协程对象
- join()——阻塞,等待某个协程执行完毕
- joinall(参数)——参数是一个协程对象列表,会等待所有的协程都执行完毕再退出
2、gevent模块中自带了sleep耗时函数
执行A/B两个任务,当A、B遇到耗时操作,gevent会让A继续执行,同时也开始执行B任务。
A完成了耗时操作后,B在对应的时间也完成了耗时操作。
3、joinall()的使用
四、程序打补丁
猴子补丁功能:拥有在模块运行时的替换能力
- 导入模块:from gevent import monkey
五、总结
1、进程是资源分配的基本单位,线程是CPU调度的基本单位。
2、对比
- 进程:切换需要的资源较大,效率低
- 线程:切换需要的资源一般,效率一般
- 协程:切换需要的资源很小,效率高
多线程适合IO密集型操作(读写数据操作多的,比如爬虫等)
多进程适合CPU密集型操作(科学计算、对视频进行高清解码等)