python协程重入_python之协程

协程,又称微线程,纤程。英文名Coroutine。协程是一种用户态的轻量级线程。

所谓用户态就是说协程是由用户来控制的,CPU不认识协程,协程是跑在线程中的。

协程拥有自己的寄存器上下文栈。协程调试切换时,将寄存器上下文栈保存到其他地方,在切回来时,恢复先前保存的寄存器上下文栈。

因此,协程能保留上一次调用时的状态(即所有局部状态的一个特定组合),每次过程重入时,就相当于进入上一次调用的状态,也就是进入上一次离开时所处逻辑流的位置。

线程切换时会将上下文和栈保存到CPU的寄存器中。

协程的标准定义,即符合以下所有条件就能称之为协程:

1.在单线程里实现并发

2.修改共享数据不需要加锁

3.用户程序里自己保存多个控制流的上下文栈

4.一个协程遇到IO操作自动切换到其它协程

协程的好处:

无需线程上下文切换的开销

无需原子操作锁定及同步的开销

原子操作是指不会被线程调度机制打断的操作;这种操作一旦开始,就一直运行到结束

方便切换控制流,简化编程模型

高并发+高扩展性+低成本:一个CPU支持上万的协程都行,很适合用于高并发处理

协程的缺点:

无法利用多核资源:

协程的本质是个单线程,它不能同时将单个CPU的多个核用上

协程需要和进程配合才能运行在多CPU上。

进行阻塞(Blocking)操作(如IO)时会阻塞掉整个程序

使用yield实现协程的例子:

如何在单线程下实现并发效果?

答案是遇到IO操作就切换,因为IO操作耗时比较长

协程之所以能处理高并发,其实就是把IO操作给干掉了,就是一遇到IO操作就切换。

这样的话整个程序就变成了只有CPU在运算。

一遇到IO操作就切换,那么到底什么时候再切回去呢?

答案是当IO操作结束后就切回去。

那么问题又来了,python怎么来监测IO操作是否结束呢?带着这个问题先来看看几个例子

greenlet模块:

greenlet是一个封装好的协程,通过switch方法手动进行切换

gevent模块:

gevent是一个第三方库,可以轻松实现并发同步或异步编程。

在gevent中用到的主要是greenlet,它是以C扩展模式形式接入python的轻量级协程。

greenlet全部运行在主程序操作系统进程的内部,但它们被协作式地调度

gevent能够自动进行IO切换

同步与异步的区别:

用协程并发爬虫爬取网站:

用gevent协程写一个单线程高并发的socket:

服务端:

客户端:

并发100个sock连接:

事件驱动与异步IO,请往这走

现在我们可以来回答下这个问题了,python如何监测IO操作是否结束?

IO操作是由操作系统进行处理的,当遇到IO操作时就切换

等IO操作完以后让其调用回调函数,回调函数会通知协程说这个IO操作完成了

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值