python3.7 协程实战

最新推荐文章于 2025-03-28 08:45:00 发布

CoolScript

最新推荐文章于 2025-03-28 08:45:00 发布

阅读量4.3k

点赞数 9

分类专栏： Python 并发编程文章标签： python3.7 协程

本文链接：https://blog.csdn.net/CoolScript/article/details/89948434

版权

本文介绍了Python3.7中协程的实战应用，对比了CPU密集和IO密集操作下的处理方式，强调了协程在提高效率、避免锁竞争方面的优势。通过官网例子和常见用法展示了如何创建和管理协程任务，并分享了在单核和多核环境下的协程优化策略，特别提到了在多进程环境下结合协程的高效应用。此外，还提及了协程在爬虫代理有效性验证场景中的实际运用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

文章目录

协程实战

协程实战

只介绍常见用法，底层用法请回顾 yield from，原理请参考论文

cpu密集

对于cpu密集操作，当然只能靠多进程方式

io密集

对于io密集型操作，传统上用多线程方式。
现在，更加高效的的方式来了，协程！

协程的本质是函数回调，
不需要os调度，效率极高，且不需要锁。
缺点是回调得自己写，代码老复杂了

python3.7 协程代码

官网两个例子

使用 asyncio.create_task() 方法创建任务

import asyncio

async def test():
    asyncio.sleep(1)

async def main():
    task1 = asyncio.create_task(test())
    task2 = asyncio.create_task(test())
    
    await task1
    await task2

asyncio.run(main())

使用 asyncio.gather() 方法搜集多个任务

import asyncio


async def who(name):
    asyncio.sleep(1)
    print(name)


async def main():
    # Schedule three calls *concurrently*:
    await asyncio.gather(
        who('Bob'),
        who(