Python3.10 异步编程 asyncio request异步爬取

已于 2023-04-29 21:52:19 修改
阅读量4.5k 收藏 30
点赞数 13
分类专栏： python 文章标签： 算法 python
于 2022-06-11 17:27:21 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_61634551/article/details/125236256
版权

 异步 IO 与并发执行

 首先我们要明白的异步 IO 的本质是什么。

如果我们希望一个代码能够并发执行，有这几种方式，多进程，多线程和协程，它们在 Python 中分别对应了 multiprocessing， threading 和 asyncio 库，在历史上，进程曾是大部分分时系统中程序运行的基本单位，而在现代操作系统中，进程是线程的容器。通俗的来讲，系统中运行的每一个程序都是一个进程，而每个进程有包含多个线程。每个线程都可以并行运行。

但是，实际上它们真的在并行运行吗？答案是不确定的，这取决于 CPU 的核心数，在“远古”时代，CPU 只有一个核心，所以在物理层面上，进程与线程并没有办法并行执行，于是操作系统用一个方法“骗过”了用户，通过快速地切换运行的进程来产生一种它们正在并行运行的错觉，所以如果你的电脑只有一个核心，并且你的程序只涉及单纯的 CPU 计算，那么多线程或多进程并不会提高运行的效率，反而可能会因为调度过程中的损耗而浪费部分 CPU 资源。但好在现在的 CPU 都有多个核心了，每个线程可以在独立的 CPU 上运行，所以多线程技术可以显著加快计算的速度。不过 Python 语言的最常用实现 CPython 由于 GIL 的存在，并不能很好的利用多线程，所以对于 CPU 密集型的程序需要使用多进程代替多线程。

实际上，计算机的 CPU 的运算速度远远大于网络或磁盘等 IO（输入/输出）。在很多情境下，我们的程序都不是 CPU 密集型，而是 IO 密集型的，也就是频繁地访问网络或磁盘，而对于 CPU 计算消耗的时间不是很敏感。

传统的同步 IO，在 IO 操作过程中当前线程会被挂起，线程会等待 IO 操作完成在继续完成下面的代码。举一个例子，我们的程序要下载 100 个文件，如果我们使用同步 IO，程序向服务器发送一个网络请求，等 1 秒才能获得返回的信息，程序会等待返回信息后再继续进行下一个请求，100 个文件就需要至少 100 秒。所以我们必须使用多线程或多进程来并行下载，100 个线程同时发出网络请求，然后一起等 1 秒，一共只需要消耗 1 秒。

但是这里使用多线程或者多进程也许有些浪费，毕竟多线程会造成额外的系统资源开销，进程和线程数量也不能无限多下去，并且稍有不慎还会造成各种奇怪的 bug。或许我们可以试图从源头解决问题，那就是为什么 IO 操作一定要阻塞线程呢？可以想象这样的一种情况，程序发送一个网络请求，但不等待它返回结果就继续发送第二个网络请求，以此类推，发送请求是 CPU 操作，100 个请求可能只需要 1 毫秒就能完成，然后等待它们返回后再进行处理，同样，一共也只需要 1s 就能完成！这就是异步 IO，为了更好地发挥异步 IO 的威力，Python 引入了协程的概念。

协程

子程序是协程的一种特例。
不过大多数语言都有子程序的概念，但不一定有协程的概念，在 Python 中函数也并不是协程的子类。

在 Python 中协程用 async/await 语法进行声明：

import asyncio

async def main():
    await foo()
    print('end')

async def foo():
    print('hello')
    await asyncio.sleep(1)

asyncio.run(main())

协程在声明时需要使用 async def 代替 def ，而在调用时需要使用 await 来代替直接调用。不使用 await 直接调用一个协程并不会使它运行，只会得到一个协程对象。

在最外层则需要通过 asyncio.run() 来运行一个协程。

上面的程序的运行结果应该类似于：

import time
def main():
    foo()
    print('end')
def foo():
    print('hello')
    time.sleep(1)
main()

那么我们多写了那么多代码到底有什么用呢？虽然它们运行的效果是相同的，但是原理却并不相同，前者在调用 await asyncio.sleep(1) 时它实际上是挂起了当前的任务，以允许其他任务的运行，当然这里并没有其他的任务。后者的 time.sleep(1) 则是挂起（阻塞）了当前的线程。

可等待对象

上面我们提到了 await 语句用于运行协程，实际上它表示的是等待协程运行完毕，就像同步程序一样，所以上面的两个程序效果是相同。

在 Python 中所有可以被 await 语句等待的对象都叫做可等待对象，协程就是一种可等待对象。可等待对象有三种主要类型：协程（coroutine），任务（Task）和 Future 。

其中 Future 是一种低层级的可等待对象，我们暂且不讨论，下面我们来了解一下任务。

任务

在 Python 中任务被用来“并行的”调度协程。通过 asyncio.create_task() 函数来将协程封装为一个任务，并自动调度运行。

import time
import asyncio

async def foo(i):
    print(f'Running foo {i}')
    await asyncio.sleep(1)
    print(f'End foo {i}')

async def main():
    print(f"Started at {time.strftime('%X')}")
    task_list = []
    for i in range(5):
        task_list.append(asyncio.create_task(foo(i)))
    for task in task_list:
        print(await task)         #await task
    print(f"Finished at {time.strftime('%X')}")

asyncio.run(main())

Started at 17:58:10
Running foo 0
Running foo 1
Running foo 2
Running foo 3
Running foo 4
End foo 0
End foo 2
End foo 4
End foo 1
End foo 3
None
None
None
None
None
Finished at 17:58:11

运行上述代码，会发现，程序只用了 1 秒就运行完成了。

我们来具体解读一下，首先在 main() 协程中先创建了 10 个任务，并储存在 task_list 列表中，然后再依次等待这些任务完成。

如果没有后面的等待的话，程序就会在那些任务还没有完成的情况下结束。如：

因为最外层是 asyncio.run(main()) 当 main() 协程执行完毕程序就会结束，而不会管其他任务是否已经完成。

如果没有后面的等待的话，程序就会在那些任务还没有完成的情况下结束。如：

import time
import asyncio

async def foo(i):
    print(f'Running foo {i}')
    await asyncio.sleep(1)
    print(f'End foo {i}')

async def main():
    print(f"Started at {time.strftime('%X')}")
    for i in range(5):
        asyncio.create_task(foo(i))
    print(f"Finished at {time.strftime('%X')}")

asyncio.run(main())

因为最外层是 asyncio.run(main()) 当 main() 协程执行完毕程序就会结束，而不会管其他任务是否已经完成。

Python 还提供了一个函数用于替代上面的写法：

import time
import asyncio

async def foo(i):
    print(f'Running foo {i}')
    await asyncio.sleep(1)
    print(f'End foo {i}')
    return i + 1

async def main():
    print(f"Started at {time.strftime('%X')}")
    coroutine_list = [foo(i) for i in range(5)]
    result = await asyncio.gather(*coroutine_list)
    print(result)
    print(f"Finished at {time.strftime('%X')}")

asyncio.run(main())

asyncio.gather() 的内部实现和之前的代码并不相同，只是效果类似。

上面所有例子中的 asyncio.sleep(1) 都可以换成真实的 IO 操作，比如下面的使用 httpx 库获取网页的例子。

import time
import asyncio
import httpx

async def foo(i):
    print(f'Running foo {i}')
    async with httpx.AsyncClient() as client:
        r = await client.get('https://www.example.org/')
    print(f'End foo {i}')
    return r

async def main():
    print(f"Started at {time.strftime('%X')}")
    coroutine_list = [foo(i) for i in range(10)]
    result = await asyncio.gather(*coroutine_list)
    print(result)
    print(f"Finished at {time.strftime('%X')}")
asyncio.run(main())

Started at 19:24:03
Running foo 0
Running foo 1
Running foo 2
Running foo 3
Running foo 4
Running foo 5
Running foo 6
Running foo 7
Running foo 8
Running foo 9
End foo 6
End foo 1
End foo 2
End foo 4
End foo 5
End foo 8
End foo 9
End foo 3
End foo 7
End foo 0
[<Response [200 OK]>, <Response [200 OK]>, <Response [200 OK]>, <Response [200 OK]>, <Response [200 OK]>, <Response [200 OK]>, <Response [200 OK]>, <Response [200 OK]>, <Response [200 OK]>, <Response [200 OK]>]
Finished at 19:24:06

再次强调，协程不是多线程，上面的所有操作都是在一个线程中完成的，它之所以可以实现类似于并行执行的效果，是因为它没有等待 IO 操作完成，在上面的例子中程序发送了对 https://www.example.org/ 的第一次请求后，没有等待服务器响应，而是挂起了当前任务，于是第二个任务拿到了控制权，并进行了第二次网络请求，以此类推，这些发送请求全都发生在很短的时间内，然后当其中一个任务的请求有了回应，这个任务便会被唤醒，并继续执行剩下的代码。

你会发现，这种多个任务“并行”执行的方式很像之前提到的在只有一个 CPU 的情况下多线程的模式，使用协程的好处与多线程这种让系统去调度每个线程何时运行相比，我们可以自己决定何时切换任务，更加的高效和灵活，即只在发生需要耗费时间的 IO 操作时我们使用 await 等待它完成并挂起当前任务，切换至未处理的任务。

我们可以用下图清晰地表示使用多线程和协程任务进行并发处理的不同：

 看上面的图，你可能觉得还是多线程效率更高些，但事实并非如此，首先，上面的图并非真实的比例，真实情况下，等待响应的时间会远远大于网络请求和处理响应的时间，上面的差距可以忽略不计。其次，上面的图有一个前提就是线程/进程数小于 CPU 核心数，若大于的话也并不会进一步提高效率，往往并行 IO 操作数量都是大于用户的 CPU 核心数的。最后，切换进程是会耗费额外的资源的，相比之下，协程切换任务的消耗则要小一些。

总结

  1. 同步 IO 和异步 IO

    同步 IO 在进行 IO 操作时会阻塞当前进程，而异步 IO 则不阻塞。

  2. 可等待对象

    任务（Task）是由协程（coroutine）使用 asyncio.create_task() 函数封装而成的，用于并行调度协程。

  3. 运行一个协程

    • asyncio.run() 函数：用于运行最高级入口点，如 main() 协程。
    • await 语句：等待一个协程，等待这个协程返回结果后继续运行下面代码。
    • asyncio.create_task() 函数：将一个协程包装为一个任务并且并发地调度协程。

如果你使用了异步 IO，请尽量在程序的所有地方都使用协程，网络请求等 IO 库也要使用支持异步 IO 的库，如 aiohttp， httpx 等。

httpx请求库

在前面我们简单地讲解了requests请求库和aiohttp请求库，requests只能发送同步请求，aiohttp只能发送异步请求，而httpx请求库既可以发送同步请求，又可以发送异步请求，而且比上面两个效率更高。

httpx请求库——同步请求

使用httpx发送同步网络请求也很简单，与requests代码重合度99%，只需要把requests改成httpx即可正常运行。

import httpx
headers={
    'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36'
}
response=httpx.get('https://www.baidu.com',headers=headers)
print(response.text)

注意：httpx使用的默认utf-8进行编码来解码响应。

httpx请求库——同步请求高级用法

当发送请求时，httpx必须为每个请求建立一个新连接（连接不会被重用），随着对主机的 请求数量增加，网络请求的效率就是变得很低。

这时我们可以用Client实例来使用HTTP连接池，这样当我们主机发送多个请求时，Client将重用底层的TCP连接，而不是为重新创建每个请求。

with块用法如下：

with httpx.Client() as client:
    ...

我们把Client作为上下文管理器，并使用with块，当执行完with语句时，程序会自动清理连接。

当然我们可以使用.close()显式关闭连接池，用法如下：

client = httpx.Client()
try:
    ...
finally:
    client.close()

为了我们的代码更简洁，我们推荐使用with块写法，具体示例代码如下：

import httpx
headers={
    'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36'
}
with httpx.Client(headers=headers)as client:
    response=client.get('https://www.baidu.com')
    print(response.text)

其中httpx.Client()as client相当于把httpx的功能传递给client，也就是说示例中的client相当于httpx，接着我们就可以使用client来调用get请求。

注意：我们传递的参数可以放在httpx.Client()里面，也可以传递到get()方法里面。

httpx请求库——异步请求

要发送异步请求时，我们需要调用AsyncClient，具体示例代码如下：

import httpx
import asyncio
headers={
    'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36'
}
async def function():
    async with httpx.AsyncClient()as client:
        response=await client.get('https://www.baidu.com',headers=headers)
        print(response.text)
if __name__ == '__main__':
    loop = asyncio.get_event_loop()
    loop.run_until_complete(function())

首先我们导入了httpx库和asyncio模块，使用async来声明function()方法并用来声明with块的客户端打开和关闭，用await来声明异步协程可等待对象response。接着我们调用asyncio.get_event_loop()方法进入事件循环，再调用loop.run_until_complete(function())方法运行事件循环，直到function运行结束。

例子（异步请求）：

import asyncio
import httpx
import threading
import time

UserAgent = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.81 Safari/537.36 Edg/94.0.992.50'}
proxies_none = {'all://': None}
client = httpx.AsyncClient(proxies=proxies_none,headers=UserAgent)
 
async def async_main(url, sign):
    response = await client.get(url)
    status_code = response.status_code
    print(f'async_main: {threading.current_thread()}: {sign}:{status_code}')
 
selector = selectors.SelectSelector()
loop = asyncio.SelectorEventLoop(selector)

tasks = [async_main(url='http://www.baidu.com', sign=i) for i in range(200)]

loop.run_until_complete(asyncio.wait(tasks))

loop.close()
print(async_end - async_start)

需要注意的是 httpx 的代理只能在 httpx.Client 创建 Client 的实例的时候使用，client.get 的时候没这个参数。

允许所有请求都走代理

proxies = {
    "all://": "http://localhost:8030",
}

如果字典的值为 None 则表示不使用代理。

同步请求高级用法

with httpx.Client(headers=headers)as client:
    for i in range(200):
        response=client.get('https://www.baidu.com')
Started at 19:55:02
Finished at 19:55:08

同步请求

for i in range(200):
    response = httpx.get('https://www.baidu.com')
Started at 19:56:09
Finished at 19:56:18

常见问题：

httpx的两个坑(httpx.ReadTimeout； SSL:CERTIFICATE_VERIFY_FAILED)

client = httpx.AsyncClient(verify=False, timeout=None)

httpx的两个坑(httpx.ReadTimeout； SSL: CERTIFICATE_VERIFY_FAILED)_httpx.connecterror_楠少科技的博客-CSDN博客

协程

协程不是计算机提供,程序员人为创造。

协程(Coroutine),也可以被称为微线程,是一种用户态内的上下文切换技术。简而言之,其实就是通过一个线 程实现代码块相互切换执行。

def funcl(): 
    print(1) 
    print(2) 
def func2(): 
    print(3) 
    print(4) 
funcl() 
func2()

实现协程有这么几种方法： 
greenlet 早期模块。 
yield 关键字。 
asyncio 装饰器 (py3.4) 
async、await关键字(py3.5)【推荐】 

1.1 greenlet实现协程

from greenlet import greenlet
def funcl():
    print(1)
    #第1步：输出1
    gr2.switch()
    #第3步：切换到func2函数
    print(2)
    #第6步：输出2
    gr2.switch()
    #第7步：切换到fuc2函数，从上一次执行的位置继续向后执行
def func2():
    print(3)
    #第4步：输出3
    gr1.switch()
    #第5步：切换到fuc1函数，从上一次执行的位置继续向后执行
    print(4)
    #第8步：输出4
gr1=greenlet(funcl)
gr2=greenlet(func2)
gr1.switch()#第1步：去执行func1函数

1
3
2
4

1.2 yield关键字 

def funcl():
    yield 1
    yield from func2()
    yield 2
def func2():
    yield 3
    yield 4
f1=funcl()
for item in f1:
    print(item)
1
3
4
2

Python 异步IO实用教程 - 石头的杂货铺

O丶ne丨柒夜
关注
  • 13
    点赞
  • 踩
  • 30
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
推荐开源项目：Requests-Async - 异步HTTP库的高效解决方案
gitblog_00047的博客
04-25 444
推荐开源项目：Requests-Async - 异步HTTP库的高效解决方案 项目地址:https://gitcode.com/encode/requests-async Requests-Async 是一个基于著名的 Python HTTP 客户端库 Requests 的异步版本，由 Encode 团队开发并维护。它继承了 Requests 简洁易用的API设计，并添加了对 Python asy...
爬虫请求模块（同步异步）
General_zy的博客
01-16 1963
requests模块支持HTTP连接保持和连接池，支持使用cookie保持会话，支持文件上传，支持自动响应内容的编码，支持国际化的URL和POST数据自动编码。在python内置模块的基础上进行了高度的封装，从而使得python进行网络请求时，变得人性化，使用Requests可以轻而易举的完成浏览器可有的任何操作。requests会自动实现持久连接keep-alive。
python使用asyncio实现异步文件操作
最新发布
m0_37570494的博客
05-19 434
异步 IO 适用于 IO 密集型任务，对于 CPU 密集型任务，异步 IO 并不能带来显著的性能提升。理解和编写异步代码需要一定的学习成本，需要掌握。
python自动化笔记——异步requests请求
Li988765_的博客
01-02 8296
1、多个请求 ahttp:ahttp 是一个所有的http连接请求均使用协程的方式，使请求过程中 IO 操作交给其他硬件，而CPU专注于处理计算型任务，可以大量的节约等待的时间 ahttp的使用方式基本上和requests一致，只不过requests请求是同步，而ahttp的请求是异步。不同的是requests可以直接请求，而由于ahttp是异步的，所以需要构造好请求之后进行一次“执行” 安装： pip install ahttp 以下用多个请求示例：reqs放了所有请求对象，再通过ahttp.
python异步requests_Python asyncio requests 异步爬虫
weixin_39573287的博客
11-29 487
#python #asyncio #requests #async/await #crawler一、情景：抓取大量URL，每个URL内信息量较少任务清单: 发送URL请求N次，接受并处理URL响应N次二、分析：① 如果每个页面依次抓取的话：任务流程：发送第1条URL请求，接受并处理第1条URL响应，发送第2条URL请求，接受并处理第2条URL响应，发送第3条URL请求，接受并处理第3条URL响应…...
asyncio+requests个人笔记
xiaoduu的博客
05-28 1373
requests库结合asyncio 使用asyncio和requests库 由于request是同步的，会阻塞asyncio 所以为每个request请求都创建多一个事件轮询器（这边我理解是多一个事件轮询器对应一个多线程）去跑requests库的请求 # 使用requests库 def get_resp(xx): resp = requests.get(xx) return resp # 每个request请求都创建多一个事件轮询器 async def async_requests()
运筹帷幄决胜千里，Python3.10原生协程asyncio工业级真实协程异步消费任务调度实践
刘悦的技术博客
08-08 991
我们一直都相信这样一种说法：协程是比多线程更高效的一种并发工作方式，它完全由程序本身所控制，也就是在用户态执行，协程避免了像线程切换那样产生的上下文切换，在性能方面得到了很大的提升。毫无疑问，这是颠扑不破的业界共识，是放之四海而皆准的真理。...
详解python异步编程之asyncio(百万并发)
09-20
asyncio是Python 3.4引入的标准库，专门用于异步I/O编程，它基于协程(coroutine)和事件循环(event loop)的概念。Python 3.5进一步引入了async/await语法糖，使得异步编程更加简洁易读。 首先，我们要理解同步与异步...
Python异步编程 asyncio小白速通
06-20
本课程带大家学习Python asyncio异步编程，深入浅出并结合大量案例来进行讲解异步编程将会给你的项目带来的巨大性能提升。课程从前到后分别讲解：协程、实现协程、协程的意义、asyncio异步编程、await&async关键字、...
Python Asyncio：异步编程和并发指南
11-15
Python 的 asyncio 库提供了一种优雅的方式来处理并发和异步编程，特别是在 IO 密集型任务中，可以显著提高程序性能。通过使用 `async` 和 `await` 关键字，开发者可以编写出易于理解和维护的并发代码。异步编程不仅...
python异步requests_asyncio异步使用requests
weixin_39977934的博客
11-29 865
以下内容为原创，转载请注明出处！python requests是同步请求，由于我们在编写代码的时候用的是async异步，异步中应该避免使用同步代码，所以需要修改requests，让他支持异步请求。如下（以下代码主要是在Django中使用）：import asyncioimport functoolsimport requestsasync def _get_requests(self, url, ...
绝对福音，Python3.10的这项改进太棒了，治好了我眼睛
weixin_58753619的博客
02-07 9029
Python 3.10 2021年6月9号，Python官方发布了3.10的新功能介绍。 以往每次有新的版本，我都替Python开发者叫苦：又有新的版本，又要学新的东西，又要修改程序，命苦啊！ 但这次看了以后，我禁不住连声叫好：这个太棒了！福音！ 主要功能改进 先简单说一下3.10的几项核心改进： 1.在with … as语法中支持小括号，可以一行创建多个环境管理器。 with ( CtxManager1() as example1, CtxManager2() as example2,
Python 异步 asyncawait（进阶详解）
weixin的博客
04-18 2365
Python 异步 async/await（详解）
requests+asyncio实现异步抓取网页
qq_25013919的博客
01-19 889
之前写一个抓取某图片网站的图片的Python脚本，觉得下载了太慢，就考虑使用多线程实现，下面记录下实现思路。 使用的是Python包：requests+asyncio+Beautifulsoop。没有使用scrapy，虽然它确实很强大，但是感觉还是有太多的局限，requests虽然不能像scrapy一样能够自动解析，但是和Beatifulsoop一起使用，功能还是可以的。 这个任务是这样滴： ...
requests 模块配合线程池实现异步
qq_46302926的博客
05-24 763
requests 模块是不支持异步操作的，异步操作需要配合线程池实现 首先定义一个协程函数，获取当前的事件循环，Task 对象内部的 await 结果的处理是基于 future 对象，利用线程池创建 3 个线程，把参数 url 传递给 requests 然后将请求结果转换成支持 asyncio 的 future ，通过 await 挂起，执行其它 url 的请求，通过线程池实现了异步操作 #参考代码 import time import asyncio import requests async def d
Python Requests 小技巧总结
热门推荐
xie_0723的博客
10-11 2万+
关于 Python Requests ，在使用中，总结了一些小技巧把，分享下。 1：保持请求之间的Cookies，我们可以这样做。 import requests self.session = requests.Session() self.session.get(login_url) # 可以保持登录态 2：请求时，会加上headers，一般我们会写成这样 self.se...
Python 爬虫之GRequests异步模块
Mr_Zhen的博客
06-13 4042
Python 爬虫之GRequests异步模块   十分想念顺店杂可。。。   运行环境： 系统： win10 Python版本： Python 3.6.6   GRequests是异步非阻塞的异步请求第三方包，使用了协程gevent，GRequests封装了gevent的requests模块。   安装：   pip install greq...
pythonrequest教程_Python异步Request操作: aiohttp
weixin_35811662的博客
01-29 590
1. Tutorial2. 其他库推荐2.1. aiohttp-requests这个库时对aiohttp库的网络请求模块的封装，用了这个库，在异步网络请求的时候，可以在写法上更简洁易懂。本质上还是aiohttp库的使用。推荐使用这个库来做网络请求。2.2. aiofilesaiofiles是一个用Python编写，用于处理asyncio应用程序中的本地磁盘文件。爬虫过程中用它来进行文件的异步操作。...
python异步编程asyncio
05-04
Python异步编程是一种编写高效、阻塞的代码的方式，其中asyncio是Python标准库中用于实现异步编程的模块。它提供了一组用于编写协程、任务和事件循环的API。 在异步编程中，可以使用async/await关键字定义协程函数，协程函数可以在遇到IO操作时主动让出CPU，而不会阻塞其他任务的执行。asyncio通过事件循环（event loop）来调度协程的执行，事件循环负责管理协程的调度和IO事件的处理。 以下是一些关键概念和组件： 1. 协程（coroutine）：使用async/await关键字定义的可等待对象，可以在IO操作时暂停并让出CPU，以便其他任务执行。 2. 任务（task）：表示协程的执行，可以通过asyncio.create_task()函数创建任务。 3. 事件循环（event loop）：负责调度和执行协程，处理IO事件。 4. Future对象：表示异步操作的结果，可以通过asyncio.Future()创建。 5. 异步函数（async function）：使用async关键字定义的函数，可以在其中使用await关键字等待其他协程或异步操作的完成。 6. 回调函数（callback）：在异步操作完成时被调用的函数。 使用asyncio进行异步编程的一般步骤如下： 1. 创建一个事件循环对象：loop = asyncio.get_event_loop() 2. 定义协程函数或异步函数。 3. 创建任务：task = loop.create_task(协程函数或异步函数()) 4. 运行事件循环：loop.run_until_complete(task) 5. 在需要的地方使用await关键字等待异步操作的结果。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值