超级会员免费看
当遇到仅支持HTTP2.0协议的网站时，urllib和requests无法进行数据爬取。本文介绍了如何使用httpx库来解决这一问题。首先，通过示例展示了requests在尝试访问强制HTTP/2.0网站时会失败。接着，说明了httpx库的安装方法，需要Python 3.6及以上版本，通过`pip3 install ‘httpx[http2]’`进行安装。最后，阐述了httpx的基本用法，其API与requests类似，可以成功获取状态码、响应头和响应体。
对于强制使用HTTP2.0/协议访问的网站，urllib和requests是无法爬取数据的，因为它们只支持HTTP1.1，不支持HTTP2.0，这时要使用httpx。
1、示例
https://spa16.scrape.center/就是强制使用HTTP/2.0访问的一个网站，这个网站用requests是无法爬取的，例：
import requests
url = 'https://spa16.scrape.center/'
re = requests.get(url)
print(re.text)
请求失败，抛出ConnectionResetError。
2、安装
可以直接使用pip3安装，所需的python版本是3.6及以上，安装命令为：
pip3 install ‘h
订阅专栏 解锁全文
218
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
