学习爬虫之requests的安装与使用

Requests 是 Python 的第三方库，它的安装非常简便，只需要在pathcm终端中运行以下代码即可

pip install requests

也可以在cmd中运行以下代码都可以实现Requests库的安装

python -m pip install requests

在网页中存在着很多请求方式，比如get，post等，可以检查查找到请求方法，根据请求方法获得页面代码

进行参数说明：

url：想要抓取的网址

resp：抓取到的结果

import requests
url = 'http://baidu.com'
resp = requests.get(url)
print(resp.text)
resp.close()

 在get中存在几个参数

res = requests.get(url,headers=headers,params,timeout)

参数说明如下：

• url：要抓取的 url 地址。
• headers：用于包装请求头信息。
• params：请求时携带的查询字符串参数。
• timeout：超时时间，超过时间会抛出异常。

还有post请求：

resp=requests.post(url,data={请求体的字典})

get与post是比较常用的请求方法学会使用即可访问大部分网页