爬虫1
- 获取数据之requests库(记得要在终端先安装 pip install requests,4kb/s的速度让人感动)
import requests
- requests的get()方法 :(就简单粗暴从网页拿东西)向服务器发送了一个请求,括号里的参数是你需要的数据所在的网址,然后服务器对请求作出了响应,返回的结果是个response对象
res = requests.get('url')
#get()方法获取的结果返回给res变量
- response的属性1:response.status_code —— 检查请求是否成功,代码200表示成功
- response的属性2:response.content —— 将response对象转化为二进制,可用于图片、音频等格式文件的下载
- response的属性3:response.text —— 将response对象转化为字符串形式,可用于文档格式的下载
- response的属性4:response.encoding —— 定义
Response
对象的编码类型,遇上获取的文本乱码问题使用