天蛛爬虫学习笔记——Requests

最新推荐文章于 2024-10-02 10:53:34 发布

Kamin_H

最新推荐文章于 2024-10-02 10:53:34 发布

阅读量118

点赞数

分类专栏：爬虫学习笔记文章标签： python

本文链接：https://blog.csdn.net/h684392/article/details/105668449

版权

本文是关于天蛛爬虫中Requests库的学习笔记，主要介绍requests方法，如get、post等，以及Request和Response对象的属性，如status_code、encoding等。同时，文章还涵盖了异常处理和各种可选参数的使用，如headers、cookies和proxies等，对于网络爬虫初学者极具参考价值。

摘要由CSDN通过智能技术生成

天蛛爬虫学习笔记——Requests

1、Requests方法

1.1、request（method,url,**kwargs）构造一个请求，支撑一下各方法的基础方法,method包括下列的几个方法
1.2、get(),获取HTML网页的主要方法
1.3、 head（）获取HTML网页头信息
1.4、post（）向HTML网页提交POST请求
1.5、put（）向HTML网页提交PUT请求，会全部覆盖之前的信息
1.6、patch（）向HTML网页提交局部修改请求
1.6、delete（）删除请求
由于网页的限制，一般不需要我们提交信息，所以最常用的方法是get（）和head（）

2、对象Request和Response的属性

2.1、status_code 查看请求的返回状态码，200表示连接成功
2.2、encoding，从header中分析编码方式
2.3、apparent_encoding，从内容中分析编码方式
2.4、content ，HTTP响应的二进制内容
从header中获取的编码格式不一定是内容的编码格式，所以通常会r.encoding=r.apparent_ebcoding或者是r.encoding=“UTF-8”