Python的requests库使用总结

已于 2022-08-26 22:19:53 修改
阅读量3.4k 收藏 45
点赞数 12
分类专栏： Python 文章标签： python
于 2022-08-14 11:15:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_63794226/article/details/126329033
版权

在这里插入图片描述​ 

活动地址：CSDN21天学习挑战赛

学习的最大理由是想摆脱平庸，早一天就多一份人生的精彩；迟一天就多一天平庸的困扰。

学习日记

目录

学习日记

一、requests库基础

1、requests库概念

2、requests库安装与导入

3、常用属性或方法

二、七个主要使用方法

1、requests.request(method, url, **kwargs)

2、requests.get(url, params=None, **kwargs)

3、requests.post(url, data=None, json=None, **kwargs)

4、requests.Session

5、 kwargs 参数表

6、响应内容

三、requests库的基本语法

1、requests库语法的一种类型与六种属性

四、requests库的get请求 

五、requests库的post请求

六、超时参数timeout的使用

一、requests库基础

1、requests库概念

    requests库是基于Python开发的HTTP库，它能节省大量的工作，实际上，requests是在urllib的基础上进行了高度的封装，它不仅继承了urllib的所有特性，而且还支持一些其他的特性。其支持许多 HTTP 特性，可以非常方便地进行网页请求、网页分析和处理网页资源，拥有许多强大的功能。

2、requests库安装与导入

安装requests库： Windows+r 打开运行控制框，输入 cmd，进入命令行，输入：

pip install requests

 导入

import requests

3、常用属性或方法

 例如查看百度页面源码

import requests#导入requests

url = "http://www.baidu.com/"# 目标网址

response = requests.get(url)# 发送请求

print(type(response))# 查看响应对象的类型

print(response.status_code)# 查看响应状态码

print(type(response.text))# 查看响应内容的类型

print(response.cookies)# 查看cookies

print(response.text)# 查看响应的内容

二、七个主要使用方法

1、requests.request(method, url, **kwargs)

method 设置请求方式（get、post、put、head、patch、delete）

url 设置请求地址

kwargs 控制访问参数

2、requests.get(url, params=None, **kwargs)

url 设置请求地址。一般地址中问号后面的可以省略，问号后面的即是请求参数。

params 设置发送请求时所带的参数，字典或字节流格式，作为额外参数连接到url中（问号后的部分）。

kwargs 控制访问参数，见 kwargs参数表。

3、requests.post(url, data=None, json=None, **kwargs)

url 设置请求地址。

data 为字典、字节序列或文件对象，作为请求的内容，向服务器提交资源时使用。

json 为 JSON格式的数据，作为内容向服务器提交。

kwargs 控制访问参数，见 kwargs参数表。

4、requests.Session

Session 方法可以实现回话，持续性地发送requests请求，能够跨请求保持cookie。

5、 kwargs 参数表

6、响应内容

发送请求后，返回的是一个 response 对象。

三、requests库的基本语法

1、requests库语法的一种类型与六种属性

requests库获取的服务器响应是requests.models.Response的类型

我们用requests库模拟浏览器，向服务器发起一次普通的请求，这次请求只是为了辅助下面的六种属性

import requests
 
url = 'http://www.baidu.com'
 
response = requests.get(url = url)

用requests库时，我们发起请求是通过requests.get()函数进行的，传参是目的网页的url，并且用response变量接受服务器的响应。 

text属性：字符串形式返回网页源码(由于 此时编码格式是gbk，中文部分可能会乱码。 
# text属性：以字符串形式返回网页源码
print(response.text)
encoding属性：设置相应的编码格式 
# 设置相应的编码格式：
response.encoding = 'utf-8'
#这之后的response就不会出现中文乱码现象

url属性：返回url地址

# 返回url地址
url = response.url

 content属性：返回二进制的数据

#返回二进制的数据
content_binary = response.content

 status_code属性：返回状态码 200是正常

# 返回状态码 200是正常
status_code = response.status_code

​headers属性：返回响应头

#返回响应头
headers = response.headers

四、requests库的get请求 

语法格式

requests.get(ur1, headers=headers)

import requests
url = 'https://www.baidu.com/s?'
 
headers = {
                'User-Agent' : 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/88.0.4324.104 Safari/537.36'
         }
 
data = {
    'wd' : '水岸东方'
}

response = requests.get(url = url,params = data,headers = headers)
response.encoding = 'utf-8'
content = response.text 
print(content)

五、requests库的post请求

语法格式

response = requests.post(url, data) # data参数接收一个字典

# requests_post请求
import requests
import json
 
url = 'https://fanyi.baidu.com/sug'
 
headers = {
                'User-Agent' : 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/88.0.4324.104 Safari/537.36'
         }
 
data = {
    'kw' : 'eye'
}
 
 
response = requests.post(url = url,data = data,headers = headers)
 
content = response.text
 
obj = json.loads(content.encode('utf-8'))
 
print(obj)

# url：请求路径
# data：请求参数
# json数据
# kwargs：字典

六、超时参数timeout的使用

使用方法

response = requests.get(ur1, timeout=3)

import requests

url = "https://www.baidu.com/"# 目标网址

headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/103.0.0.0 Safari/537.36'
}

try:
    response = requests.get(url, headers=headers, timeout=10)  # 超时设置为10秒
except:
    for i in range(4):  # 循环去请求网站
        response = requests.get(url, headers=headers, timeout=20)
        if response.status_code == 200:
            break
html_str = response.text

醉蕤
关注
  • 12
    点赞
  • 踩
  • 45
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Python -- Requests库的使用
衍生星球的博客
04-21 5900
requests库的使用 1.requests库概述   requests库是一个简洁且简单的处理HTTP请求的第三方库，它的最大优点是程序编写过程更接近正常URL访问过程。这个库建立在Python 语言的 urllib3库的基础上，类似这种在其他函数库之上再封装功能、提供更友好函数的方式在Python语言中十分常见。在Python生态圈里，任何人都有通过技术创新或体验创新发表意见和展示才华的机会。requests库支持非常丰富的链接访问功能，包括国际域名和URL获取、HTTP长连接和连接缓存、HTTP会话
Python requests库
07-04
Requests是用python语言基于urllib编写的，采用的是Apache2 Licensed开源协议的HTTP库，Requests它会比urllib更加方便，可以节约我们大量的工作。 描述引自：https://www.cnblogs.com/lei0213/p/6957508.html \n安装步骤： Win + R 输入 cmd \nC:\Users\Administrator>cd D:\softwareIT\Python27\requests-master \nC:\Users\Administrator>d: \nD:\softwareIT\Python27\requests-master>python setup.py install
爬虫库分享(一)：requests常见用法总结
LW的技术小筑
03-05 2428
一.前言 requests是Python中一个用来发出HTTP请求的库，它将复杂的网络请求封装为一个简单的API以供用户调用，对于一般比较简单的爬虫程序而言，requests库足矣，今天博主分享一下requests库的常见用法，本文主要针对有志爬虫的新人。 二.常见用法 2.1 安装与引用 当然，在使用前需要在Python环境中安装requests库： pip install requests 安装完成后便可以通过import命令即可引用该库： import requests 2.2 GET请求 HTT
python爬虫——request模块讲解，Python详解
最新发布
2401_83621708的博客
03-21 1640
对于GET方式的请求，浏览器会把http header和data一并发送出去，服务器响应200（返回数据）；而对于POST，（二）http常见请求参数headers：请求头**data：发送编码为表单形式的数据params：查询字符串**host：请求web服务器的域名地址Accept：指定客户端能够接收的内容类型，内容类型中的先后次序表示客户端接收的先后次序。Accept-Encoding：指定客户端浏览器可以支持的web服务器返回内容压缩编码类型。
04 Response对象的status_code属性可以获取响应状态码
weixin_63986098的博客
06-15 4302
Response对象的status_code属性可以获取响应状态码
Pyhon : 爬虫Requests基础--响应状态码
weixin_44523387的博客
06-01 1304
响应状态码 我们可以检测响应状态码： r = requests.get(‘http://httpbin.org/get’) r.status_code 200 为方便引用，Requests还附带了一个内置的状态码查询对象： r.status_code == requests.codes.ok True 如果发送了一个错误请求(一个 4XX 客户端错误，或者 5XX 服务器错误响应)，我们可以通过 ...
Python——requests入门到出门
一个普通人的博客
04-01 740
在本文中，我们介绍了如何使用Python的requests库发送HTTP请求，并处理响应。我们还介绍了如何使用请求参数、错误处理、会话管理、SSL验证和代理等功能。希望这篇文章对你有所帮助，让你更加熟练地使用requests库。
requests库的使用
xiaogeldx的博客
01-11 6501
简介 Requests是一个优雅而简单的Python HTTP库，专为人类而构建 Requests是有史以来下载次数最多的Python软件包之一，每天下载量超过400000次 之前的urllib作为Python的标准库，因为历史原因，使用方式可以说是非常的麻烦而复杂的，而且官方文档也十分的简陋，常常需要去查看源码 相反，Requests的使用方式非常的简单，直观，人性化，让程序员的精力完全从库的...
requests库
02-16 379
requests库 requests库是第三方库，用来请求url import requests response = requests.get(url) 请求网页，获得响应,如果url比较多，可以定义成方法。 requests常用方法 response.status_code 返回一个状态码， assert:表示断言的意思，什么都不返回表示，断言成功，否则失败 assert response.status_code == 200 response.headers 返回的数据都是响应头， respon
3. 响应状态码及Response对象的status_code属性
weixin_63986098的博客
06-05 3303
1.导入库 import requests # 2.定义url url = 'https://music.163.com/' # 3.发送请求，并把响应结果赋值给变量r r = requests . get(url) # 4.1 查看返回值 print(r) # 4.2 查看r的类型 print(type(r)) ## 4.3 输出Response对象的status_code属性 print(r . status_code)【终端输出】200。
python-requests
qq_36207775的博客
11-06 385
本章内容转载自：http://www.cnblogs.com/ranxf/p/7808537.html 1、模块说明 requests是使用Apache2 licensed 许可证的HTTP库。 用python编写。 比urllib2模块更简洁。 Request支持HTTP连接保持和连接池，支持使用cookie保持会话，支持文件上传，支持自动响应内容的编码，支持国际化的URL和POST数...
Python Requests库基本用法示例
09-20
主要介绍了Python Requests库基本用法,结合实例形式总结分析了Python Requests库安装、请求发送与响应、文件下载、重定向等相关操作技巧及注意事项,需要的朋友可以参考下
python爬虫要用到的库总结
01-19
python爬虫要用到的库： 请求库：实现 HTTP 请求操作 urllib：一系列用于操作URL的功能。 requests：基于 urllib 编写的，阻塞式 HTTP 请求库，发出一个请求，一直等待服务器响应后，程序才能进行下一步处理。 ...
Python使用BeautifulSoup库解析HTML基本使用教程
01-20
BeautifulSoup是Python的一个第三方库，可用于帮助解析html/XML等内容，以抓取特定的网页信息。目前最新的是v4版本，这里主要总结一下我使用的v3版本解析html的一些常用方法。 准备 1.Beautiful Soup安装 为了能够对...
python爬虫大总结，代码完整
01-28
我们主要利用到2个库：requests，bs4 库的用法，读者请自行百度， tips：bs4库非内置库，需要另行安装：pip3 install beautifulsoup4 然后，我们再对目标进行写入： with open('picfile','wb') as f: #这里的...
python学习总结day04.txt
04-28
1、requests模块方法 1、get()参数 1、查询参数 ：params -> 字典 2、代理 ：proxies -> 字典 1、普通代理 ：{"协议":"协议://IP地址:端口号"} 2、私密代理 {"协议":"协议://用户名:密码@IP地址:端口号"} 3...
Python requests库使用详解
永远是少年
12-25 2202
今天继续给大家介绍Python 爬虫相关知识，本文主要内容是Python requests库使用详解。 一、Python requests库简介 二、requests库常用方法 三、response对象使用
requests库学习笔记
weixin_45090728的博客
12-18 283
#请求 Requests 所有的功能都可以通过以下 7 个方法访问。它们全部都会返回一个 Response 对象的实例。 requests.request(method, url, **kwargs) requests.head(url, **kwargs) requests.get(url, params=None, **kwargs) 传递URL参数 params=payload requests.post(url, data=None, json=None, **kwargs) data和json两个
Python中requests库的用法详解
feng的博客
07-19 3043
requests是使用Apache2 licensed 许可证的HTTP库。比urllib模块更简洁。Request支持HTTP连接保持和连接池，支持使用cookie保持会话，支持文件上传，支持自动响应内容的编码，支持国际化的URL和POST数据自动编码。在python内置模块的基础上进行了高度的封装，从而使得python进行网络请求时，变得人性化，使用Requests可以轻而易举的完成浏览器可有的任何操作。
Python安装requests库
08-19
### 回答1： 要在Python中安装requests库，可以按照以下步骤进行操作： 1. 打开终端或命令提示符窗口，输入以下命令安装pip： ```python python -m ensurepip --default-pip ``` 2. 输入以下命令升级pip： ```python python -m pip install --upgrade pip ``` 3. 输入以下命令安装requests库： ```python pip install requests ``` 安装完成后，可以通过以下代码验证requests库是否安装成功： ```python import requests response = requests.get("https://www.baidu.com") print(response.text) ``` ### 回答2： 在Python中安装requests库非常简单。首先，确保已经安装了Python解释器，只要在官方网站下载并安装即可。 一旦安装了Python，就可以使用Python的包管理工具pip来安装requests库。打开命令行窗口（在Windows系统上是运行cmd命令），输入以下命令来安装requests库： ``` pip install requests ``` 这将会自动从Python包索引中下载并安装requests库。建议使用最新版本的requests库以确保拥有最新的功能和安全性。 安装完成后，可以在Python程序中使用requests库。只需在代码中导入requests模块，即可调用其中提供的各种功能来发送HTTP请求。 下面是一个简单的示例代码，演示如何使用requests库发送GET请求并获取响应： ```python import requests response = requests.get('https://www.example.com') print(response.text) ``` 此代码将发送一个GET请求到https://www.example.com，并将返回的响应内容打印出来。 通过使用requests库，可以轻松地发送HTTP请求、处理响应、处理Cookie和会话等。requests库提供了许多方便的方法和功能，可以让Python与Web服务进行交互变得更加容易和高效。 ### 回答3： 要安装Python的requests库，可以按照以下步骤进行操作： 1. 打开Python的官方网站（https://www.python.org/downloads/），选择适合你系统的Python版本进行下载。根据你的操作系统，选择32位或64位的安装包。 2. 运行下载的安装包，按照提示进行安装。在安装过程中，请确保勾选上“Add Python to PATH”选项，这样可以在命令行中直接使用Python。 3. 安装完成后，打开命令提示符或者终端窗口，输入以下命令检查Python是否安装成功： ``` python --version ``` 4. 确保Python安装成功后，可以使用以下命令安装requests库： ``` pip install requests ``` 5. 执行上述命令后，pip将会自动从Python Package Index（PyPI）下载并安装requests库及其相关依赖。安装完成后，可以使用import语句在Python脚本中引入requests库。 6. 验证安装是否成功，可以在Python交互式环境中执行以下命令： ``` import requests ``` 如果没有报错，表示安装成功。 总结： 通过以上步骤，你已经成功安装了Python的requests库。现在你可以在Python项目中使用requests库发送HTTP请求、处理响应等功能了。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

醉蕤

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值