Python中为什么requests.HTTPError错误需要raise_for_status()来抛出？

最新推荐文章于 2024-08-18 08:31:00 发布
最新推荐文章于 2024-08-18 08:31:00 发布
阅读量7k 收藏 17
点赞数 7
分类专栏： python爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Odaokai/article/details/100133503
版权
  1. 首先看下面代码的运行情况:
	import requests
	
	res = requests.get("https://www.csdn.net/eee", headers=headers, timeout=1)
	res.encoding = "utf8"
	print(res.status_code)
	print(res.text)

运行结果：

可见requests请求可以正常返回状态码以及html文本，并没有报错。状态码只是服务器响应的结果，而错误的状态码也是正常的响应结果。

加上try…except…再看看:
在这里插入图片描述
没有任何异常！响应状态码为404！

  1. 加上raise_for_status(),观察运行结果：
    在这里插入图片描述
    此时被抛出404错误！
    由此可见一个错误请求(一个 4XX 客户端错误，或者 5XX 服务器错误响应)，我们必须要通过使用raise_for_status() 才能抛出异常！

  2. 加上try…except…

在这里插入图片描述
此时抛出的异常并被第一个 requests.HTTPError 异常捕获。

这样一看raise_for_status和try…except…之间的关系就很清晰了吧

hardyspider
关注
专栏目录
Python requests获取网页常用方法解析
09-17
如果响应状态码不是200（表示请求成功），会抛出`HTTPError`异常。`res.apparent_encoding`用于确定响应的编码方式，确保正确解码返回的HTML文本。 除了`get()`方法，requests库还提供了其他HTTP方法，如`post()`、...
python3 raise HTTPError(req.full_url, code, msg, hdrs, fp) urllib.error.HTTPError: HTTP Error 403...
weixin_30514745的博客
09-28 1万+
1.分析: 如果用 urllib.request.urlopen 方式打开一个URL,服务器端只会收到一个单纯的对于该页面访问的请求,但是服务器并不知道发送这个请求使用的浏览器,操作系统,硬件平台等信息,而缺失这些信息的请求往往都是非正常的访问,例如爬虫. 有些网站验证请求信息中的UserAgent(它的信息包括硬件平台、系统软件、应用软件和用户个人偏好),如果UserAgent存在异常或者是...
raise HTTPError(req.full_url, code, msg, hdrs, fp)urllib.error.HTTPError: HTTP Error 404: Not Found
biyesheji1000的专栏
11-19 4206
import requests url=['www....','www.....',...] for i in range(0,len(url)): linkhtml = requests.get(url[i]) 爬虫报了以下错误： File "C:\Users\lenovo7\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 247, in urlretrieve with context...
Request库用法总结
最新发布
QQVQQ的博客
08-18 720
requests 库是一个功能强大且易于使用的 Python HTTP 库，广泛用于发起 HTTP 请求。本文从基础到高级功能，详细介绍了如何使用 requests 进行各种类型的 HTTP 请求、处理请求参数等用法。
Python：Requests模块的异常值处理
python学习者的博客
05-27 4247
用Python的requests模块进行爬虫时，一个简单高效的模块就是requests模块，利用get()或者post()函数，发送请求。 但是在真正的实际使用过程中，我们可能会遇到网络的各种变化，可能会导致请求过程发生各种未知的错误导致程序中断，这就使我们的程序不能很好的去处理错误。所以为了使我们的程序在请求时遇到错误，可以捕获这种错误，就要用到try…except方法，以及了解request...
python模块 — requests
个人博客
03-02 4228
Python 的 requests 库是一个常用的 HTTP 请求库，可以轻松发送各种 HTTP 请求（如 GET、POST、PUT、DELETE 等）。它简化了编写 HTTP 客户端的代码，并且支持 SSL 和连接池等特性。下面是 requests 库中常用的一些方法：requests.get(url, params=None, **kwargs)：发送 GET 请求并返回响应对象。
爬虫报错： ‘raise HTTPError(req.full_url, code, msg, hdrs, fp) ’ HTTPError
m0_56255158的博客
04-01 4028
爬虫报错： 'raise HTTPError(req.full_url, code, msg, hdrs, fp) ’ HTTPError 报错原因：网站存在反爬虫机制，爬虫未进行UA封装，拒绝了爬虫请求。 解决方法：将原先的urlopen(‘https://movie.douba...
python 使用 requests 模块发送http请求 的方法
09-19
response.raise_for_status() # 如果状态码不是2xx，会抛出HTTPError异常 except requests.exceptions.RequestException as e: print(f"请求失败：{e}") ``` 总的来说，`requests`模块是Python中非常强大的HTTP...
python requests response值判断方式
09-16
- `raise_for_status()`: 如果响应的状态码不在200-300范围内，会抛出一个`HTTPError`异常。 ##### 2. 判断响应状态 在实际应用中，通常需要根据响应的状态来决定后续操作。比如，当响应状态码为200时，表明请求...
Python 使用requests模块发送GET和POST请求的实现代码
09-21
response.raise_for_status() # 如果响应状态码不是200，则抛出HTTPError异常 except requests.exceptions.HTTPError as e: print(f"HTTP Error: {e}") except requests.exceptions.ConnectionError as e: print...
Python爬虫库requests获取响应内容、响应状态码、响应头
09-18
当遇到错误响应（如404未找到）时，可以通过`response.raise_for_status()`方法抛出异常： ```python bad_r = requests.get('http://httpbin.org/status/404') print(bad_r.status_code) # 输出：404 bad_r....
Python爬虫4/20：requests库异常，判断异常方法raise_for_status，requests库方法，控制访问参数，name == main，robots协议
weixin_44478659的博客
04-21 2102
1.requests库异常 2. Response类的方法 raise_for_status()判断是否异常 try: r = requests.get(url) r.raise_for_status() r.encoding = r.apparent_encoding return r.text except: return '产生异常' 3.HTTP协议 4.Requests库的7个方法 put：全部 patch：局部 - 节省网络带宽 post：提交部分内容 重点get和head
python raise 用法_Python response.raise_for_status()用法及代码示例
weixin_39943547的博客
02-09 3426
如果在处理过程中发生错误，则response.raise_for_status()返回HTTPError对象。它用于调试请求模块，并且是Python请求的组成部分。 Python请求通常用于从特定资源URI中获取内容。每当我们通过Python向指定URI发出请求时，它都会返回一个响应对象。现在，此响应对象将用于访问某些功能，例如内容，标头等。本文围绕如何检查响应进行说明。raise_for_sta...
【网络爬虫学习】_Requests库_1
m0_49052306的博客
08-20 428
Python网络爬虫与信息提取_MOOC_北京理工大学嵩天老师，学习笔记记录
raise_for_status()方法
热门推荐
weixin_43360707的博客
09-19 4万+
raise_for_status()方法 理解Response类非常重要，Response这样的一个对象返回了所有的网页内容，那么它也提供了一个方法，叫raise_for_status()，这个方法是专门与异常打交道的方法，该方法有这样一个有趣的功能，它能够判断返回的Response类型状态是不是200。如果是200，他将表示返回的内容是正确的，如果不是200，他就会产生一个HttpError的异...
python爬虫之URLError、HTTPError以及requests中的SSLError
codingforhaifeng的博客
05-30 2364
python爬虫时，我们在使用urlopen()或者opener.open()发出请求时，如果这个请求无法得到处理，那么，就会产生错误。常见的错误有URLError、HTTPError以及requests中的SSLError，下面我们来一一结束。URLError    产生原因：        1，没有网络连接        2，服务器连接失败        3，找不到指定的服务器    我们可以...
python中raise_for_status方法的作用
AI浩
03-29 1357
如果响应的状态码表示请求未成功（即状态码不是 2xx），则该方法会抛出一个。通过这种方式，你可以确保在继续处理响应数据之前，请求已经成功完成。如果请求失败，你可以根据异常类型执行适当的错误处理逻辑。在上面的代码中，我们首先发送一个 POST 请求到指定的 URL，并带上 JSON 格式的数据和请求头。这允许你以一种更结构化的方式来处理请求失败的情况，而不是手动检查状态码。这样，你就可以根据异常类型来执行不同的错误处理逻辑。发送请求时，即使请求失败（例如，服务器返回了。会抛出一个异常，该异常随后被。
Python网络爬虫与信息提取（二）：网络爬虫之规则(Requests库 & Robots规则)
hxxjxw的博客
05-05 1162
Requests库的7个主要方法 Requests库的get()方法 获得一个网页最简单的一行代码就是 r = requests.get(url) Requests库支持6种常用的连接异常 raise_for_status() 方法 response这样一个对象返回了所有的网页内容，它也提供了一个方法：raise_for_status(),这个方法是专门与异常打...
python（request）常见错误记录
qq_40296570的博客
09-18 2410
连接超时requests.exceptions.ConnectTimeout 抛出错误 requests.exceptions.ConnectTimeout: HTTPConnectionPool(host=‘github.com’, port=80): Max retries exceeded with url: / (Caused by ConnectTimeoutError(<urllib3.connection.HTTPConnection object at 0x7f1b16da75f8.
r.raise_for_status()
03-16
r.raise_for_status() 是 Python 中 requests 库中用来检查请求是否成功的方法。如果请求返回状态码不是 2xx，就会抛出 HTTPError 异常。如果请求成功，则不会有任何反应。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值