【bug】python requests报Max retries exceeded with url异常

最新推荐文章于 2023-03-12 20:49:40 发布
最新推荐文章于 2023-03-12 20:49:40 发布
阅读量340 收藏
点赞数
分类专栏： bug处理 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/N199109/article/details/112770399
版权

错误信息：
python requests报Max retries exceeded with url异常

原因分析：
1http请求连接太多没有关闭造成的.
解决方案一：
关闭多余的链接：
requests使用了urllib3库，默认的http connection是keep-alive的，requests设置False关闭。

sess = requests.session()
sess.keep_alive = False

解决方案二：
增加重试连接次数：

 requests.DEFAULT_RETRIES = 5
盼兮
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
完美解决python针对hdfs上传和下载的问题
12-17
当我们使用python的hdfs包进行上传和下载文件的时候，总会出现如下问题 requests.packages.urllib3.exceptions.NewConnectionError:<requests>: Failed to establish a new connection: [Errno -2] Name or service...
解决“Max retries exceeded with url”问题
热门推荐
buki26的博客
12-14 6万+
用requests的post方法获取内容时，遇到以下报错： ConnectionError: HTTPConnectionPool(host=‘xxx.xx.xxx.xxx’, port=xxxx): Max retries exceeded with url: /api/v1/login/ (Caused by NewConnectionError(’&lt;urllib3.connection...
【爬虫 | Python】解决‘Requests Max Retries Exceeded With Url‘报错的问题
InetGeek的博客
03-12 2万+
【爬虫 | Python】解决'Requests Max Retries Exceeded With Url'报错的问题, Max retries exceeded with url; Connection timed out;
HTTPConnectionPool(host='xx.xx.xx.xx', port=xx): Max retries exceeded with url:(Caused by ConnectTim...
bankelei6741的博客
09-03 2494
HTTPConnectionPool(host='xx.xx.xx.xx', port=xx): Max retries exceeded with url:(Caused by ConnectTimeoutError(<urllib3.connection.HTTPConnection object at 0x0000015A25025EB8>, 'Connection t...
【Python】关于Caused by SSLError Max retries exceeded with url 的错误
小白兔的窝
03-17 9418
可能的问题和解决方法如下： 1.http连接太多没有关闭导致的 解决方法1：关闭多余链接 import requests requests.adapters.DEFAULT_RETRIES = 5 # 增加重连次数 s = requests.session() s.keep_alive = False # 关闭多余连接 s.get(url) # 你需要的网址 解决办法2：增加重连次数 requests.adapters.DEFAULT_RETRIES = 5 2.访问次数频繁，被禁..
Python requests报错解决办法：Max retries exceeded with url/Name or service not known
xuerba的博客
11-20 1万+
报错一：Max retries exceeded with url 原因：访问URL超过最大连接数，关闭长连接可解决，代码如下 import requests # 原代码 response = requests.post(url, data=data) # 修复后代码 # 方案一：设置headers关闭持久链接 headers = { 'Connection': 'close' }...
Python requests“Max retries exceeded with url” error
07-22 1619
error1: NewConnectionError('<urllib3.connection.VerifiedHTTPSConnection object at 0x00000000038F2B00>: Failed to establish a new connection:[WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应，连...
python-requests离线包
04-15
Python是requests库的基础，必须先安装Python环境才能使用requests。 2. `certifi-2019.9.11-py2.py3-none-any.whl`: certifi是一个包含受信任的SSL证书的库，用于验证HTTPS连接的安全性。此版本适用于Python 2和3...
Python requests获取网页常用方法解析
09-17
这里，`res = requests.get(self._base_url)`发送了一个GET请求，`res.cookies`是一个cookiejar对象，我们通过`requests.utils.dict_from_cookiejar()`将其转化为字典格式，便于后续使用。 当需要发送带有cookie的...
python requests.get带header
09-16
在Python的网络编程中，`requests`库是一个非常常用且强大的工具，用于发送HTTP请求。在某些场景下，我们需要向服务器发送带有特定`header`（头部信息）的GET请求，以便模拟不同的用户行为或者满足API接口的要求。`...
Python requests上传文件实现步骤
09-16
最后，使用`requests.post`发送POST请求，`data`和`files`参数一同传入，请求的URL是`request_url`。`MyLogger().getlogger().info`用于日志记录，便于追踪和调试。 整个过程中，需要注意的是，当上传文件并且需要...
python（request）常见错误记录
qq_40296570的博客
09-18 2225
连接超时requests.exceptions.ConnectTimeout 抛出错误 requests.exceptions.ConnectTimeout: HTTPConnectionPool(host=‘github.com’, port=80): Max retries exceeded with url: / (Caused by ConnectTimeoutError(<urllib3.connection.HTTPConnection object at 0x7f1b16da75f8.
解决python访问中突发requests.exceptions.ConnectionError:Max retries exceeded with url报错
呆萌的代Ma
01-06 2112
解决方法 将： response = requests.get(url=url) # response操作..... 改为： with requests.get(url=url) as response: # response操作..... 原因解析 多次在正常访问中出现这种情况，可能是http连接开了太多，但是没有关闭的原因；如果是ip被封了据说也会有这种报错 ...
【Bug】python requests发起请求，报“Max retries exceeded with url”
学无止境、积少成多、厚积薄发
04-28 2万+
在本地机器上，高频率重复调用一个API接口，出现“Max retries exceeded with url”，拒绝连接的情况。 楼主讲一下，遇到这个bug的过程： 在服务器上开发了一个识别图像文字API接口，也部署好了，准备对接口进行测试， 楼主准备对本地文件夹中的2000多张图片进行测试，也就是说需要重复调用API接口2000多次。 请求接口50多次的时候，接口就不反馈信息了，报错，连接错误，无法连接，一开始以为是网络的问题，然后又重头开始调用直到调了300多次，报错，连接错误，无法连接，一直这么下去大
解决Max retries exceeded with url的问题
ctotalk
12-21 5万+
解决Max retries exceeded with url的问题 requests.exceptions.ConnectionError: HTTPSConnectionPool(host='www.baidu.com', port=443): Max retries exceeded with url: (Caused by <class 'socket.gaierror'>: python脚本请求url，大量请求报错Max retries exceeded with url 解..
Max retries exceeded with url错误
weixin_30835923的博客
08-25 1532
进行requests库学习的时候，报Max retries exceeded with url错误，网上查询说是，用下面这个解决方法没用，后来关闭了fiddler后发现就可以了，可能fiddler开的连接数太多了 http连接太多没有关闭导致的。 解决办法： 1、增加重试连接次数 requests.adapters.DEFAULT_RETRIES = 5 1 2、关闭多余的...
使用requests爬取报错“Max retries exceeded with url“的解决方法
Code皮皮虾的博客
07-28 2万+
某次在写爬虫时，运行之后报错 requests.exceptions.ProxyError: HTTPSConnectionPool(host=‘xxx.xxx.xxx’, port=443): Max retries exceeded with url: xxxxxxx (Caused by ProxyError (‘Cannot connect to proxy.’, NewConnectionError(’<urllib3.connection.HTTPSConnection object at
python requests报错SSLError: None: Max retries exceeded with url: /api/auth/login (Caused by None)
python程序员
04-21 769
报错内容 SSLError: None: Max retries exceeded with url: /api/auth/login (Caused by None) 问题的原因：需要禁用ssl证书 解决办法： 加上 verify=False
python requests库爬取网站出现Max retries exceeded with url 的错误
weixin_43178315的博客
07-01 1284
python requests库爬取网站出现Max retries exceeded with url 的错误，解决方法很简单： 原因是验证了https网站证书的安全性。 只需将verify置为False，则不会验证https网站证书的安全性（无论是否在第三方机构认证都可以正常访问），并使用从源网站接收的公钥进行加密通信。 在requests.get方法里加上verify=False参数，举例如下： response = requests.get('https://api.github.com/',
python max retries exceeded with url
最新发布
09-22
Python中的"max retries exceeded with url"错误是由于请求连接超过了最大重试次数导致的。这个错误通常发生在使用requests库发送请求时，当请求无法成功连接到目标URL时会进行重试。你可以在发送请求时使用urllib3库中的重试实用程序来设置最大重试次数和重试间隔。下面是一个发送请求并处理"max retries exceeded with url"错误的示例代码： ```python import requests from requests.adapters import HTTPAdapter, Retry def send_request(url, max_retries=3): session = requests.Session() retries = Retry(total=max_retries, backoff_factor=0.5, status_forcelist=[ 500, 502, 503, 504 ]) adapter = HTTPAdapter(max_retries=retries) session.mount("http://", adapter) session.mount("https://", adapter) response = session.get(url) return response # 使用send_request函数发送请求 response = send_request("https://www.example.com") # 处理响应 if response.status_code == 200: print("请求成功") else: print("请求失败") ``` 以上代码中，我们使用了requests库的Session对象和HTTPAdapter来设置最大重试次数和重试间隔。你可以根据需要调整最大重试次数和重试间隔。如果请求成功，将会打印"请求成功"，否则将会打印"请求失败"。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值