Python3中关于Max retries exceeded with url 的错误解决

本文介绍了解决HTTP连接过多未关闭及访问频率过高导致的禁止访问问题的方法。通过设置requests库参数来增加重连次数和关闭多余连接,同时介绍了如何使用代理服务器绕过访问限制,包括设置代理及headers,提供了获取代理的资源链接。
摘要由CSDN通过智能技术生成

1.http连接太多没有关闭导致的,解决方法:

import requests
requests.adapters.DEFAULT_RETRIES = 5 # 增加重连次数
s = requests.session()
s.keep_alive = False # 关闭多余连接
s.get(url) # 你需要的网址

2.访问次数频繁,被禁止访问,解决方法:使用代理

import requests
s = requests.session()
url = "https://mail.126.com/"
s.proxies = {"https": "57.10.114.47:8000", "http": "32.218.1.7:9999", }
s.headers = header
s.get(url)

爬取代理可参考:https://blog.csdn.net/z564359805/article/details/88875013

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值