重定向问题：Exceeded 30 redirects.

已于 2022-05-30 14:02:28 修改
阅读量1.3k 收藏 2
点赞数 1
分类专栏： js逆向 文章标签： python request 爬虫 redirect
于 2021-05-31 18:13:42 首次发布
原文链接：https://www.jianshu.com/p/19f631cbb21a
版权

对于一个网站，使用requests库直接访问：r = requests.get(url)
如果该网站发生了重定向，可能不会显示出来，返回状态码为200，因为requets库自动处理了重定向请求，如果网站在不断重定向，则会发生Python Requests: requests.exceptions.TooManyRedirects: Exceeded 30 redirects的问题，可以设置一个参数禁止重定向：r = requests.get(url, allow_redirects=False)（默认allow_redirects=True是启动重定向）

一位路过的程序员
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
requests.exceptions.TooManyRedirects: Exceeded 30 redirects
jacke121的专栏
09-09 4236
requests.exceptions.TooManyRedirects: Exceeded 30 redirects https://blog.csdn.net/weixin_42081389/article/details/89521297 当爬虫时报错：requests.exceptions.TooManyRedirects: Exceeded 30 redirects. 可以 request请求时添加allow_redirects=False，默认时allow_redirects=T...
Caused by: android.system.ErrnoException: write failed: ENOSPC (
08-18
Caused by: android.system.ErrnoException: write failed: ENOSPC (No space lef
解决Exceeded 30 redirects问题的3种方法
12-20
Exceeded 30 redirects 网上有许多解决的办法,但是本人试了很多种办法解决,但是都没成功(不是说他们的方法不行,只是不适合我),在这里我把我知道方法说一下 1.添加请求头 #requests带上自己浏览器信息的请求头，默认允许重定向 import requests headers = {"User-Agent" : "User-Agent:Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0;"} h=requests.get('https://baike.baidu.com',headers=heade
requests关于Exceeded 30 redirects问题得出的结论
weixin_30677475的博客
01-31 554
　　首先说结论，发送requests请求必须带上headers否则无法保持bs之间的会话。从而报上述的错误。 　　昨天一个朋友在爬网页时出现的一个问题，以及后续我对这个问题进行了简单的测试。 　　先说出现的问题的简单描述。 　　首先是使用urllib请求网页： #urllib.request发起的请求 import urllib.request response = urllib....
python3 requests出现Exceeded 30 redirects
徐代龙的技术专栏
07-04 6920
环境： win10 python3.5 requests pycharm2017社区版 在使用requests库操作post请求的时候，出现了一个这样的问题 Exceeded 30 redirects 展示一下源代码： try: r = requests.post('http://zmcz.yicai.com/insertdata/apiConnect/cacheDat...
node-okcoin:适用于node.js的基于承诺的Cryptocurrency Exchange OKCoin.com API
05-12
节点币 apidoc 安装 npm install okcoin.com 样例代码 查看示例目录 要求限制 okcoin请求限制 1. Request limits Each IP can send maximum of 3000 https requests within 5 minutes. If the 3000 limit is exceeded, the system will automatically block the IP for one hour. After that hour, the IP will be automatically unfrozen. 3000个请求/ 5分钟 600个请求/分钟 10个请求/秒 节点-okcoin请求限制 lib/constant.js exports.OPT_LIMIT_SEC = 0.2; 5个请求/秒
记录问题：python爬虫爬取数据出现requests.exceptions.TooManyRedirects: Exceeded 30 redirects
m0_62945506的博客
12-24 3334
解决 requests请求超过30个重定向 解决 请在微信客户端打开链接
requests关于Exceeded 30 redirects
zhangt766的博客
10-30 1652
写了几行平平无奇的代码，想要获取json数据 import requests url=‘https://image.baidu.com/search/acjson?tn=resultjson_com&logid=10924524703716171320&ipn=rj&ct=201326592&is=&fp=result&queryWord=%E9%87%91%E5%9F%8E%E6%AD%A6&cl=2&lm=-1&ie=utf-
解决：python爬虫爬取数据出现requests.exceptions.TooManyRedirects: Exceeded 30 redirects
Roxannekkk的博客
10-11 9139
在Python抓取数据时发生以下错误： requests.exceptions.TooManyRedirects: Exceeded 30 redirects. requests发生了太多的重定向，已超过了30个。 若仅仅利用在requests.get方法中添加参数allow_redirects=False，可以禁止重定向，不会产生问题了，但这样做也导致，无法获取重定向的数据。 可以利用以下方法： 1、先开启requests请求的回话： s = requests.session() 2、设置请求头部的用户代
[debug]-解决requests.exceptions.TooManyRedirects: Exceeded 30 redirects && requests添加请求头
ai_faker的博客
10-15 3222
1.问题描述 爬取网页信息时，用到了requests库，出现报错 requests.exceptions.TooManyRedirects: Exceeded 30 redirects. 报错如下： 错误语句 urls.append(requests.get(url, params=i).json().get('data')) 2.问题分析 缺少了请求头参数，不加请求头，requests无法保证与服务器之间的会话，每次连接服务器都被当作一条新请求直接让他跳转，造成多次重定向问题，抛出错误。(奇怪的是我之前
request-redirect-test:多次重定向测试时的内存泄漏警告
07-04
请求重定向测试 运行服务器 node server.js [maxRedirects] maxRedirects默认 10 例子： > node server.js 运行测试 node req.js [maxRedirects] node req-pipe.js [maxRedirects] > node req.js 8 error: ...
详解 Java Maximum redirects (100) exceeded
08-30
主要介绍了详解 Java Maximum redirects (100) exceeded的相关资料,需要的朋友可以参考下
homebrew-infection：https：infection.github.io的Homebrew点击
02-04
自制感染配方 该存储库包含用于在MacOS上安装的公式。 用法 ...$ brew tap infection/homebrew-infection 然后使用以下命令安装感染 $ brew install infection 然后，您可以从系统中的任何位置运行infection命令 ...
爬虫【网页构造+第三方库+爬取逻辑示例+正则表达式+xpath+多进程】
zico_a的博客
04-01 681
构造url网页链接常用字符串处理 str.split('.')#不添加默认按空格tab分割'www.baidu.com'-->'www','baidu','com' str.replace('要修改的','要用来替代的') str.strip()#去掉前后端(两侧)空格 '{提取的格式化内容}str'.format('选项')#常用在连接最后的搜索内容'https://www.pexels....
python 报错 requests.exceptions.TooManyRedirects: Exceeded 30 redirects.
qq_37592047的博客
11-20 1024
python 报错 requests.exceptions.TooManyRedirects: Exceeded 30 redirects. 当python requests报错：requests.exceptions.TooManyRedirects: Exceeded 30 redirects. 可以 request请求时添加allow_redirects=False 默认时allow_redirects=True resp = requests.get(url=url, headers=headers
Python requests请求抓取数据：requests.exceptions.TooManyRedirects: Exceeded 30 redirects.【 超过30个重定向】
weixin_39015449的博客
04-28 7197
在Python抓取数据时发生以下错误：requests.exceptions.TooManyRedirects: Exceeded 30 redirects.错误提示说requests发生了他多的重定向：超过了三十个。我尝试使用一下方法，让requests仅仅请求，禁止重定向的操作去抓取数据：requestData = requests.get(url,headers=header,allow_r...
Python爬虫 requests报错：requests.exceptions.TooManyRedirects: Exceeded 30 redirects.
平人的博客
03-04 913
使用requests爬取数据时，最好加上headers，就不会报错了。
爬虫遭遇重定向如何解决
qq_18310041的博客
11-30 6194
错误记录： 1.requests.exceptions.TooManyRedirects: Exceeded 30 redirects 错误提示是requests库有太多的重定向：超过了30个重定向 解决办法： error_url = requests.get(news, headers=headers, allow_redirects=False) print(error_url.st...
error exceeded 30 redirects.
最新发布
09-03
错误信息"error exceeded 30 redirects"表示超过了30次重定向。当我们在浏览器中访问一个网页时，会发生重定向，即服务器将我们的请求重新引导到其他网页。而该错误通常出现在有太多层次重定向的情况下。 造成此错误的原因可能有多个。一种常见的情况是网页在进行重定向时出现了循环，例如A网页重定向到B网页，而B网页又重定向回A网页。这样的循环会导致无限次的重定向，超过了浏览器设定的最大次数，从而出现该错误。 另一种情况是服务器配置错误。服务器可能设置了无限重定向，或者将所有请求都重定向到同一个网页。这样的服务器配置问题也会导致超过最大重定向次数的错误。 解决该问题的方法是检查重定向链，确定是否存在循环重定向，并进行修复。我们可以通过使用网络分析工具，如开发者工具或浏览器扩展程序，来查看请求和重定向的详细信息。 在修复循环重定向时，可能需要更改网页或服务器配置，确保重定向链是正确的且没有循环。同时，需要确保最大重定向次数不超过浏览器或服务器的限制，并适当调整配置。 总结来说，"error exceeded 30 redirects"表示超过了30次重定向的错误。处理该错误需要检查重定向链，确定是否存在循环重定向，并进行相应的修复和配置调整。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值