requests.exceptions.TooManyRedirects: Exceeded 30 redirects.

原创 2017年08月11日 16:38:54

在使用get或者post的爬虫的时候可能会报错:
raise TooManyRedirects(‘Exceeded %s redirects.’ % self.max_redirects, response=resp)
requests.exceptions.TooManyRedirects: Exceeded 30 redirects.’

原因
因为header头的改变,例如爬虫爬取豆瓣页面的时候,登录header头里面的Host:www.douban.com,但是登录成功以后爬取电影页面的相关内容的时候,Host:movie.douban.com

可以根据google查看header头的改变,这里可以参考百度http://jingyan.baidu.com/article/27fa73268ff4e146f8271f33.html

版权声明:本文为博主原创文章,未经博主允许不得转载。

相关文章推荐

pache 显示这样的错误时 "Request exceeded the limit of 10 internal redirects due to probable configuration er

apache 显示这样的错误时 "Request exceeded the limit of 10 internal redirects due to probable configuration ...

mysql异常com.mysql.jdbc.exceptions.jdbc4.MySQLTransactionRollbackException: Lock wait timeout exceeded

问题场景:应用调用数据库mysql提示: com.mysql.jdbc.exceptions.jdbc4.MySQLTransactionRollbackException: Lock wait t...

解决Fatal error: Maximum execution time of 30 seconds exceeded in...的问题

今天做内容采集的时候,因为循环内容较多,程序运行时间太长,所以出现【错误提示:Fatal error: Maximum execution time of 30 seconds exceeded in...

报错:Maximum execution time of 30 seconds exceeded解决方法

今天遇到报错,由于有个特殊请求的等待时间很难做到在30s内。 就会出现Maximum execution time of 30 seconds exceeded这个错误。 ...

解决php网页运行超时问题:Maximum execution time of 30 seconds exceeded

Fatal error: Maximum execution time of 30 seconds exceeded in C:\Inetpub\wwwroot\ry.PHP on line 11

php Fatal error: Maximum execution time of 30 seconds exceeded in 问题的解决方案

php  Fatal error: Maximum execution time of 30 seconds exceeded in 问题的解决方案: 转载自:www.alixixi.com/pro...

Maximum execution time of 30 seconds exceeded

Maximum execution time of 30 seconds exceeded 错误解决方案.简单总结一下解决办法:报错一:内存超限,具体报错语句忘了,简单说一下解决办法。利用循环分批导入...

Streams, pipes, and redirects

IBM开发网站上关于管道重定向的讲解

1.4.2 HTTP ERRORS AND REDIRECTS(HTTP 错误和重定向)

abort()函数能直截了当的产生一个HTTP错误页面。 from bottle import route, abort @route('/restricted') def restricted():...

Remove Google Redirects

  • 2013-01-23 23:01
  • 26KB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)