python爬虫status_code状态码报错406或者403

最新推荐文章于 2024-08-12 11:39:50 发布
最新推荐文章于 2024-08-12 11:39:50 发布
阅读量3.5k 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/roc_ever/article/details/105478392
版权

这个是因为发送的请求不被服务器端识别并接受。
方法是修改header
在这里插入图片描述
查看这些信息的方式以firefox为例。
打开要爬去的网站，右键检查元素就打开了inspector
然后点击到network
在这里插入图片描述
在network下找到对应的网址便可以查看到在你的浏览器访问该网站时的情况及其信息，
然后按照你的浏览器访问该网站时的信息填到你的爬虫代码里面的headers里面即可。
一般Cookie是可以不写的，不放心的话可以添加上去，cookie在下面这个位置可以找到
在这里插入图片描述

roc-ever
关注
python_爬虫_python_
09-30
本项目专注于Python爬虫技术，通过编写程序来抓取网页内容和图片，同时也展示了如何对特定的天气网站进行数据抓取。下面将详细阐述Python爬虫的基本概念、常用库及其实现方法。 一、Python爬虫基础 Python爬虫是...
python 爬虫：HTTP ERROR 406
weixin_30690833的博客
05-27 1586
解决方法： 设置了Accept头后解决了，但是还是不知道原因 headers:{ Accept:"text/html, application/xhtml+xml, */*" }原文：https://segmentfault.com/q/1010000006745584 转载于:https://ww...
python爬虫：响应状态码为406解决办法
坚持不懈的大白的博客
02-05 4622
昨天小编在CSDN问答上遇到了如下这个问题 复制了问答上楼主的代码，的确响应状态码为406 后面小编仔细检查了一下这个代码里面的请求头header里面的参数，突然发现这个Accept字段里面的值不是标准的格式，也就是他的值格式有问题。 他的代码里请求头header参数Accept的值为application / json, text / plain, * / * ，可以发现这个值按标准写法应该是这样的。 application/json,text/plain,/,把这个值改成标准写法即可返回状态码200
接口基础知识7：详解status code（响应状态码）
土小帽_Tester的博客
08-12 1241
HTTP状态码用来表达响应状态，由3位数字组成，通过首位数字分为5大类，每类细分状态详情。由状态码可以快速初步判断接口返回的结果。
nested exception is java.lang.NoClassDefFoundError: com/taotao/pojo/TbContentExample$Criteria] with
真正的大师永远怀着一颗学徒的心
06-05 1005
java.lang.NoSuchMethodError
requests发起请求时正常返回数据scrapy请求返回406或者返回数据为空（亲测有效）
ljf520lhy的博客
04-12 634
解决scrapy发起请求返回406和返回数据为空的问题
Http状态码406(Not Acceptable) 错误问题解决方法
whl0071的专栏
09-02 5959
Http状态码406(Not Acceptable) 错误问题解决方法，http客户端也会有解析不了 的mime类型
ximao_python爬虫_
10-01
在IT行业中，Python爬虫是一种常见的技术，用于自动地从互联网上抓取数据。这个名为"ximao_python爬虫_"的项目显然旨在帮助用户抓取网络上的小猫图片，为那些热爱猫咪的“吸猫”人群提供便利。下面将详细解释Python...
Python爬虫库requests获取响应内容、响应状态码、响应头
09-18
### Python爬虫库requests获取响应内容、响应状态码、响应头 #### 一、获取不同类型的响应内容 在使用Python的requests库进行网络爬虫开发时，获取响应内容是核心功能之一。根据响应数据的不同类型，requests提供...
Network_Reptile.rar_爬虫_爬虫 评论_爬虫评论_简单爬虫_评论
09-19
if response.status_code == 200: return response.text else: return None def parse_content(html): soup = BeautifulSoup(html, 'html.parser') content = soup.find('div', {'class': 'content'}) ...
python爬虫案例.docx
05-31
print("请求网页失败，状态码：", response.status_code) ``` 这里需要注意的是，我们检查了HTTP响应的状态码。如果状态码为200，则表示请求成功，可以继续处理；否则，打印出失败信息并停止进一步操作。 ##### ...
python爬虫.rar
05-17
本示例将深入讲解如何使用requests库和BeautifulSoup库来构建一个简单的Python爬虫。 requests库是Python中非常流行的一个HTTP客户端库，它提供了简单易用的接口来发送HTTP请求。首先，我们需要导入requests库，并...
python爬虫学习代码
02-29
print("请求失败，状态码：", response.status_code) ``` 这个例子展示了如何获取一个网站的所有文章标题。实际应用中，你可能需要根据目标网站的具体结构进行调整。 五、反爬与IP代理 为防止过度抓取，许多网站会...
python爬虫.docx
03-01
- `response.status_code == 200`: 如果状态码为200，表示请求成功。 5. **解析HTML文档**: - 使用`BeautifulSoup`解析HTML文本。 - `soup = BeautifulSoup(response.text, 'html.parser')`。 6. **提取数据**:...
python爬虫详解（一看就会）.pdf
05-12
print('请求失败，状态码：', response.status_code) ``` 这段代码会向指定URL发起GET请求，`response.status_code`检查返回的状态码，200表示成功，`response.text`则获取HTML内容。`response.content`则为响应的...
关于请求出现 Status Code: 406 Not Acceptable
我为祖国添砖Java的博客
05-25 1万+
今天在项目开发中，前端页面使用ajax访问springmvc的控制器，发现路径是对的，进入了控制器，但是在数据返回的时候前端就报406的错，搞了一下午不知道什么原因，第二天早上一来思路就清晰了。 状态码406：HTTP协议状态码的一种，表示无法使用请求的内容特性来响应请求的网页。说白了就是后台的返回结果前台无法解析就报406错误。 示例代码中请求代码，后台代码均正常，且有返回信息。如下图： ...
已解决Python爬虫报错＜response [406]＞
努力让自己发光，对的人才能迎着光而来
02-05 9809
已解决Python爬虫报错＜response [406]＞
403状态码----详解
热门推荐
DreamSun的博客
04-13 4万+
在访问网站的时候，会时不时的出现403 Forbidden错误，浏览器会给出403 Forbidden错误提示，在打开Access Error中列出的URL之后, 出现以下错误： 403 Forbidden 　　Access to this resource on the server is denied! 　　Powered By LiteSpeed Web Server 　　LiteSpeed...
python 爬虫怎么获取登录成功的状态码
最新发布
09-07
在Python中，爬虫获取登录成功的状态码通常是在发送带有登录信息的请求后，根据返回的响应来判断的。状态码是服务器响应请求时在HTTP协议中返回的一个数字代码，用来表示请求是否成功，状态码为200表示请求已成功处理。 以下是一个简单的步骤介绍： 1. 使用requests库发送登录请求。首先，需要导入requests库，然后构建登录请求的URL以及必要的登录信息（如用户名和密码）。 ```python import requests # 登录信息 login_data = { 'username': 'your_username', 'password': 'your_password' } # 发送POST请求进行登录 response = requests.post('http://example.com/login', data=login_data) ``` 2. 检查状态码。登录请求完成后，可以通过响应对象的status_code属性获取HTTP状态码。 ```python status_code = response.status_code ``` 3. 判断状态码。根据HTTP状态码判断登录是否成功。例如，如果状态码是200，那么可以认为登录成功；如果状态码是401，则表示认证失败，可能是用户名或密码错误；其他的状态码则可能表示其他类型的错误。 ```python if status_code == 200: print('登录成功') else: print('登录失败，状态码：', status_code) ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值