豆瓣爬虫遇到invalid_request_1284

萧黑紫

于 2024-01-11 14:06:32 发布

阅读量1.8k

点赞数 25

文章标签：爬虫 python

本文链接：https://blog.csdn.net/weixin_46219934/article/details/135527158

版权

在对豆瓣进行爬虫时，得到类似的响应

{"msg": "invalid_request_1284", "code": 1287, "request": "GET \/rexxar\/v2\/movie\/recommend", "localized_message": ""}

只需要把请求头的referer字段放到爬虫代码的headers里面，如下图所示

OK，完美解决。

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

萧黑紫

关注关注

25
点赞
踩
19

收藏

觉得还不错? 一键收藏
2
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

python爬虫报错requests.exceptions.MissingSchema: Invalid URL

qq_39212193的博客

07-09

7018

把开头的 #encoding=gbk改为utf-8

【爬虫篇】通过请求方式爬取豆瓣网页信息

热门推荐

mrs_Boring的博客

03-26

2万+

import requestsimport random#用不同IP去访问要爬去的网站#在https://proxy.coderbusy.com/找到的IP地址（不停刷新即可）pro=['122.152.196.126','114.215.174.227','119.185.30.75']#头信息head={ 'user-Agent':'Mozilla/5.0(Windows NT 10.0;Wi...

{"status":0,"result":{"msg":"invalid request."}}

weixin_43494908的博客

04-10

5888

PostMan提示的错误信息Mark一下今天尝试着用PostMan 调用APICloud云端接口，提示如下问题 {“status”:0,“result”:{“msg”:“invalid request.”}} // 登录 API 发的ajax请求， function fnLogin() { var username=$api.byId('username'); var passwo...

爬取豆瓣电视剧数据

sugar

08-07

2878

这里解决的在爬取豆瓣网站时候值爬取到了一下内容 {"msg": "invalid_request_1284", "code": 1287, "request": "GET \/rexxar\/v2\/subject_collection\/tv_american\/items", "localized_message": ""}

豆瓣电影及电视剧影视剧信息爬取

06-06

10. **实战经验**：实践是检验理论的最好方式，通过实际爬取豆瓣电影和电视剧数据，可以深入了解网络爬虫的完整流程，从需求分析、设计、编码到测试。在项目实施过程中，开发者可能需要面对各种挑战，如动态加载...

python requests库爬取豆瓣电视剧数据并保存到本地详解

09-18

在本教程中，我们将深入探讨如何使用requests库来爬取豆瓣网站上的电视剧数据，并将这些数据保存到本地文本文件中。首先，我们需要找到豆瓣提供的API接口，这通常可以通过浏览器的开发者工具中的网络面板抓包得到。...

request-xml：Laravel的Request类缺少XML支持

02-06

Laravel的Request类缺少XML支持。该软件包旨在与框架一起使用。安装通过composer安装： composer require mtownsend/request-xml 注册服务提供商对于Laravel 5.4及更低版本，将以下行添加到config/app.php ： /* * Package Service Providers... */ Mtownsend \ RequestXml \ Providers \ RequestXmlServiceProvider ::class, 对于Laravel 5.5及更高版本，该软件包将自动为您注册提供商。使用流

python爬虫库scrapy_使用Python爬虫Scrapy框架爬取数据

weixin_32024145的博客

01-14

658

时隔数月，国庆期间想做个假期旅游的分析展示。1、通过Python爬取旅游网站上数据，并存储到数据库2、通过Echart/FineReport/Superset等数据分析工具对数据展示环境：Win10Python：3.7Scrapy：1.5.1使用Pycharm开发Scrapy文档教程中有Scrapy的安装指导，不过在Windows下安装当初确实遇到许多坑使用方法大致是进入项目的workspace使...

think-swoole tp6 easywechat 支付回调出现 Invalid request XML.

何欢的博客

08-24

2935

vendor/overtrue/wechat/src/Payment/Notify/Handler.php 把$this->app['request']->getContent(); 改成think\facade\Request::getContent(); 最后重启swoole就可以了。

模拟Ajax请求爬取4000部豆瓣电影

Giyn

07-13

2108

进入准备爬取的网页：编写一个获取页面的函数： def get_html(url, proxies): """ @功能: 获取页面 @参数: URL链接、代理IP列表 @返回: 页面内容 """ failed = 1 # 请求失败参数 headers = [ {'User-Agent': "Mozilla/5.0 (X11; U; Linux x86_64; zh-CN; rv:1.9.2.10) Gecko/20

XMLHttpRequest': Invalid uve无效的问题

lihuanmei258的博客

04-01

436

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 Uncaug...

数据提取（JSON）

weixin_54964904的博客

07-04

2096

文章目录一一由于把json中的数据转化成python内建数据类型很简单，所以我们在爬虫中尽量使用能返回json数据的url，就会尽量使用这种url。json是一种轻量级的数剧交互格式。

Git和GitHub常识

SuperLillitH的博客

05-25

804

什么是GitGit是一个免费、开源的版本控制软件什么是版本控制系统版本控制是一种记录一个或若干个文件内容变化，以便将来查阅特定版本修订情况得系统。 Ø 系统具体功能记录文件的所有历史变化随时可恢复到任何一个历史状态多人协作开发或修改错误恢复什么是GithubGithub是全球最大的社交编程及代码托管网站（https://github.com/）。Github可以托管各种git库，并提供一个web...

豆瓣电影网API，2020.08.20日更新

电子厂员工

08-21

4898

网上找到的douban api，目前老版本的接口 http://api.douban.com 已经都失效了最新的API只需要将 http://api.douban.com 替换为 http://t.yushu.im 即可 ## 豆瓣API 说明新版本接口已由 http://api.douban.com 更改为 http://t.yushu.im #### 正在热映接口示例 ```python #老版 http://api.douban.com/v2/movie/in_theaters?.

Python爬虫requests请求无响应的解决方法

07-02

2369

在使用Python进行网络爬取数据时，requests库是一个经常使用的工具。但是，在实际应用中，可能会出现请求无响应的情况。这种情况可能由于网站服务器访问量大、网络延迟、反爬虫策略等多种原因导致。那么，如何解决这个问题呢？本文将详细介绍一些解决方法。以上是解决请求无响应问题的主流方法。在实际使用中，我们可以根据具体情况选择最适合的解决方案。Python爬虫requests请求无响应的解决方法。

invalid_request_action

06-07

invalid_request_action 是一个错误提示，意思是无效的请求操作。这通常是在网站或应用程序中使用API时出现的错误提示。这个错误提示表明请求中的操作不被支持或不正确，通常是因为请求中包含了无效的参数或参数值。例如，在请求API时，如果使用了错误的HTTP方法，或者请求中缺少必要的参数，就会导致 invalid_request_action 错误提示。如果遇到这个错误，需要检查请求的参数和参数值是否正确，并确保使用了正确的HTTP方法。如果无法解决问题，可以查看API文档或联系API提供商以获取更多帮助。