scrapy错误之KeyError: 'XXX does not support field: xxx'

最新推荐文章于 2024-01-25 14:52:15 发布

滇北小生

最新推荐文章于 2024-01-25 14:52:15 发布

阅读量1w

点赞数 5

分类专栏： scrapy 文章标签： scrapy python爬虫 scrapy-ite

本文链接：https://blog.csdn.net/userhr/article/details/59614926

版权

scrapy 专栏收录该内容

4 篇文章 0 订阅

订阅专栏

出现这个错误一般是spider把item里面的字段写错了，如

items.py文件

class Volume(scrapy.Item):

    volumeName = scrapy.Field()
    volumeId = scrapy.Field()
    bookId = scrapy.Field()

而我在spider里面却错误的把volumeName写成volumeNam，这样的话就会报这样的错误：

v = Volume()
v['volumeNam']=x.xpath(……)

这样的话一定会报这个错误，因为v[‘volumeNam’]写错了，正确的是v[‘volumeName’]

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

滇北小生

关注关注

5
点赞
踩
1

收藏

觉得还不错? 一键收藏
1
评论
scrapy错误之KeyError: 'XXX does not support field: xxx'

scrapy错误之KeyError: 'XXX does not support field: xxx'
复制链接

扫一扫

专栏目录

scrapy报错之 ‘’Item does not support field：.......“

Beyond_F4的博客

03-29

1万+

scrapy 运行报错 does not support field：xxxxxxx究其原因是因为不需要保存字段，所以在item中没有定义field，只是象征性的写了一个title而在spider中用却到了yield item，系统检测出yield出的变量在item中没有提前定义，所以它是拒绝的正确做法是将需要yield的变量定义在item.py中然后就可正常运行...

两种方案成功解决 KeyError: 'xxx does not support field: _id'

无梦生7的博客

04-22

7023

目录错误代码了解item错误原因解决方法错误代码 KeyError: ‘xxx does not support field: _id’ 了解item 首先我们先简单了解一下 item item 是保存爬取到的数据的容器；其使用方法和python字典类似，并且提供了额外保护机制来避免拼写错误导致的未定义字段错误。 Item 对象是种简单的容器，保存了爬取到得数据。其提供了类似于字典(...

1 条评论您还未登录，请先登录后发表或查看评论

KeyError: xxxItem does not support field: xxx‘

weixin_63566461的博客

04-10

349

KeyError: xxxItem does not support field: xxx'

Scrapy的基本用法

qq_35170267的博客

01-07

1239

网上有很多关于Scrapy的安装方式，这里不再说了。新建一个爬虫项目 scrapy startproject quotestutorial 利用上面的命令新建一个scrapy项目,项目名是quotestutorial，因为我爬取的网址是http://quotes.toscrape.com,这是一个格言的网址。现在就可以在当前目录看到一个名为quotestutorial的文件夹。新建一个爬虫 ...

Scrapy框架在写入MongoDB数据库时出现KeyError: 'xxx does not support field: _id'解决方法

Trial & Error

02-12

1862

在items.py里面加上 _id = scrapy.Field() 在主体里面提取信息时，尽量避免_id产生重复，可以配合random库一起使用这里是上一篇的一个例子 # -*- coding: utf-8 -*- import scrapy from scrapy.linkextractors import LinkExtractor from scrapy.spiders import...

KeyError: ‘XXX does not support field: xxx‘ scrapy

qq_42611316的博客

01-25

419

记录自己的一个错误，记得写括号，scrapy.Field()是个方法。

解决Scrapy框架在写入MongoDB数据库时出现KeyError: 'xxx does not support field: _id'的几种方法

爱学习的JackYang的博客

04-27

1203

KeyError: 'xxx does not support field: _id scrapy python

两种方案成功解决 KeyError: ‘xxx does not support field: _id’

12-21

KeyError: ‘xxx does not support field: _id’ 了解item 首先我们先简单了解一下 item item 是保存爬取到的数据的容器；其使用方法和python字典类似，并且提供了额外保护机制来避免拼写错误导致的未定义字段...

初学者scrapy框架爬取数据不成功，出现ERROR: Spider error processing错误问题的解决方法

05-11

初学者scrapy框架爬取数据不成功，出现ERROR: Spider error processing错误问题的解决方法

scrapy-selenium:Scrapy中间件使用Selenium处理javascript页面

04-30

Scrapy中间件可使用Selenium处理javascript页面。安装 $ pip install scrapy-selenium 您应该使用python> = 3.6 。您还将需要一种与Selenium。配置添加要使用的浏览器，驱动程序可执行文件的路径，以及将要传递...

scrapy-doc-zh:Scrapy 1.6 文档

04-27

Scrapy 1.6 中文文档原文：协议：软件开发往往是这样：最开始的 90% 代码占用了开始的 90% 的开发时间；剩下 10% 代码同样需要 90% 的开发时间。——Tom Cargill 贡献指南项目当前处于校对阶段，请查看，并在中...

scrapy-rotating-proxies:与Scrapy一起使用多个代理

05-06

安装pip install scrapy-rotating-proxies用法将带有代理列表的ROTATING_PROXY_LIST选项添加到settings.py： ROTATING_PROXY_LIST = [ 'proxy1.com:8000', 'proxy2.com:8031', # ...]或者，您可以指定一个ROTATING_...

Hardware Engineering

最新发布

07-06

Hardware Engineering Resources This document provides a curated list of resources for learning about hardware engineering, including books, online courses, websites, professional organizations, and online communities. Whether you're a beginner or looking to deepen your knowledge, these resources cover a wide range of topics in hardware engineering.

MongoDB的Linux安装、基本操作、可视化、实验源码与报告文档.docx

07-05

安装MongoDB：下载MongoDB的最新稳定版本，可以通过官方网站或者命令行下载。将下载的压缩文件解压至指定目录，如 /usr/local/mongodb。创建数据存储目录，如 /data/db，确保对该目录有读写权限。设置环境变量：在 ~/.bashrc 或者 ~/.zshrc 文件中添加以下内容： export PATH=/usr/local/mongodb/bin:$PATH 执行命令使配置生效： source ~/.bashrc 启动MongoDB，执行以下命令： mongod 基本操作：启动MongoDB之后，可以通过命令行连接到MongoDB实例： mongo 创建数据库： use mydatabase 创建集合并插入文档： db.mycollection.insertOne({ name: "John", age: 30 }) 查询文档： db.mycollection.find() 可视化工具：可以使用MongoDB官方提供的可视化工具Compass，也可以使用第三方工具如Robo3T或者Studio 3T来管理Mong

宏基笔记本主板Acer Chromebook C730 Quanta ZHQ v1.0维修图纸

07-05

宏基笔记本主板Acer Chromebook C730 Quanta ZHQ v1.0维修图纸

EY-零售和商业银行业务中的生成式人工智能（英文）(1).pdf

07-05

EY-零售和商业银行业务中的生成式人工智能（英文）(1).pdf

Axure各行业可视化大屏高保真原型（60款）.rp

07-05

大屏原型主要包括智慧城市、一网统管、城市大脑、一网通办、数字政府、企业数字化转型、大数据治理、大数据可视化、数据安全、数字乡村、乡村振兴、田园综合体、特色小镇、智慧园区、智慧楼宇、智慧政务、智慧校园、智慧教育、智慧高校、区块链、人工智能、数据中台、新基建、数字孪生、智慧医疗、智慧医院、智慧交通、智慧公交、5G行业应用、数据中台、业务中台、智能制造、数字化工厂、智慧工厂、工业4.0、智能建筑、智慧工地、智慧港口、智慧矿山、智慧展馆、智慧体育馆、应急管理、智慧水利、智慧水务、智慧供水、智慧排水、智慧热力、海绵城市、智慧市政、垃圾分类、智慧环卫、智慧菜市场农贸市场、智慧公厕、食品溯源、智慧安监、安全生产、智慧财政、智慧人社、智慧公安、智慧营区、智慧民生、食品药品安全、明厨亮灶、雪亮工程、平安城市、智慧管廊、智慧管线、智慧路灯、IOT物联网、NB-IOT技术应用、智慧公路、智慧车站、智慧税务、智慧服务大厅、市长热线、市民服务、智慧法院、智慧检察院、智慧司法、智慧检务、智慧园林、智慧景区、智慧旅游、智慧公园等行业，物超所值！

自动化测试崛起（AI歌曲）

07-05

这是一首亲写歌词，并有sunoAi进行编曲演唱的歌，确实厉害。

KeyError: 'LanleicaipiaoItem does not support field: qih_ao'

04-03

This error is caused when trying to access a field in a Scrapy item that does not exist. In this case, it seems that the field "qih_ao" is not defined in the "LanleicaipiaoItem" item. To fix this error, you need to make sure that the field "qih_ao" is defined in your item class. You can define it by adding the following line to your "LanleicaipiaoItem" class: qih_ao = scrapy.Field() Make sure to replace "qih_ao" with the actual name of the field you want to define. Once you have defined the field, you should be able to access it without getting the KeyError.

“相关推荐”对你有帮助么？

非常没帮助
没帮助
一般
有帮助
非常有帮助

提交