scrapy-使用item封装数据

1.用户提供了两个类,分别是item基类和Field类。其中Field用来描述自定义数据包含哪些数据

2.为什么要使用item来封装数据,直接使用字典简单粗暴他不香吗?下面介绍使用item封装数据的优势。

当你使用一般的字典的形式来组织管理数据时,很有可能因为笔误而导致莫名其妙的错误,但是当你使用Item时会报错,便于你发现问题
方便使用与阅读源代码,当你再items.py中写好了字段管理代码时,你在Spider中只需要引入文件,然后创建对象,之后便可以像使用字典一样的方法使用Itme来组织管理数据了

3.Item的使用方法

1.确保你已经正确的配置好了爬虫项目和爬虫文件。

2.在Items.py中进行如下操作:

class className(scrapy.Item): #这里是items基类,括号前面是类的名字
    # define the fields for your item here like:
    # name = scrapy.Field()
  	 field name = scrapy.Field() #使用field创建一个管理字段,前面的变量名是自定义的
	 field name= scrapy.Field()
     field name = scrapy.Field()

3.在spider.py中引入items.py文件:

from ..items import className 这里…代表items文件夹和spider.py同处于一个文件夹下,className就是我们创建的组织管理数据的类

4.创建一个items对象:

example = className(),以后我们就可以通过example来管理数据了。

5.用法举例:

example['field name'] = name,这里就表示把name这个数据写入到field中的field name字段。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

山河锦绣放眼好风光

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值