scrapy(一):数据类型Item

scrapy中有一个类Item(类似于一个字典),我们在项目中要为爬取到的内容设置一个字段,类似于flask中的Model,不过scrapy设置字段简单,因为没有那么多的字段类型,只简单的声明Field()即可。项目中第一步是 创建Item:

from scrapy import Item,Field
class Price(Item):
    name=Field()
    price=Field()

既然继承的Item类似于一个字典,那么就可以进行字典的一些常规操作。比如设置字段的值,获取字段的值,枚举字段的值,复制类的实例。

price=Price(name='go',price=200)  #创建实例
price[name]   #获取值
price[price]  #获取字段的值
price_2=Price(price)   复制类的实例

当然,类也可以继承,在继承的过程中便可以使Item的字段进行拓展。

总之来说,Item就是一种为我们爬来的非结构性数据设置了一种结构型的简单容器,我们要提前为其设置字段(即结构)。比如我们要爬取图书的书名和价格,就设置两个字段name,price。打个比方就是一江春水,我们把它盛在特定的瓶瓶罐罐中

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值