Scrapy框架学习笔记二

Scrapy框架学习笔记二

关于Items

定义

它是用来装载数据的容器,给Spider使用并返回给Item Pipeline(管道)使用的

作用

起初,我刚开始接触时,还很纳闷,这有啥用啊,什么提取数据我都会在Spider里提取的,要它何用~~~~
结果,我耐下心看下去领悟了,它是给Item Pipeline(管道)用的.
在Spider里填充好Item后,它就会从一节一节管道流过去,用来便捷,高效的实现你想要的功能,比如:流过图片管道(图片格式化和下载到本地),流过数据库管道(保存到数据库),流过邮件管道(….)等等任何自定义的管道
是不是很强大啊!

使用

这么强大的特性不用,你当我傻啊

那么怎么使用呢

• 在项目下的Item.py文件里实现你的Item类
• 在Spider里的Response回调函数实例化Item对象,填充数据到里面,然后返回Item对象

就这么简单