使用scrapy框架爬取网页数据时,分明已经获取到数据了,日志也确认了这点
那问题肯定是出在管道上了,可是文件被创建,却没被写入是什么鬼
翻来覆去找了半个多小时...一点脾气都没有了的时候
被找来帮忙的大佬发现了端倪
process_item方法名被我写成了process_spider
吐血。
使用scrapy框架爬取网页数据时,分明已经获取到数据了,日志也确认了这点
那问题肯定是出在管道上了,可是文件被创建,却没被写入是什么鬼
翻来覆去找了半个多小时...一点脾气都没有了的时候
被找来帮忙的大佬发现了端倪
process_item方法名被我写成了process_spider
吐血。