在spider中 主动关闭爬虫:
self.crawler.engine.close_spider(self, “cookie失效关闭爬虫”)
在pipeline 和downloadermiddlewares 主动关闭爬虫:
spider.crawler.engine.close_spider(spider, “全文结束关闭爬虫”)
在spider中 主动关闭爬虫:
self.crawler.engine.close_spider(self, “cookie失效关闭爬虫”)
在pipeline 和downloadermiddlewares 主动关闭爬虫:
spider.crawler.engine.close_spider(spider, “全文结束关闭爬虫”)
转载于:https://www.cnblogs.com/du-jun/p/11447327.html