首先要有一个scrapy项目
这里用我的爬取知乎用户信息的项目来做例子：https://github.com/oldbig-carry/zhihu_user
在cmd上cd 进入项目
然后在项目目录下创建 记录文件：remain/001
然后输入：scrapy crawl zhihu -s JOBDIR=remain/001
回车运行就行了
scrapy爬虫的暂停与重启
最新推荐文章于 2024-06-28 15:39:28 发布
本文通过实例介绍了如何在Scrapy项目中实现爬虫的暂停与重启。使用命令`scrapy crawl zhihu -s JOBDIR=remain/001`启动并记录爬取状态，通过`ctrl+c`暂停爬虫。要继续爬取，只需再次输入相同命令。如需重新开始，可更改记录文件名，例如`002`。
最低0.47元/天 解锁文章
2942
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
