scrapy 通过ctrl+c 信号可以安全的关闭爬虫,当spider 进程接收该信号时候,爬虫不会再调度新的任务,但是会把正在进行的任务处理完毕在关闭spider,并且正确调用spider_close方法 Linux : 找到spider进程id,使用kill -2 关闭爬虫 ps -ef|grep spidername|grep -v grep| awk '{print $2}' |xargs kill windows: 目前测试不支持