scarpy 使用注意情况

1：关于custom_settings

如果在custom里面设置

DOWNLOADER_MIDDLEWARES或者是

ITEM_PIPELINES；

那就会使用这里面的，如果这里面是空的，但是settings里面设置，那么settings里面的就会失效；

2：

关于爬虫的暂停与重启：

scrapy的爬虫暂停接受的是ctrl +c 信号，而且只能按一次，不然会直接强制关闭进程，导致scrapy的后续状态没有保存，

下次重启爬虫的时候不是从我们所需要的断点开始的；

3：还不知道能不能通过信号这个机制来暂停爬虫