我逐个都检查了一遍发现都不是上述问题,最后一点点排查后终于找到问题,坑爹!
总要的事情说三遍:
爬虫类名不规范导致;
爬虫类名不规范导致;
爬虫类名不规范导致;
原因是爬虫类名不是用命令创建的,因为后期手动改过,所以自己想当然的手动改了名字;
例如:
常规情况创建,使用命令
scrapy genspider baidu "baidu.com"
这个时候新建出来的没问题,部署都是正常的。
命令行新建的是啥就是啥,最好不要改了,不满意再重新创建。
如果是你手动改的,可能英文驼峰规范对不上导致问题,其它代码都正常死活识别不出来。坑了两天才解决;无语死了;