1.执行了scrapy crawl命令,但是没有执行parse方法
setting中设置 ROBOTSTXT_OBEY = False
2.显示中文乱码
setting中设置 FEED_EXPORT_ENCODING = ‘utf-8’
或者,设置终端输入编码
sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding=‘gb18030’)
3.DownMiddleware中返回一个新生成的Response实例,必须使用其子类,重写相应的方法
https://segmentfault.com/a/1190000018449717?utm_source=tag-newest