scrapy 出现INFO: Ignoring response ＜500 xxx＞: HTTP status code is not handled or not allowed

我寻思500是服务器错误，肯定是没有数据返回的。但是：

1. 本机使用curl xxx是有数据返回的。
2. 使用requests.get模块也是有数据的，然后打印了下status_code发现是500.
3. 遂在settings中添加了HTTPERROR_ALLOWED_CODES = [500]发现是ok的。