Logging
1、Scrapy 提供了 log 功能,可以通过 logging 模块使用。
可以修改配置文件 settings.py,任意位置添加下面两行,效果会清爽很多。
LOG_FILE = "meiju.log"
LOG_LEVEL = "INFO"
Log levels
Scrapy 提供 5 层 logging 级别:
CRITICAL - 严重错误(critical)
ERROR - 一般错误(regular errors)
WARNING - 警告信息(warning messages)
INFO - 一般信息(informational messages)
DEBUG - 调试信息(debugging messages)
logging 设置
通过在 setting.py 中进行以下设置可以被用来配置 logging:
LOG_ENABLED 默认: True,启用 logging
LOG_ENCODING 默认: 'utf-8',logging 使用的编码
LOG_FILE 默认: None,在当前目录里创建 logging 输出文件的文件名
LOG_LEVEL 默认: 'DEBUG',log 的最低级别
LOG_STDOUT 默认: False 如果为 True,进程所有的标准输出(及错误)将会被重定向到log 中。
例如,执行 print "hello" ,其将会在 Scrapy log 中显示。