训练日志——logging

基础使用

日志的6个级别

打印日志

import logging

logging.debug('调试日志')
logging.info('消息日志')
logging.warning('警告日志')
logging.error('错误日志 ')
logging.critical('严重错误日志')

注意：默认情况下，logging的输出级别是warning级别

修改打印级别

import logging

logging.basicConfig(
    level=logging.DEBUG,  
    format='%(asctime)s %(name)s [%(pathname)s line:%(lineno)d] %(levelname)s %(message)s]', 
    datefmt='%Y-%m-%d %H:%M:%S',   
    filename='demo.log',
    filemode='w') 

level是指定日志的打印级别
format是日志输出格式

%(name)s           Logger的名字(get1ogger时指定的名字）
%(levelno)d         数字形式的日志级别
%(levelname)s       文本形式的日志级别
%(pathname)s        调用日志输出位置的完整路径名
%(filename)s        调用日志输出的文件名
%(module)s          调用日志输出日志的模块名
%(funcName)s        调用日志输出日志的函数名
%(1ineno)d          调用日志输出两数的语句所在的代码行
%(created)f         当前时间，用UNIx标准的表示时间的浮 点数表示
%(relativecreated)d 输出日志信息时的，自Loqger创建以 来的毫秒数
%(asctime)s         字符串形式的当前时间，默认格式是“2023-10-05 12:13:33,231”
%(thread)d          线程ID，可能没有
%(threadName)s      线程名，可能没有
%(process)d         进程ID，可能没有
%(message)s         用户输出的消息

datefmt是修改 asctime 的时间格式
filename是若不指定此配置，默认打印在控制台； 指定后，打印到指定路径文件
filemode是文件写入方式：1.‘w’：覆盖文件中现有数据 2.‘a’ : 追加到文件末尾

高级应用

logging的组成

记录器Loggers

# 实例化一个记录器，并将记录器的名字设为 'training_log'
logger = logging.getLogger(name='training_log')

# 设置 logger 的日志级别为 info
logger.setLevel(logging.INFO)

如果 logging.getLogger 不设置参数name 的话，默认记录器的名字为 ‘root’

处理器Handlers

# 1、创建一个handler，该handler往console打印输出
console_handler = logging.StreamHandler() 
# 2、设置 console_handler 的日志级别为 debug
console_handler.setLevel(logging.DEBUG) 

# 3、再创建一个handler，该handler往文件中打印输出
# 未给file_handler指定日志级别，它会默认使用logger 的日志级别 
file_handler = logging.FileHandler(filename='demo.log ') 

过滤器Filter

flt = logging.Filter('training.loss')

formatter格式

# 创建一个标准版日志打印格式
standard_formatter = logging.setFormatter('%(asctime)s %(name)s [%(pathname)s line:(lineno)d] %(levelname)s %(message)s]')

# 创建一个简单版日志打印格式
simple_formatter = logging.setFormatter('%(levelname)s %(message)s]')

创建关联

# 让 console_handler 使用 标准版日志打印格式
console_handler.setFormatter(standard_formatter)
# 让 file_handler 使用 标准版日志打印格式
file_handler.setFormatter(simple_formatter)

# 给记录器绑定上 console_handler 和 file_handler
logger.addHandler(console_handler)
logger.addHandler(file_handler)

#过滤器
logger.addFilter(flt)

打印日志

logger.debug('调试日志')
logger.info('消息日志')
logger.warning('警告日志')
logger.error('错误日志 ')
logger.critical('严重错误日志')

配置文件

配置文件log.conf

[loggers]
keys=root, logger01

[handlers]
keys=console_handler,file_handler

[formatters]
keys=standard_formatter,simple_formatter

[logger_root]
level=DEBUG
handlers=file_handler

[logger_logger01]
level=INFO
handlers=console_handler
qualname=mylogger
propagate=0

[handler_console_handler]
class=StreamHandler
args=(sys.stdout,)
formatter=standard_formatter

[handler_file_handler]
level=DEBUG
class=FileHandler
args=("demo.log", 'w')
formatter=simple_formatter

[formatter_standard_formatter]
format=%(asctime)s %(name)s [%(pathname)s line:(lineno)d] %(levelname)s %(message)s

[formatter_simple_formatter]
format=%(levelname)s %(message)s

demo.py

import logging.config

logging.config.fileConfig('demo.conf')

root_logger = logging.getLogger()
my_logger = logging.getLogger('mylogger')

root_logger.debug('调试日志')
root_logger.info('消息日志')
root_logger.warning('警告日志')
root_logger.error('错误日志 ')
root_logger.critical('严重错误日志')

my_logger.debug('调试日志')
my_logger.info('消息日志')
my_logger.warning('警告日志')
my_logger.error('错误日志 ')
my_logger.critical('严重错误日志')

参考

参考了b站的Enzo大佬做的笔记，有关例子可见其网站