pytorch里如何使用logger保存训练参数日志?

该博客介绍了如何使用Python的logging模块来记录并保存训练过程中关键指标如loss和accuracy。通过定义一个get_logger函数,可以同时将日志输出到终端和指定文件中。在训练脚本中,通过调用get_logger创建日志器,并在每个epoch结束后更新并记录loss和accuracy。这种方法有助于跟踪和分析模型的训练进度。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

如果是指保存训练过程中的loss,accuracy等metric的话,可以采用下面的方法:


import logging

def get_logger(filename, verbosity=1, name=None):
    level_dict = {0: logging.DEBUG, 1: logging.INFO, 2: logging.WARNING}
    formatter = logging.Formatter(
        "[%(asctime)s][%(filename)s][line:%(lineno)d][%(levelname)s] %(message)s"
    )
    logger = logging.getLogger(name)
    logger.setLevel(level_dict[verbosity])

    fh = logging.FileHandler(filename, "w")
    fh.setFormatter(formatter)
    logger.addHandler(fh)

    sh = logging.StreamHandler()
    sh.setFormatter(formatter)
    logger.addHandler(sh)

    return logger

可以在输出到终端的同时输出到filename文件中。

使用时在训练脚本train.py中写入:

logger = get_logger('/path/to/exp/exp.log')

logger.info('start training!')
for epoch in range(MAX_EPOCH):
    ...
    loss = ...
    acc = ...
评论 8
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值