Python-在多进程中使用logger对象

最新推荐文章于 2024-09-08 02:13:18 发布

StarStudyStart

最新推荐文章于 2024-09-08 02:13:18 发布

阅读量2.4k

点赞数

分类专栏： start 文章标签： python

本文链接：https://blog.csdn.net/StarStudyStart/article/details/122150409

版权

在Python多进程中，使用logger记录进程信息时，由于不同进程片段可能共享同一个logger对象，导致handler重复添加，造成输出异常。例如，任务task 1至task 5中，后续任务会因重复添加handler而多次输出。解决办法是在每个进程执行结束时，及时从logger中移除handler，确保正常输出。

摘要由CSDN通过智能技术生成

Python-多进程中使用logger对象

多进程中使用logger对象，为了记录进程执行时的相关信息，肯定要在进程片段中创建logger对象。

示例代码如下：

#!/usr/bin/bash
# -*-coding: utf-8

import logging
import os
from multiprocessing import Pool, cpu_count


def parallel_run(count):
    logger = logging.getLogger("test")
    logger.setLevel(logging.DEBUG)
    fmt = logging.Formatter("%(name)s %(levelname)s %(asctime)s %(message)s")
    console = logging.StreamHandler()
    console.setLevel(logging.INFO)
    console.setFormatter(fmt)

    file_handler = logging.FileHandler('log_path_{}.log'.format(count))
    file_handler.setLevel(logging.DEBUG)
    file_handler.setFormatter(fmt)

    logger.addHandler(file_handler)
    logger.addHandler(console)
    logger.debug("PID[%s]: Hello world! task: %d" % (os.getpid(), count))
    logger.info("PID[%s]: Hello world! task: %d " % (os.getpid(), count))


if __name__ == &