python logging 遇到的坑 日志重复打印问题的解决方法

python 中 logging模块 假如遇到 多线程 或者 多进程 或者在web框架中自定义logging的话（一个请求就是一个独立的线程）

非常容易 重复打印日志 和造成 内存崩溃

所以

解决方法如下：

重写日志方法 用类：

class Log():

import logging

def __init__(self):

self.logger = logging.getLogger(__name__)

# 以下三行为清空上次文件

# 这为清空当前文件的logging 因为logging会包含所有的文件的logging

logging.Logger.manager.loggerDict.pop(__name__)

# 将当前文件的handlers 清空

self.logger.handlers = []

# 然后再次移除当前文件logging配置

self.logger.removeHandler(self.logger.handlers)

# 这里进行判断，如果logger.handlers列表为空，则添加，否则，直接去写日志

if not self.logger.handlers:

# loggger 文件配置路径

self.handler = logging.FileHandler(os.getcwd() + '/logger/%s_log/%s_score.log' % (str(dt.date.today()), str(dt.date.today())))

# logger 配置等级

self.logger.setLevel(logging.DEBUG)

# logger 输出格式

formatter = logging.Formatter('%(asctime)s - %(levelname)s - %(name)s - %(message)s')

# 添加输出格式进入handler

self.handler.setFormatter(formatter)

# 添加文件设置金如handler

self.logger.addHandler(self.handler)

# 以下皆为重写方法 并且每次记录后清除logger

def info(self,message=None):

self.__init__()

self.logger.info(message)

self.logger.removeHandler(self.logger.handlers)

def debug(self,message=None):

self.__init__()

self.logger.debug(message)

self.logger.removeHandler(self.logger.handlers)

def warning(self,message=None):

self.__init__()

self.logger.warning(message)

self.logger.removeHandler(self.logger.handlers)

def error(self,message=None):

self.__init__()

self.logger.error(message)

self.logger.removeHandler(self.logger.handlers)

def critical(self, message=None):

self.__init__()

self.logger.critical(message)

self.logger.removeHandler(self.logger.handlers)

亲测有效

另外 模块尤其注意 例如web请求的时候 在接口处调用 然后引导传参 千万别做全局变量