Python日志输出——loging模块

最新推荐文章于 2024-07-01 13:34:28 发布
最新推荐文章于 2024-07-01 13:34:28 发布
阅读量867 收藏 3
点赞数 1
分类专栏： Python成长之路

1. logging介绍

        Python的logging模块提供了通用的日志系统，可以方便第三方模块或者是应用使用。这个模块提供不同的日志级别，并可以采用不同的方式记录日志，比如文件，HTTP GET/POST，SMTP，Socket等，甚至可以自己实现具体的日志记录方式。

        logging模块与log4j的机制是一样的，只是具体的实现细节不同。模块提供logger，handler，filter，formatter。

        logger：提供日志接口，供应用代码使用。logger最长用的操作有两类：配置和发送日志消息。可以通过logging.getLogger(name)获取logger对象，如果不指定name则返回root对象，多次使用相同的name调用getLogger方法返回同一个logger对象。

        handler：将日志记录（log record）发送到合适的目的地（destination），比如文件，socket等。一个logger对象可以通过addHandler方法添加0到多个handler，每个handler又可以定义不同日志级别，以实现日志分级过滤显示。

        filter：提供一种优雅的方式决定一个日志记录是否发送到handler。

        formatter：指定日志记录输出的具体格式。formatter的构造方法需要两个参数：消息的格式字符串和日期字符串，这两个参数都是可选的。

        与log4j类似，logger，handler和日志消息的调用可以有具体的日志级别（Level），只有在日志消息的级别大于logger和handler的级别。


import logging  
import logging.handlers  
  
LOG_FILE = 'tst.log'  
  
handler = logging.handlers.RotatingFileHandler(LOG_FILE, maxBytes = 1024*1024, backupCount = 5) # 实例化handler   
fmt = '%(asctime)s - %(filename)s:%(lineno)s - %(name)s - %(message)s'  
  
formatter = logging.Formatter(fmt)   # 实例化formatter  
handler.setFormatter(formatter)      # 为handler添加formatter  
  
logger = logging.getLogger('tst')    # 获取名为tst的logger  
logger.addHandler(handler)           # 为logger添加handler  
logger.setLevel(logging.DEBUG)  
  
logger.info('first info message')  
logger.debug('first debug message')


输出： 

2012-03-04 23:21:59,682 - log_test.py:16 - tst - first info message   
2012-03-04 23:21:59,682 - log_test.py:17 - tst - first debug message

Format Description
%(name)sName of the logger (logging channel).
%(levelno)sNumeric logging level for the message (DEBUG, INFO, WARNING, ERROR, CRITICAL).
%(levelname)sText logging level for the message ('DEBUG', 'INFO', 'WARNING', 'ERROR', 'CRITICAL').
%(pathname)sFull pathname of the source file where the logging call was issued (if available).
%(filename)sFilename portion of pathname.
%(module)sModule (name portion of filename).
%(funcName)sName of function containing the logging call.
%(lineno)dSource line number where the logging call was issued (if available).
%(created)fTime when the LogRecord was created (as returned by time.time()).
%(relativeCreated)dTime in milliseconds when the LogRecord was created, relative to the time the logging module was loaded.
%(asctime)sHuman-readable time when the LogRecord was created. By default this is of the form “2003-07-08 16:49:45,896” (the numbers after the comma are millisecond portion of the time).
%(msecs)dMillisecond portion of the time when the LogRecord was created.
%(thread)dThread ID (if available).
%(threadName)sThread name (if available).
%(process)dProcess ID (if available).
%(message)sThe logged message, computed as msg % args.

        这个是摘自官网，提供了很多信息。

2. logging的配置

        logging的配置可以采用python代码或是配置文件。python代码的方式就是在应用的主模块中，构建handler，handler，formatter等对象。而配置文件的方式是将这些对象的依赖关系分离出来放在文件中。比如前面的例子就类似于python代码的配置方式。这里看一下采用配置文件的方式。

import logging  
import logging.config  
  
logging.config.fileConfig("logging.conf")    # 采用配置文件  
  
# create logger  
logger = logging.getLogger("simpleExample")  
  
# "application" code  
logger.debug("debug message")  
logger.info("info message")  
logger.warn("warn message")  
logger.error("error message")  
logger.critical("critical message")

 loggin.conf采用了模式匹配的方式进行配置，正则表达式是r'^[(.*)]$'，从而匹配出所有的组件。对于同一个组件具有多个实例的情况使用逗号‘，’进行分隔。对于一个实例的配置采用componentName_instanceName配置块。使用这种方式还是蛮简单的。

[loggers]  
keys=root,simpleExample  
  
[handlers]  
keys=consoleHandler  
  
[formatters]  
keys=simpleFormatter  
  
[logger_root]  
level=DEBUG  
handlers=consoleHandler  
  
[logger_simpleExample]  
level=DEBUG  
handlers=consoleHandler  
qualname=simpleExample  
propagate=0  
  
[handler_consoleHandler]  
class=StreamHandler  
level=DEBUG  
formatter=simpleFormatter  
args=(sys.stdout,)  
  
[formatter_simpleFormatter]  
format=%(asctime)s - %(name)s - %(levelname)s - %(message)s  
datefmt=

 在指定handler的配置时，class是具体的handler类的类名，可以是相对logging模块或是全路径类名，比如需要RotatingFileHandler，则class的值可以为：RotatingFileHandler或者logging.handlers.RotatingFileHandler。args就是要传给这个类的构造方法的参数，就是一个元组，按照构造方法声明的参数的顺序。

        输出：

2012-03-06 00:09:35,713 - simpleExample - DEBUG - debug message  
2012-03-06 00:09:35,713 - simpleExample - INFO - info message  
2012-03-06 00:09:35,714 - simpleExample - WARNING - warn message  
2012-03-06 00:09:35,714 - simpleExample - ERROR - error message  
2012-03-06 00:09:35,714 - simpleExample - CRITICAL - critical message

这里还要明确一点，logger对象是有继承关系的，比如名为a.b和a.c的logger都是名为a的子logger，并且所有的logger对象都继承于root。如果子对象没有添加handler等一些配置，会从父对象那继承。这样就可以通过这种继承关系来复用配置。

3. 多模块使用logging

        logging模块保证在同一个python解释器内，多次调用logging.getLogger('log_name')都会返回同一个logger实例，即使是在多个模块的情况下。所以典型的多模块场景下使用logging的方式是在main模块中配置logging，这个配置会作用于多个的子模块，然后在其他模块中直接通过getLogger获取Logger对象即可。

        这里使用上面配置文件：

[loggers]  
keys=root,main  
  
[handlers]  
keys=consoleHandler,fileHandler  
  
[formatters]  
keys=fmt  
  
[logger_root]  
level=DEBUG  
handlers=consoleHandler  
  
[logger_main]  
level=DEBUG  
qualname=main  
handlers=fileHandler  
  
[handler_consoleHandler]  
class=StreamHandler  
level=DEBUG  
formatter=fmt  
args=(sys.stdout,)  
  
[handler_fileHandler]  
class=logging.handlers.RotatingFileHandler  
level=DEBUG  
formatter=fmt  
args=('tst.log','a',20000,5,)  
  
[formatter_fmt]  
format=%(asctime)s - %(name)s - %(levelname)s - %(message)s  
datefmt=

 主模块main.py： 

import logging  
import logging.config  
  
logging.config.fileConfig('logging.conf')  
root_logger = logging.getLogger('root')  
root_logger.debug('test root logger...')  
  
logger = logging.getLogger('main')  
logger.info('test main logger')  
logger.info('start import module \'mod\'...')  
import mod  
  
logger.debug('let\'s test mod.testLogger()')  
mod.testLogger()  
  
root_logger.info('finish test...')
 

 子模块mod.py：

import logging  
import submod  
  
logger = logging.getLogger('main.mod')  
logger.info('logger of mod say something...')  
  
def testLogger():  
    logger.debug('this is mod.testLogger...')  
    submod.tst()


 子子模块submod.py： 

import logging  
  
logger = logging.getLogger('main.mod.submod')  
logger.info('logger of submod say something...')  
  
def tst():  
    logger.info('this is submod.tst()...')


然后运行python main.py，控制台输出： 
2012-03-09 18:22:22,793 - root - DEBUG - test root logger...  
2012-03-09 18:22:22,793 - main - INFO - test main logger  
2012-03-09 18:22:22,809 - main - INFO - start import module 'mod'...  
2012-03-09 18:22:22,809 - main.mod.submod - INFO - logger of submod say something...  
2012-03-09 18:22:22,809 - main.mod - INFO - logger say something...  
2012-03-09 18:22:22,809 - main - DEBUG - let's test mod.testLogger()  
2012-03-09 18:22:22,825 - main.mod - DEBUG - this is mod.testLogger...  
2012-03-09 18:22:22,825 - main.mod.submod - INFO - this is submod.tst()...  
2012-03-09 18:22:22,841 - root - INFO - finish test...


可以看出，和预想的一样，然后在看一下tst.log，logger配置中的输出的目的地： 
2012-03-09 18:22:22,793 - main - INFO - test main logger  
2012-03-09 18:22:22,809 - main - INFO - start import module 'mod'...  
2012-03-09 18:22:22,809 - main.mod.submod - INFO - logger of submod say something...  
2012-03-09 18:22:22,809 - main.mod - INFO - logger say something...  
2012-03-09 18:22:22,809 - main - DEBUG - let's test mod.testLogger()  
2012-03-09 18:22:22,825 - main.mod - DEBUG - this is mod.testLogger...  
2012-03-09 18:22:22,825 - main.mod.submod - INFO - this is submod.tst()...
tst.log中没有root logger输出的信息，因为logging.conf中配置了只有main logger及其子logger使用RotatingFileHandler，而root logger是输出到标准输出。

备注：

有多中可用的Handler：
logging.StreamHandler 可以向类似与sys.stdout或者sys.stderr的任何文件对象(file object)输出信息
logging.FileHandler 用于向一个文件输出日志信息
logging.handlers.RotatingFileHandler 类似于上面的FileHandler，但是它可以管理文件大小。当文件达到一定大小之后，它会自动将当前日志文件改名，然后创建一个新的同名日志文件继续输出
logging.handlers.TimedRotatingFileHandler 和RotatingFileHandler类似，不过，它没有通过判断文件大小来决定何时重新创建日志文件，而是间隔一定时间就自动创建新的日志文件
logging.handlers.SocketHandler 使用TCP协议，将日志信息发送到网络。
logging.handlers.DatagramHandler 使用UDP协议，将日志信息发送到网络。
logging.handlers.SysLogHandler 日志输出到syslog
logging.handlers.NTEventLogHandler 远程输出日志到Windows NT/2000/XP的事件日志 
logging.handlers.SMTPHandler 远程输出日志到邮件地址
logging.handlers.MemoryHandler 日志输出到内存中的制定buffer
logging.handlers.HTTPHandler 通过"GET"或"POST"远程输出到HTTP服务器
各个Handler的具体用法可查看参考书册：
https://docs.python.org/2/library/logging.handlers.html#module-logging.handlers




__learner
关注
专栏目录
Python的logging模块详解之一基本用法
成长的足迹
11-03 840
Python的logging模块提供了灵活的事件日志系统。 1. 模块组成 __init__.py config.py handlers.py 2. 常见的输出日志的调用函数 内置函数print() logging.debug() logging.info() logging.warning() ，另一个warnings模块的warnings.warn()具有相似功能 logg...
python日志打印两次_python避坑指南02——logging模块日志重复打印问题-Go语言中文社区...
weixin_33518565的博客
02-10 1161
目录一、问题抛出python的logging模块是python使用过程中打印日志的利器。我们可以使用logging模块的logger、Handler、formatter对我们的日志进行封装，指定日志输出的路径、格式以及位置。在声明logger的时候可以传一个字符串作为这个logger的标签。一直以为这个logger是以单例对象的设计模式设计的，只要这个标签名是一样的，那么返回的logger就是同一...
Python logging模块详解
热门推荐
刀刀的专栏
05-06 13万+
简单将日志打印到屏幕： import logging logging.debug('debug message') logging.info('info message') logging.warning('warning message') logging.error('error message') logging.critical('critical message')输出： WARNI
python——日志模块
最新发布
lhl0306的博客
07-01 1518
日志主要用于记录程序运行情况，以便程序报错能够快速定位到问题。Python自带日志操作模块，即logging模块。
Python日志输出——logging模块
zhuangshu_feng'‘每天进步一点点
05-12 795
1. logging介绍         Python的logging模块提供了通用的日志系统，可以方便第三方模块或者是应用使用。这个模块提供不同的日志级别，并可以采用不同的方式记录日志，比如文件，HTTP GET/POST，SMTP，Socket等，甚至可以自己实现具体的日志记录方式。         logging模块与log4j的机制是一样的，只是具体的实现细节不同。模块提供
Python中logging模块
半夏微凉的博客
03-16 1407
大家在写代码的时候，经常会使用print打印日志方便排查问题，然而print的问题就是太过简单，缺少时间、日志级别等格式化信息。 Python自带的logging模块，很简单就能实现日志的配置和打印，它有两种用法，方法1是把日志输出到标准输出，其实就是命令行界面，方法2则是输出日志到文件，更加方便。 方法1：配置并输出日志到标准输出 该种方法的输出方式类似于print，不同之处在于可以设置各种输出格式，如打印时间等。 import logging LOG_FORMAT = "%(asctime)s - %
Python的Logging模块
m0_60981735的博客
07-03 1万+
万字长文带你学透Python的Logging模块，文章通俗易懂且带有相关代码演示，具体案例助你理解
【Django】logging日志输出到指定位置（拿来即用）
weixin_42866036的博客
07-13 2265
想必日志对于问题定位的重要性，不言而喻吧 那此章节，我们就来梳理下logging模块日志的相关知识吧Logger是入口，Handler是真正的执行者，Handler可以通过Filter 和 Formatter对需要输出的日志内容做过滤和格式化。loggging模块将日志分为以下日志等级以下内容配置：控制台日志全部输出到文件、控制台console 2. logging模块使用：...
使用Python认识logging库
qq_41130705的博客
06-08 371
前言：在日常使用软件过程中或日常测试过程中，我们对日志的依赖是重度，开发需要日志来排查错误，测试需要定位日志来协助开发排错。我们自己在写代码的过程中，也需要日志记录代码运行过程及提供错误信息。接下来我们就一起来学习吧a)记录了执行过程/逻辑执行流程/记录了执行代码的报错b)日志级别(Level)：debug - info - warning -error - critical(FATA) 调试 基本 警告 报错 严重错误c)输出的渠道(Handle)：文件(filehandle) 、 控制台（streamh
【logging模块】的学习之路
weixin_45305537的博客
08-13 489
最近在工作期间，我遇到了我组内的大佬们写的相关的logging，羡煞我也。所以我通过网上学习，总结，掌握了python的logging的要点，我会把初学到进阶的掌握的知识点，与君共享！从以上的输出结果可以看到，输出的是大于等于WARNING的日志等级，且basicConfig只能有一个，其他的不起作用。建立了一个以sml.txt命名的文件，日志记录会保存到这个txt中，并不会打印到控制台中，以下是日志记录。接下来，在基础篇，我们要了解logging模块的一些基础概念，及其一些简单的用法，且听我娓娓道来。..
python 如何判断一个函数执行完成_python常见面试题
weixin_39950552的博客
11-20 1794
????如能帮到你，下方为我们点个在看????推荐：抱歉我是一个测试，不是保姆1、求出1-100之间的和# coidng:utf-8a = 0for i in range(0,100):a += (i+1)print(a)5050# 也可以使用函数sumsum = sum(range(1,101))print(sum)50502、冒泡排序a = [1,6,4,2,67,32]l = len(a)f...
python logging
Balder~专栏
06-08 1万+
开发Python, 一直以来都是使用自己编写的logging模块. 比较土...... 今天发现python的标准模块的这个功能做的挺好, 记录一下, 以后使用模块来进行logging. 对于这个模块的介绍网上也很多, 我也不用自己写了, 比较好的如下, http://crazier9527.iteye.com/blog/290018    Python的标准logging模块
python——日志模块（logging）
黑砂的博客
03-02 2696
python——日志模块（logging
python 日志输出模块--两种方法
weixin_34010949的博客
03-25 212
第一种方法：（推荐） import logging.handlers LOG_FILE = r'tst.log' handler = logging.handlers.RotatingFileHandler(LOG_FILE, maxBytes=1024 * 1024, backupCount=5, encoding='utf-8') # 实例化handler fmt =...
python Loging 入门
yes1cpp的专栏
01-18 923
初级教程 Logning 模块定义了很多方法和类，为application和libraries实现了一个灵活的事件记录系统。   什么时候使用Log:   Task you want to perform The best tool for the task Console 中展示 print() 程序正常运
【python 日志模块】打印常见的日志模块
赖德发的博客
11-28 705
python 程序经常需要打一些日志文件，如error,erro,debug,waring 等，所以我们需要一个模块去处理这个日志。下面是一个日志模板，以后可以拿来用。 loggers.py # -*- coding: utf-8 -*- import os import time import logging import inspect dt = time.strftime("%Y%m%d...
通过python的logging模块输出日志文件
weixin_33843947的博客
03-22 128
import logging import sys #获取logger实例 logger = logging.getLogger("baseSpider") # 括号后面填运行的文件名字,可以不填,不填的话当运行多个文件的时候,容易出问题 # 指定输出格式 formatter = logging.Formatter('%(asctime)s\ %(l...
python内置日志模块logining
weixin_33726313的博客
05-10 181
''' 软件开发通过日志纪录程序的运行是一种良好的开发习惯，python标准库自带日志模块，在程序模块中直接调用标准库 的日志模块，通过日志开发者可以清楚的了解到发生了哪些事情，包括出现了哪些错误。 在logging中日志文件分为5个等级 日志等级（level） 描述 DEBUG 调试信息，通常在诊断问题时使用 IN...
python 将loging输出到log.txt
06-06
要将 Python 的 logging 输出到 log.txt 文件中，可以使用以下代码： ```python import logging # 配置 logging logging.basicConfig(filename='log.txt', level=logging.DEBUG) # 输出 log logging.debug('This is a debug message') logging.info('This is an info message') logging.warning('This is a warning message') logging.error('This is an error message') logging.critical('This is a critical message') ``` 在这个例子中，我们通过 `basicConfig` 方法来配置 logging，设置输出到文件 `log.txt` 中，并设置日志级别为 `DEBUG`。接着，我们通过 `debug`、`info`、`warning`、`error` 和 `critical` 方法来输出日志信息。这些信息将会被写入到 log.txt 文件中。 当然，也可以使用 `FileHandler` 来实现将 logging 输出到文件中，具体的实现方式可以参考 Python 官方文档中的 [Logging Cookbook](https://docs.python.org/3/howto/logging-cookbook.html#using-file-rotation)。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值