python日志记录模块实例及改进


Posted in Python onFebruary 12, 2017

python 打印对象的所有属性值:

def prn_obj(obj):
  print '\n'.join(['%s:%s' % item for item in obj.__dict__.items()])

Python logger对象属性(由上述函数获取的)

name:get_data
parent:<logging.RootLogger instance at 0x1d8bd88>
handlers:[<logging.FileHandler instance at 0x21bcc68>]
level:10
disabled:1   #当前的logger是否有效,默认为0
manager:<logging.Manager instance at 0x1d8bea8>
propagate:0   #是否将本级日志
filters:[]

部分日志无法输出

File:logger.conf

[formatters]
keys=default
 
[formatter_default]
format=%(asctime)s - %(name)s - %(levelname)s - %(message)s
class=logging.Formatter
 
[handlers]
keys=console, error_file
 
[handler_console]
class=logging.StreamHandler
formatter=default
args=tuple()
 
[handler_error_file]
class=logging.FileHandler
level=INFO
formatter=default
args=("logger.log", "a")
 
[loggers]
keys=root
 
[logger_root]
level=DEBUG
formatter=default
handlers=console,error_file

File:logger.py

#!/bin/env python
 
import logging
from logging.config import logging
 
class Test(object):
  """docstring for Test"""
  def __init__(self):
    logging.config.fileConfig("logger.conf")
    self.logger = logging.getLogger(__name__)
 
  def test_func(self):
    self.logger.error('test_func function')
 
class Worker(object):
  """docstring for Worker"""
  def __init__(self):
    logging.config.fileConfig("logger.conf")
    self.logger = logging.getLogger(__name__)
 
    data_logger = logging.getLogger('data')
    handler = logging.FileHandler('./data.log')
    fmt = logging.Formatter('%(asctime)s|%(message)s')
    handler.setFormatter(fmt)
    data_logger.addHandler(handler)
    data_logger.setLevel(logging.DEBUG)
    self.data_logger = data_logger
 
  def test_logger(self):
    self.data_logger.error("test_logger function")
    instance = Test()
    self.data_logger.error("test_logger output")
    instance.test_func()
 
 
def main():
  worker = Worker()
  worker.test_logger()
 
if __name__ == '__main__':
  main()

问题一:测试过程中,只能打印出test_logger function一条语句
问题二:明明只在data_logger中打印出语句,但是logger的日志中也出现了相关的日志。

问题一解决方案:

利用python -m pdb logger.py 语句对脚本进行调试发现,在执行instance = Test()语句后,通过print '\n'.join(['%s:%s' % item for item in self.data_logger.__dict__.items()])调试语句看到data_logger的disable属性值由0变成了True,此时logger的对应属性也发生了相同的变化。这种变化导致了logger对象停止记录日志。参考python  logging模块的相关手册发现“The fileConfig() function takes a default parameter, disable_existing_loggers, which defaults to True for reasons of backward compatibility. This may or may not be what you want, since it will cause any loggers existing before the fileConfig() call to be disabled unless they (or an ancestor) are explicitly named in the configuration.” 的说明,即调用fileconfig()函数会将之前存在的所有logger禁用。在python 2.7版本该fileConfig()函数添加了一个参数,logging.config.fileConfig(fname, defaults=None, disable_existing_loggers=True),可以显式的将disable_existing_loggers设置为FALSE来避免将原有的logger禁用。将上述代码中的Test类中的logging.config.fileConfig函数改成logging.config.fileConfig("./logger.conf", disable_existing_loggers=0)就可以解决问题。 不过该代码中由于位于同一程序内,可以直接用logging.getLogger(LOGGOR_NAME)函数引用同一个logger,不用再调用logging.config.fileConfig函数重新加载一遍了。

问题二解决方案:

logger对象有个属性propagate,如果这个属性为True,就会将要输出的信息推送给该logger的所有上级logger,这些上级logger所对应的handlers就会把接收到的信息打印到关联的日志中。logger.conf配置文件中配置了相关的root logger的属性,这个root logger就是默认的logger日志。
 
修改后的如下:

File:logger.conf

[formatters]
keys=default, data
 
[formatter_default]
format=%(asctime)s - %(name)s - %(levelname)s - %(message)s
class=logging.Formatter
 
[formatter_data]
format=%(asctime)s|%(message)s
class=logging.Formatter
 
[handlers]
keys=console, error_file, data_file
 
[handler_console]
class=logging.StreamHandler
formatter=default
args=tuple()
 
[handler_error_file]
class=logging.FileHandler
level=INFO
formatter=default
args=("logger.log", "a")
 
[handler_data_file]
class=logging.FileHandler
level=INFO
formatter=data
args=("data_new.log", "a")
 
[loggers]
keys=root, data
 
[logger_root]
level=DEBUG
handlers=console,error_file
 
[logger_data]
level=DEBUG
handlers=data_file
qualname=data
propagate=0

File:logger.py

#!/bin/env python
 
import logging
from logging.config import logging
 
class Test(object):
  """docstring for Test"""
  def __init__(self):
    self.logger = logging.getLogger(__name__)
 
  def test_func(self):
    self.logger.error('test_func function')
 
class Worker(object):
  """docstring for Worker"""
  def __init__(self):
    logging.config.fileConfig("logger.conf")
    self.logger = logging.getLogger(__name__)
    self.data_logger = logging.getLogger('data')
 
  def test_logger(self):
    self.data_logger.error("test_logger function")
    instance = Test()
    self.data_logger.error("test_logger output")
    instance.test_func()
 
 
def main():
  worker = Worker()
  worker.test_logger()
 
if __name__ == '__main__':
  main()
Python 相关文章推荐
Python中os和shutil模块实用方法集锦
May 13 Python
常见的python正则用法实例讲解
Jun 21 Python
Python实现OpenCV的安装与使用示例
Mar 30 Python
Python实现的knn算法示例
Jun 14 Python
PyQt5实现QLineEdit添加clicked信号的方法
Jun 25 Python
python实现文本进度条 程序进度条 加载进度条 单行刷新功能
Jul 03 Python
python批量将excel内容进行翻译写入功能
Oct 10 Python
4款Python 类型检查工具,你选择哪个呢?
Oct 30 Python
python全栈开发语法总结
Nov 22 Python
利用Python实现自动扫雷小脚本
Dec 17 Python
Python爬虫爬取ts碎片视频+验证码登录功能
Feb 22 Python
解决python绘图使用subplots出现标题重叠的问题
Apr 30 Python
Windows下Python2与Python3两个版本共存的方法详解
Feb 12 #Python
使用Python绘制图表大全总结
Feb 11 #Python
Python 绘图和可视化详细介绍
Feb 11 #Python
Python实现多线程HTTP下载器示例
Feb 11 #Python
Python  pip安装lxml出错的问题解决办法
Feb 10 #Python
使用Python脚本和ADB命令实现卸载App
Feb 10 #Python
Python中str is not callable问题详解及解决办法
Feb 10 #Python
You might like
模板引擎Smarty深入浅出介绍
2006/12/06 PHP
基于PHP CURL获取邮箱地址的详解
2013/06/03 PHP
解析mysql 表中的碎片产生原因以及清理
2013/06/22 PHP
phpword插件导出word文件时中文乱码问题处理方案
2014/08/19 PHP
php+html5使用FormData对象提交表单及上传图片的方法
2015/02/11 PHP
js 判断 enter 事件
2009/02/12 Javascript
神奇的7个jQuery 3D插件整理
2011/01/06 Javascript
再论Javascript的类继承
2011/03/05 Javascript
关于html+ashx开发中几个问题的解决方法
2011/07/18 Javascript
JavaScript 基础篇之对象、数组使用介绍(三)
2012/04/07 Javascript
JavaScript中的parse()方法使用简介
2015/06/12 Javascript
JavaScript实现网站访问次数统计代码
2015/08/12 Javascript
js实现带圆角的两级导航菜单效果代码
2015/08/24 Javascript
js实现文本框输入文字个数限制代码
2015/12/25 Javascript
javascript js 操作数组 增删改查的简单实现
2016/06/20 Javascript
jquery中用jsonp实现搜索框功能
2016/10/18 Javascript
Angular中的ng-template及angular 使用ngTemplateOutlet 指令的方法
2018/08/08 Javascript
vue中的自定义分页插件组件的示例
2018/08/18 Javascript
Vue项目从webpack3.x升级webpack4不完全指南
2019/04/28 Javascript
使用Python编写vim插件的简单示例
2015/04/17 Python
Python3 Tkinter选择路径功能的实现方法
2019/06/14 Python
python 的numpy库中的mean()函数用法介绍
2020/03/03 Python
python boto和boto3操作bucket的示例
2020/10/30 Python
纯css3制作的火影忍者写轮眼开眼至轮回眼及进化过程实例
2014/11/11 HTML / CSS
css3中flex布局宽度不生效的解决
2020/12/09 HTML / CSS
海滩咖啡馆:Beach Cafe
2018/02/02 全球购物
雪山饭庄的创业计划书范文
2014/01/18 职场文书
五一口号
2014/06/19 职场文书
小学生三分钟演讲稿
2014/08/18 职场文书
好的旅游活动方案
2014/08/19 职场文书
全国爱眼日活动总结
2015/02/27 职场文书
员工旷工检讨书
2015/08/15 职场文书
初中语文教学研修日志
2015/11/13 职场文书
压缩Redis里的字符串大对象操作
2021/06/23 Redis
Nginx stream 配置代理(Nginx TCP/UDP 负载均衡)
2021/11/17 Servers
Windows11 Insider Preview Build 25206今日发布 更新内容汇总
2022/09/23 数码科技