解决python log模块重复打印日志问题
当多个python文件引用log时会导致打印重复日志,如下图;
原因是Logger类中的handlers列表中添加了多个对象;
Logger类源码如下:
所以,要解决这个问题,我的思路是清除handlers列表中多余的对象;
思路步骤如下:
1、我的代码中往handlers列表添加了sh和th两个对象,代码如下
import logging
from logging import handlers
class Logger(object):
level_relations = {
'debug':logging.DEBUG,
'info':logging.INFO,
'warning':logging.WARNING,
'error':logging.ERROR,
'crit':logging.CRITICAL
}#日志级别关系映射
def __init__(self,filename,level='info',when='D',backCount=3,fmt='%(asctime)s - %(pathname)s[line:%(lineno)d] - %(levelname)s: %(message)s'):
self.logger = logging.getLogger(filename)
format_str = logging.Formatter(fmt)#设置日志格式
self.logger.setLevel(self.level_relations.get(level))#设置日志级别
sh = logging.StreamHandler()#往屏幕上输出
sh.setFormatter(format_str) #设置屏幕上显示的格式
th = handlers.TimedRotatingFileHandler(filename=filename,when=when,backupCount=backCount,encoding='utf-8')#往文件里写入#指定间隔时间自动生成文件的处理器
#实例化TimedRotatingFileHandler
#interval是时间间隔,backupCount是备份文件的个数,如果超过这个个数,就会自动删除,when是间隔的时间单位,单位有以下几种:
# S 秒
# M 分
# H 小时、
# D 天、
# W 每星期(interval==0时代表星期一)
# midnight 每天凌晨
th.setFormatter(format_str)#设置文件里写入的格式
self.logger.addHandler(sh) #把对象加到logger里
self.logger.addHandler(th)
2、运行程序发现handlers列表中元素个数多达五十几个,如下图
3、handlers列表中具体元素
[<StreamHandler <stderr> (NOTSET)>, <TimedRotatingFileHandler D:\pyworkerspace\MarketingSystem_APITest\logs\debug.log (NOTSET)>, <StreamHandler <stderr> (NOTSET)>, <TimedRotatingFileHandler D:\pyworkerspace\MarketingSystem_APITest\logs\debug.log (NOTSET)>, <StreamHandler <stderr> (NOTSET)>, <TimedRotatingFileHandler D:\pyworkerspace\MarketingSystem_APITest\logs\debug.log (NOTSET)>, ......
后面还有很多就不显示了,我们发现里面有很多对象。<StreamHandler <stderr> (NOTSET)>
,这是sh对象<TimedRotatingFileHandler D:\pyworkerspace\MarketingSystem_APITest\logs\debug.log (NOTSET)>
,这是th对象
所以我们只需要一组对象即可,其他的清掉,虽然说是重复数据,其实不重复,他们是不同的对象,所以用set去重是不行的;
4、解决问题
self.logger.handlers=self.logger.handlers[:1]
一行代码搞定,将handlers列表切片截取第一和第二个元素再付给handlers列表即可;
不再打印重复日志
5、在这里贴上我的代码,需要的同学可以拿去
import logging
from logging import handlers
class Logger(object):
level_relations = {
'debug':logging.DEBUG,
'info':logging.INFO,
'warning':logging.WARNING,
'error':logging.ERROR,
'crit':logging.CRITICAL
}#日志级别关系映射
def __init__(self,filename,level='info',when='D',backCount=3,fmt='%(asctime)s - %(pathname)s[line:%(lineno)d] - %(levelname)s: %(message)s'):
self.logger = logging.getLogger(filename)
format_str = logging.Formatter(fmt)#设置日志格式
self.logger.setLevel(self.level_relations.get(level))#设置日志级别
sh = logging.StreamHandler()#往屏幕上输出
sh.setFormatter(format_str) #设置屏幕上显示的格式
th = handlers.TimedRotatingFileHandler(filename=filename,when=when,backupCount=backCount,encoding='utf-8')#往文件里写入#指定间隔时间自动生成文件的处理器
#实例化TimedRotatingFileHandler
#interval是时间间隔,backupCount是备份文件的个数,如果超过这个个数,就会自动删除,when是间隔的时间单位,单位有以下几种:
# S 秒
# M 分
# H 小时、
# D 天、
# W 每星期(interval==0时代表星期一)
# midnight 每天凌晨
th.setFormatter(format_str)#设置文件里写入的格式
self.logger.addHandler(sh) #把对象加到logger里
self.logger.addHandler(th)
self.logger.handlers=self.logger.handlers[:1]
#把handler句柄删掉,否则由于多处调用logger对象导致logger里会出现多个handler,打印日志时每个handler都会执行打印从而出现重复日志