python logging 遇到的坑 日志重复打印问题的解决方法

python 中 logging模块 假如遇到多线程 或者多进程 或者在web框架中自定义logging的话

非常容易重复打印日志 和造成内存崩溃

所以

解决方法如下:

重写日志方法 用类:

class Log():

import logging

def __init__(self):

    self.logger = logging.getLogger(__name__)

# 以下三行为清空上次文件

    # 这为清空当前文件的logging 因为logging会包含所有的文件的logging

    logging.Logger.manager.loggerDict.pop(__name__)

    # 将当前文件的handlers 清空

    self.logger.handlers = []

    # 然后再次移除当前文件logging配置

    self.logger.removeHandler(self.logger.handlers)

    #  这里进行判断,如果logger.handlers列表为空,则添加,否则,直接去写日志

    if not self.logger.handlers:

    # loggger 文件配置路径

        self.handler = logging.FileHandler(os.getcwd() + '/logger/%s_log/%s_score.log' % (str(dt.date.today()), str(dt.date.today())))

    # logger 配置等级

        self.logger.setLevel(logging.DEBUG)

     # logger 输出格式

        formatter = logging.Formatter('%(asctime)s - %(levelname)s - %(name)s - %(message)s')

    # 添加输出格式进入handler

        self.handler.setFormatter(formatter)

    # 添加文件设置金如handler

        self.logger.addHandler(self.handler)

    # 以下皆为重写方法 并且每次记录后清除logger

def info(self,message=None):

    self.__init__()

    self.logger.info(message)

    self.logger.removeHandler(self.logger.handlers)

def debug(self,message=None):

    self.__init__()

    self.logger.debug(message)

    self.logger.removeHandler(self.logger.handlers)

def warning(self,message=None):

    self.__init__()

    self.logger.warning(message)

    self.logger.removeHandler(self.logger.handlers)

def error(self,message=None):

    self.__init__()

    self.logger.error(message)

    self.logger.removeHandler(self.logger.handlers)

def critical(self, message=None):

    self.__init__()

    self.logger.critical(message)

    self.logger.removeHandler(self.logger.handlers)

亲测有效

另外 模块尤其注意 例如web请求的时候 在接口处调用 然后引导传参 千万别做全局变量

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容