【问题标题】:Python logging multiple modules each module log to separate filesPython记录多个模块每个模块记录到单独的文件
【发布时间】:2020-06-19 18:40:42
【问题描述】:

我有一个主脚本和多个模块。现在我有日志设置,所有模块的所有日志都进入同一个日志文件。当它全部在一个文件中时,很难调试。所以我想将每个模块分成自己的日志文件。我还想查看每个模块使用的请求模块到使用它的模块的日志中。我不知道这是否可能。我到处搜索并尝试了我能想到的一切,但它总是回到将所有内容记录到一个文件中或在每个模块中设置日志记录,并从我的主模块启动脚本而不是作为模块导入。

main.py

import logging, logging.handlers
import other_script.py

console_debug = True
log = logging.getLogger()

def setup_logging():    
    filelog = logging.handlers.TimedRotatingFileHandler(path+'logs/api/api.log',
                when='midnight', interval=1, backupCount=3)
    filelog.setLevel(logging.DEBUG)
    fileformatter = logging.Formatter('%(asctime)s %(name)-15s %(levelname)-8s %(message)s')
    filelog.setFormatter(fileformatter)
    log.addHandler(filelog)

    if console_debug:
        console = logging.StreamHandler()
        console.setLevel(logging.DEBUG)
        formatter = logging.Formatter('%(name)-15s: %(levelname)-8s %(message)s')
        console.setFormatter(formatter)
        log.addHandler(console)

if __name__ == '__main__':
    setup_logging()

other_script.py

import requests
import logging

log = logging.getLogger(__name__)

【问题讨论】:

  • "在一个文件中很难调试。"当日志记录分布在多个文件中并且您没有任何方法可以使条目按顺序排列时,这将变得更加困难。
  • 如果我的脚本记录在不同的日志中会更容易,因为每个脚本都执行一组特定的任务,而当您将它们全部塞在一起时,很难遵循。特别是因为主脚本正在设置一个 API,所以我会同时收到多个请求。无论如何,python 似乎没有办法做我想做的事,或者至少不是我能看到的。

标签: python logging module


【解决方案1】:

python 日志的一个非常基本的概念是,每个文件、流或其他日志所在的位置都相当于一个 Handler。因此,如果您希望每个模块都记录到不同的文件,则必须为每个模块提供它自己的处理程序。这也可以从中心位置完成。在您的 main.py 中,您可以添加它以使 other_script 模块记录到单独的文件中:

other_logger = logging.getLogger('other_script')
other_logger.addHandler(logging.FileHandler('other_file'))
other_logger.propagate = False

仅当您将处理程序添加到根记录器时才需要最后一行。如果您继续以默认 True 传播,则所有日志也将发送到根记录器处理程序。在您的场景中,甚至根本不使用根记录器可能会更好,而在 main 中使用特定的命名记录器,例如 getLogger('__main__')。

【讨论】:

  • 甜蜜!我想这会让我快到那里。最后一个是如果我在 other_script 和 other_script2 中有请求模块。有没有办法将请求模块调试重定向到使用它的脚本的日志?
  • 定义script it was used in。一般来说,这将是相当困难的。
  • 好吧,如果我在 other_script1 和 other_script2 中有请求并且它们都使用请求,则将请求模块重定向到使用它的脚本的日志中。我一直在尝试您的建议,并尝试保持我的 def 以及旋转日志,但我似乎无法让它正常工作。在我准备只拥有一个主日志并在问题出现时处理发现问题的时候。到目前为止,我所做的一切似乎都让事情变得一团糟。我不知道您是否还有其他需要帮助的,但如果没有,我感谢您的尝试。
  • 顺便说一句,我尝试像上面那样简单地进行操作,并且该模块的日志中没有显示任何内容。我不知道 getLogger 是否正常工作
猜你喜欢
  • 1970-01-01
  • 2013-07-16
  • 1970-01-01
  • 2014-04-12
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多