【问题标题】:Adding python logging to FastApi endpoints, hosted on docker doesn't display API Endpoints logs将 python 日志记录添加到托管在 docker 上的 FastApi 端点不显示 API 端点日志
【发布时间】:2020-08-20 17:10:22
【问题描述】:

我有一个我想在其上添加 python 日志记录的 fastapi 应用程序。我按照基本教程添加了这个,但是这并没有添加 API,只是添加了 gunicorn 日志记录。

所以我有一个使用 docker build 托管的本地服务器,因此使用 docker-compose up 运行服务器并使用 api 客户端(Insomnia,类似于邮递员)测试我的端点。 下面是没有创建日志文件的代码,因此没有添加日志语句。

我的项目str如下:

project/
  src/ 
    api/
      models/ 
        users.py
      routers/
        users.py
      main.py
      logging.conf
"""
main.py Main is the starting point for the app.
"""
import logging
import logging.config
from fastapi import FastAPI
from msgpack_asgi import MessagePackMiddleware
import uvicorn

from api.routers import users


logger = logging.getLogger(__name__)


app = FastAPI(debug=True)
app.include_router(users.router)


@app.get("/check")
async def check():
    """Simple health check endpoint."""
    logger.info("logging from the root logger")
    return {"success": True}


另外,我使用的 gunicorn.conf 看起来像这样:

[program:gunicorn]
command=poetry run gunicorn -c /etc/gunicorn/gunicorn.conf.py foodgame_api.main:app
directory=/var/www/
autostart=true
autorestart=true
redirect_stderr=true

gunicorn.conf.py一样

import multiprocessing
bind = "unix:/tmp/gunicorn.sock"
workers = multiprocessing.cpu_count() * 2 + 1
worker_class = "uvicorn.workers.UvicornWorker"
loglevel = "debug"
errorlog = "-"
capture_output = True
chdir = "/var/www"
reload = True
reload_engine = "auto"
accesslog = "-"
access_log_format = '%(h)s %(l)s %(u)s %(t)s "%(r)s" %(s)s %(b)s "%(f)s" "%(a)s"'

这是我在 docker 上的上述 API 端点的输出终端:

有人可以在这里指导我吗?我是 FastApi 的新手,因此我们将不胜感激。

【问题讨论】:

  • 似乎没有启用记录器。
  • @ArakkalAbu 你如何启用记录器?
  • 也看loguru

标签: python-3.x logging docker-compose gunicorn fastapi


【解决方案1】:

受@JPG 的回答启发,但使用 pydantic 模型看起来更干净。

您可能希望公开更多变量。这个配置对我很有效。


from pydantic import BaseModel

class LogConfig(BaseModel):
    """Logging configuration to be set for the server"""

    LOGGER_NAME: str = "mycoolapp"
    LOG_FORMAT: str = "%(levelprefix)s | %(asctime)s | %(message)s"
    LOG_LEVEL: str = "DEBUG"

    # Logging config
    version = 1
    disable_existing_loggers = False
    formatters = {
        "default": {
            "()": "uvicorn.logging.DefaultFormatter",
            "fmt": LOG_FORMAT,
            "datefmt": "%Y-%m-%d %H:%M:%S",
        },
    }
    handlers = {
        "default": {
            "formatter": "default",
            "class": "logging.StreamHandler",
            "stream": "ext://sys.stderr",
        },
    }
    loggers = {
        "mycoolapp": {"handlers": ["default"], "level": LOG_LEVEL},
    }

然后将其导入到您的main.py 文件中:

from logging.config import dictConfig
import logging
from .config import LogConfig

dictConfig(LogConfig().dict())
logger = logging.getLogger("mycoolapp")

logger.info("Dummy Info")
logger.error("Dummy Error")
logger.debug("Dummy Debug")
logger.warning("Dummy Warning")

这给出了:

【讨论】:

  • 你如何登录到特定的文件或目录?任何文档?
  • @YoungEmil 见this answer。只需添加文件处理程序并将其分配给您的记录器。
【解决方案2】:

我会使用 dict 日志配置

如下创建一个记录器配置,

# my_log_conf.py

log_config = {
    "version": 1,
    "disable_existing_loggers": False,
    "formatters": {
        "default": {
            "()": "uvicorn.logging.DefaultFormatter",
            "fmt": "%(levelprefix)s %(asctime)s %(message)s",
            "datefmt": "%Y-%m-%d %H:%M:%S",

        },
    },
    "handlers": {
        "default": {
            "formatter": "default",
            "class": "logging.StreamHandler",
            "stream": "ext://sys.stderr",
        },
    },
    "loggers": {
        "foo-logger": {"handlers": ["default"], "level": "DEBUG"},
    },
}

然后,使用 dictConfig 函数加载配置,

from logging.config import dictConfig
from fastapi import FastAPI

from some.where.my_log_conf import log_config

dictConfig(log_config)

app = FastAPI(debug=True)

注意:建议在FastAPI初始化之前调用dictConfig(...)函数。

初始化后,您可以在代码中的任何位置使用名为 foo-logger 的记录器,

import logging

logger = logging.getLogger('foo-logger')

logger.debug('This is test')

【讨论】:

  • 它对我不起作用。我只看到基于 gunicorn 请求的 HTTP 日志,而不是我在路径函数上使用日志记录模块打印的日志。
  • 如果您在没有 docker 的情况下运行,您会看到任何日志吗?顺便说一句,这个例子应该适用于 gunicorn 和 uvicorn
  • 顺便说一句,我也在 Docker 环境中测试过这个解决方案,看起来还不错。您可以使用mine, with branch so-63510041 的这个演示项目进行相同的测试。您将在README.md 中找到这些命令
  • 有没有办法增加日志的响应时间?
猜你喜欢
  • 2014-10-20
  • 2020-07-11
  • 2020-04-26
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2019-11-19
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多