【问题标题】:How to run Flask AND celery in one container?如何在一个容器中运行 Flask 和 celery?
【发布时间】:2019-08-03 10:11:19
【问题描述】:

我想在 digitalocean 上使用 docker 部署我的小型 Web 应用程序。问题是,我没有分开烧瓶 + 芹菜,所以一切都在一个容器中。 每次我运行 docker-compose up 时,Web 容器都会崩溃(“以代码 0 退出”)。

项目结构如下:

.
.
├── docker-compose.yml
├── nginx
│   ├── dockerfile
│   └── nginx.conf
└── web
    ├── app.ini
    ├── bot
    │   ├── __init__.py
    │   ├── main.py
    │   ├── __pycache__
    │   └── timer.py
    ├── celeryd.pid
    ├── config.py
    ├── dockerfile
    ├── dockerignore
    ├── flask_app.py
    ├── __init__.py
    ├── requirements.txt
    ├── tasks.py
    └── webapp
        ├── bot
        ├── __init__.py
        ├── models.py
        ├── __pycache__
        ├── static
        ├── templates
        └── users

这是 docker-compose.yml:

version: "3.7"

services:

  rabbitmq:
    image: rabbitmq:3-management
    hostname: rabbitmq
    container_name: rabbitmq
    environment:
      RABBITMQ_ERLANG_COOKIE: 'SWQOKODSQALRPCLNMEQG'
      RABBITMQ_DEFAULT_USER: 'user123'
      RABBITMQ_DEFAULT_PASS: 'password123'
      RABBITMQ_DEFAULT_VHOST: '/webapp'
    ports:
      - "15672:15672"
      - "5672:5672"
    volumes:
      - rabbitmq_storage:/var/lib/rabbitmq
    networks:
      netzwerk123:
        aliases:
          - rabbitmq

  db:
    image: mariadb
    restart: always
    container_name: db
    environment:
      MYSQL_ROOT_PASSWORD: 'password123'
      MYSQL_USER: 'user123'
      MYSQL_PASSWORD: 'password123'
      MYSQL_DATABASE: 'webapp'
    ports:
      - "3306:3306"
    volumes:
      - db_storage:/var/lib/mysql
    networks:
      netzwerk123:
        aliases:
          - db


  nginx:
    build: ./nginx  
    container_name: nginx
    restart: always
    ports:  
      - "80:80"
    networks:
      netzwerk123:
        aliases:
          - ngnix


  web:
    build: ./web  
    container_name: web
    hostname: web
    restart: always
    environment:    
      FLASK_DEBUG: 'True'
      FLASK_APP: 'flask_app.py'
    command: celery -A tasks.celery worker --loglevel=info --detach
    expose:
      - 8080
    networks:
      netzwerk123:
        aliases:
          - web
    depends_on:     
      - nginx
      - db
      - rabbitmq
    links:
      - rabbitmq
    tty: true
    stdin_open: true


  adminer:        #only for development purposes
    image: adminer
    container_name: adminer
    restart: always
    ports:
      - "8081:8080"
    depends_on:
      - db
    networks:
      netzwerk123:
        aliases:
          - adminer



volumes:                                    
  db_storage:
  rabbitmq_storage:

networks:
  netzwerk123:

如果我评论 "command: celery -A tasks.celery worker --loglevel=info --detach" 一切运行良好,因为 celery 没有运行。网页功能齐全,数据库处于活动状态。一切都很好,除了芹菜。

通过取消注释命令行,docker 抛出“web exited with error code 0”。

我猜这是因为docker在成功执行命令后退出容器。所以我面临两个问题:

1)如何在同一个celery容器的后台运行celery,这样就不会出现错误码0?

2) 如何在容器中并行运行 celery 和 flask?

-> 我已经尝试了以下,但同样的错误:

command: bash -c "uwsgi app.ini && celery -A tasks.celery worker --loglevel=info --detach"

非常感谢任何帮助:)

编辑: 我将 celery + flask 放在一个容器中的原因是我的 task.py。在这里,我从 web.webapp.models 导入所有 sqlalchemy 模型。所以我需要访问烧瓶目录,目前我没有看到如何将它分成两个容器的方法

【问题讨论】:

  • 如果需要访问相同的文件,您需要在两个容器之间共享一个卷
  • 我对 docker compose 和 digitalocean 了解不多,对 celery 也一无所知,所以我的说法可能是错误的,但您可能希望运行两个单独的 digitalocean 服务器并提供一个 API 来在它们之间进行通信。如果您需要在同一台服务器上运行它们:由于 digitalocean 服务器是一个 docker 容器(我认为),那么您必须运行“docker in docker”,因此您在 digitalocean docker 容器中运行两个 docker 容器。 .这可能很慢,我不知道digitalocean是否提供了一种在docker中做docker的简单方法。
  • 正如@David Maze 所说,您可以将共享代码放在两个单独的容器映像中。

标签: python docker flask celery


【解决方案1】:

如果您需要在两个不同进程之间“共享”的唯一内容是代码,那么代码已经在构建的 Docker 映像中。您可以非常轻松地从同一个映像运行两个不同的容器,但使用不同的命令。

services:
  web:
    build: ./web  
    environment:    
      FLASK_DEBUG: 'True'
      FLASK_APP: 'flask_app.py'
    command: flask run --host=0.0.0.0
    depends_on:     
      - nginx
      - db
      - rabbitmq
  celery:
    build: ./web  
    restart: always
    command: celery -A tasks.celery worker --loglevel=info
    depends_on:     
      - db
      - rabbitmq

注意这两个build: 是同一张图片。另外,我制作了celery worker 而不是--detach,所以它作为前台进程运行;只要command: 仍在运行,容器就会一直运行。

(为了让这个片段在你的原始 docker-compose.yml 文件的上下文中工作,你需要彻底删除整个文件中的所有 networks: 块,但它会正常工作:Docker Compose 创建一个默认网络和使用其服务块的名称将所有服务附加到它。我还删除了许多其他无关紧要的选项。)

【讨论】:

  • 感谢大卫,它有效!没想到会这么简单,哈哈。
猜你喜欢
  • 2018-09-16
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2015-12-01
  • 2021-10-06
相关资源
最近更新 更多