在多个端口上创建 docker 副本答案

【问题标题】：creating copies of docker on multiple ports在多个端口上创建 docker 副本
【发布时间】：2017-05-10 18:34:22
【问题描述】：

我正在尝试做的事情 - 在 docker 中使用 celery 运行气流我的问题 - 我的芹菜工人在容器中，我不知道如何扩展它们

我的 docker-comopose 文件：

version: '2'  
services:  
mysql:  
  image: mysql:latest  
  restart: always  
  ports:  
      - "3306:3306"  
  environment:  
      - MYSQL_RANDOM_ROOT_PASSWORD=true  
      - MYSQL_USER=airflow  
      - MYSQL_PASSWORD=airflow  
      - MYSQL_DATABASE=airflow  
  volumes:  
      - mysql:/var/lib/mysql  

rabbitmq:  
  image: rabbitmq:3-management  
  restart: always  
  ports:  
      - "15672:15672"  
      - "5672:5672"  
      - "15671:15671"  
  environment:  
      - RABBITMQ_DEFAULT_USER=airflow  
      - RABBITMQ_DEFAULT_PASS=airflow 
      - RABBITMQ_DEFAULT_VHOST=airflow  
  volumes:  
      - rabbitmq:/var/lib/rabbitmq  

webserver:  
  image: airflow:ver5  
  restart: always  
  volumes:  
       - ~/airflow/dags:/usr/local/airflow/dags  
       - /opt/scripts:/opt/scripts      
  environment:  
      - AIRFLOW_HOME=/usr/local/airflow  
  ports:  
      - "8080:8080"  
  links:  
      - mysql:mysql  
      - rabbitmq:rabbitmq  
      - worker:worker  
      - scheduler:scheduler  
  depends_on:  
      - mysql  
      - rabbitmq  
      - worker  
      - schedulerv
  command: webserver  
  env_file: ./airflow.env  

scheduler:
  image: airflow:ver5
  restart: always
  volumes:
       - ~/airflow/dags:/usr/local/airflow/dags
       - /opt/scripts:/opt/scripts
  environment:
      - AIRFLOW_HOME=/usr/local/airflow
  links:
      - mysql:mysql
      - rabbitmq:rabbitmq
  depends_on:
      - mysql
      - rabbitmq
  command: scheduler
  env_file: ./airflow.env

worker:
  image: airflow:ver5
  restart: always
  volumes:
       - ~/airflow/dags:/usr/local/airflow/dags
       - /opt/scripts:/opt/scripts
  environment:
      - AIRFLOW_HOME=/usr/local/airflow
  ports:
      - "8793:8793"
  links:
      - mysql:mysql
      - rabbitmq:rabbitmq
  depends_on:
      - mysql
      - rabbitmq
  command: worker
  env_file: ./airflow.env

所以我使用上面的文件运行 docker-compose 命令，当我从 docker 端口映射到 localhost 时，它会在 localhost 的 8793 端口上启动一个 worker 实例。现在我想要做的是扩展我拥有的工人数量并使用以下命令：

docker-compose -f docker-compose.yml scale worker=5

但这会导致错误，因为工作者实例已经在 8793 上运行。有没有办法在我扩大规模时动态地将端口分配给工作者容器的新实例？

【问题讨论】：

标签： python docker celery docker-compose airflow

【解决方案1】：

您可以允许您的工作节点在随机端口号上向主机公开工作端口：

worker:
  image: airflow:ver5
  restart: always
  volumes:
       - ~/airflow/dags:/usr/local/airflow/dags
       - /opt/scripts:/opt/scripts
  environment:
      - AIRFLOW_HOME=/usr/local/airflow
  ports:
      - "8793"
  links:
      - mysql:mysql
      - rabbitmq:rabbitmq
  depends_on:
      - mysql
      - rabbitmq
  command: worker
  env_file: ./airflow.env

将 port: 设置为 - 80 会将容器中的端口 80 暴露给主机上的随机端口。

由于 Docker Compose 使用网络，您实际上可以完全省略此发布步骤，它会起作用。所以只需从工作人员中删除ports:

【讨论】：