多阶段docker构建，防止特定阶段的并发答案

【问题标题】：Multi-stage docker build, prevent concurency for specific stage多阶段docker构建，防止特定阶段的并发
【发布时间】：2021-12-16 18:12:49
【问题描述】：

在 docker 多阶段构建中，如何防止其他阶段与特定阶段并行运行？

我有一个多级 Dockerfile。其中一个阶段构建 opencv 堆栈。

FROM node:12.22.1 AS client_build
COPY client/package*.json .
RUN npm install
RUN npm run build

FROM pkg_builder AS open_cv_builder
ARG PYTHON_VERSION
RUN cd ~ && \
    python${PYTHON_VERSION} -m pip install numpy==1.18.2 && \
    cd ~ && \
    wget -O opencv.zip https://github.com/opencv/opencv/archive/3.4.4.zip && \
    wget -O opencv_contrib.zip https://github.com/opencv/opencv_contrib/archive/3.4.4.zip && \
    unzip opencv.zip && mv opencv-3.4.4 opencv && \
    unzip opencv_contrib.zip && mv opencv_contrib-3.4.4 opencv_contrib && \
    cd opencv && mkdir build && cd build && \
    cmake -D CMAKE_BUILD_TYPE=RELEASE \
        -D CMAKE_INSTALL_PREFIX=/usr/local \
        -D INSTALL_PYTHON_EXAMPLES=ON \
        -D INSTALL_C_EXAMPLES=OFF \
        -D OPENCV_ENABLE_NONFREE=ON \
        -D PYTHON_EXECUTABLE=python${PYTHON_VERSION} \
        -D OPENCV_EXTRA_MODULES_PATH=~/opencv_contrib/modules \
        -D BUILD_EXAMPLES=OFF .. && \
    make -j8 && make install && sh -c 'echo "/usr/local/lib" >> /etc/ld.so.conf.d/opencv.conf' && ldconfig

FROM python_runtime as main
...
COPY --from=client build /dist/* /dist
COPY --from=open_cv_builder /usr/local/python/cv2/python-${PYTHON_VERSION}/cv2.cpython-${PYTHON_VERSION_RAW}m-x86_64-linux-gnu.so /usr/local/lib/python${PYTHON_VERSION}/dist-packages/cv2.so
COPY --from=open_cv_builder /usr/local/python/cv2/python-${PYTHON_VERSION}/cv2.cpython-${PYTHON_VERSION_RAW}m-x86_64-linux-gnu.so /usr/local/lib/python${PYTHON_VERSION}/dist-packages/

此阶段使用所有内核进行构建。

如果其他阶段并行运行，它们会冻结并通常在命令（wget、apt 等）上超时。

我想在这个阶段运行时阻止其他阶段运行。

【问题讨论】：

我不知道阶段是如何组织的，但这是不是用 COPY --from artifacts 解决的情况？
@JongWonLee 更新了代码示例以更清晰

标签： docker docker-multi-stage-build buildx

【解决方案1】：

并发限制最近被添加到 PR #2049 的 buildkit 中。使用docker buildx create，您可以传递包含max-parallelism 选项的配置文件来限制并发步骤。

【讨论】：

如何将此标志添加到已经存在的默认构建器实例？
@claudio 这是脚本基础架构的一个很好的理由。我没有看到docker buildx update 命令。