如何使用自定义容器镜像部署谷歌云功能答案

【问题标题】：How to deploy google cloud functions using custom container image如何使用自定义容器镜像部署谷歌云功能
【发布时间】：2021-02-12 02:30:46
【问题描述】：

为了在我的谷歌云功能中启用 webdriver，我使用 docker 文件创建了一个自定义容器：

FROM python:3.7
COPY . /
WORKDIR /
RUN pip3 install -r requirements.txt
RUN apt-get update 
RUN apt-get install -y gconf-service libasound2 libatk1.0-0 libcairo2 libcups2 libfontconfig1 libgdk-pixbuf2.0-0 libgtk-3-0 libnspr4 libpango-1.0-0 libxss1 fonts-liberation libappindicator1 libnss3 lsb-release xdg-utils

#download and install chrome
RUN wget https://dl.google.com/linux/direct/google-chrome-stable_current_amd64.deb
RUN dpkg -i google-chrome-stable_current_amd64.deb; apt-get -fy install

#install python dependencies
COPY requirements.txt requirements.txt 
RUN pip install -r ./requirements.txt 

# Downloading gcloud package
RUN curl https://dl.google.com/dl/cloudsdk/release/google-cloud-sdk.tar.gz > /tmp/google-cloud-sdk.tar.gz

# Installing the package
RUN mkdir -p /usr/local/gcloud \
  && tar -C /usr/local/gcloud -xvf /tmp/google-cloud-sdk.tar.gz \
  && /usr/local/gcloud/google-cloud-sdk/install.sh

# Adding the package path to local
ENV PATH $PATH:/usr/local/gcloud/google-cloud-sdk/bin

#some envs
ENV PORT 5000

#copy local files
COPY . . 

CMD exec gunicorn --bind :${PORT} --workers 1 --threads 8 main:app 
ENTRYPOINT ["webcrawler"]

我在这个 docker 中安装了 gcloud，这样我就可以使用 gcloud deploy 来部署我的云功能。然后，我使用这个 cloudbuild.yaml 部署我的脚本：

steps:
  - name: 'us-central1-docker.pkg.dev/$PROJECT_ID/webcrawler-repo/webcrawler:tag1'
    entrypoint: 'gcloud'
    args: ['functions', 'deploy', 'MY_FUN', '--trigger-topic=MY_TOPIC', '--runtime=python37', '--entry-point=main', '--region=us-central1', '--memory=512MB', '--timeout=540s']
    id: 'deploying MY_FUN'
    dir: 'MY_DIR'

但是，我的部署最终得到了这个错误：

ERROR: (gcloud.functions.deploy) OperationError: code=3, message=Build failed: invalid storage source object "MY_FUN-ba7acf95-4297-46b3-b76e-1c25ba21ba03/version-14/function-source.zip" in bucket "gcf-sources-967732204245-us-central1": failed to get storage object: Get "https://storage.googleapis.com/storage/v1/b/gcf-sources-967732204245-us-central1/o/MY_FUN-ba7acf95-4297-46b3-b76e-1c25ba21ba03%2Fversion-14%2Ffunction-source.zip?alt=json&prettyPrint=false": RPC::UNREACHABLE: gslb: no reachable backends
ERROR
ERROR: build step 0 "us-central1-docker.pkg.dev/PROJECT_ID/webcrawler-repo/webcrawler:tag1" failed: step exited with non-zero status: 1

知道如何解决这个问题吗？

谢谢！

【问题讨论】：

我相信，如果您想使用定制的 Docker 容器来运行您的应用程序，Cloud Run 是一个更好的选择。 Cloud Functions 提供了一个名为 Buildpack 的工具来扩展 Cloud Function 的运行时并安装您需要的包。 Github page 包含扩展运行时和构建映像所需的所有有用信息。

标签： python docker google-cloud-platform google-cloud-functions gcloud

【解决方案1】：

云函数允许您仅部署您的代码。使用 buildpack 自动打包到容器中。

如果您已经有一个容器，最好的解决方案是将其部署在Cloud Run 上。如果你的网络服务器监听 5000 端口，在部署过程中不要忘记override this value（使用--port 参数）。

要将您的 PubSub 主题插入您的 Cloud Run 服务，您有 2 个解决方案

手动创建PubSub push subscription to your Cloud Run service
或者你可以使用EventArc to plug it to your Cloud Run service

在这两种情况下，您都需要在传递给 PubSub 推送订阅或 EventArc 的 Cloud Run 服务上使用具有 run.invoker 角色的服务帐户来确保安全

【讨论】：