【问题标题】:Start and stop Airflow?启动和停止气流?
【发布时间】:2018-06-12 07:52:46
【问题描述】:

我正在测试气流谷歌作曲家,但现在我并不一直使用它,而且维护 3 VM 需要花钱。有没有办法停止/启动 google composer/airflow ?

是否有可能以编程方式进行? (我想每天早上 9 点开始,每天晚上 9 点和周末停止)

现在为了停止大部分成本,我更改了 Kubernetes Engine 中的 VM 数量(我从 3 切换到 0 来停止它,然后切换到 0 到 3 来启动它)但也许有更好的方法。

【问题讨论】:

  • 这有什么更新吗?

标签: airflow google-cloud-composer


【解决方案1】:

没有官方支持的机制来暂停 Composer 环境。即使您可以通过减小集群大小来降低 VM 成本,但您仍需要支付 App Engine 和 Cloud SQL 费用。

【讨论】:

    【解决方案2】:

    无法将 Composer 环境中的 GKE 节点数更改为 0。它需要最少 3 个节点。

    【讨论】:

      【解决方案3】:

      我也面临同样的问题。根据我的研究,最好的解决方案是让另一个 VM 运行 CRON 作业来关闭和打开环境。

      由于开启环境需要一些时间,如果您必须每小时运行一次任务,我认为最好的选择是保持环境开启。

      【讨论】:

        猜你喜欢
        • 1970-01-01
        • 1970-01-01
        • 2016-08-19
        • 2016-07-19
        • 2016-12-19
        • 1970-01-01
        • 1970-01-01
        • 2021-06-20
        • 2011-08-18
        相关资源
        最近更新 更多