【问题标题】:Airflow : Error while adding python dependency气流:添加python依赖项时出错
【发布时间】:2019-10-28 08:58:04
【问题描述】:

我正在尝试通过 Install pypi packages 功能将 jaydebeapi 添加到 Airflow(托管在 Google Cloud Composer 上)。下面是配置:

气流版本:1.10.1 jaydebeapi 版本:1.1.1(也尝试使用 0.2.0) 蟒蛇版本:3

更新命令完成后,Airflow UI 返回 502,composer 显示以下错误消息:

Composer 后端超时。当前正在运行的任务是 [stage: TP_DEPLOYMENT_UPDATING response_timestamp { 秒:1560444752 纳秒: 292000000 } ]

好像是Airflow的python版本和jaydebeapi的版本冲突?

【问题讨论】:

    标签: python airflow google-cloud-composer jaydebeapi


    【解决方案1】:

    在过去的几年里,我一直在广泛使用 Jaydebeapi,将所有最新版本都使用,没有任何问题。 不过,我建议使用他们推荐的软件包进行安装:

    pip install apache-airflow[jdbc]
    

    来自https://airflow.apache.org/installation.html

    【讨论】:

      猜你喜欢
      • 2016-02-19
      • 2018-04-25
      • 1970-01-01
      • 1970-01-01
      • 2016-09-11
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2018-11-15
      相关资源
      最近更新 更多