【问题标题】:Apache Airflow - Cannot setup Airflow on CentOS7 -Apache Airflow - 无法在 CentOS7 上设置 Airflow -
【发布时间】:2021-02-17 23:37:03
【问题描述】:

我正在尝试使用容器 CentOS7 运行 Apache Airflow。我正在使用 Python 3.6.9 运行。我已经使用 pip 安装了 apache 气流,但是当我尝试使用 airflow initdb 设置数据库时,我收到以下错误:

(app-root) sh-4.2$ airflow version
Traceback (most recent call last):
  File "/opt/app-root/bin/airflow", line 5, in <module>
    from airflow.__main__ import main
  File "/opt/app-root/lib/python3.6/site-packages/airflow/__init__.py", line 34, in <module>
    from airflow import settings
  File "/opt/app-root/lib/python3.6/site-packages/airflow/settings.py", line 37, in <module>
    from airflow.configuration import AIRFLOW_HOME, WEBSERVER_CONFIG, conf  # NOQA F401
  File "/opt/app-root/lib/python3.6/site-packages/airflow/configuration.py", line 1007, in <module>
    conf.validate()
  File "/opt/app-root/lib/python3.6/site-packages/airflow/configuration.py", line 209, in validate
    self._validate_config_dependencies()
  File "/opt/app-root/lib/python3.6/site-packages/airflow/configuration.py", line 246, in _validate_config_dependencies
    raise AirflowConfigException(f"error: cannot use sqlite version < {min_sqlite_version}")
airflow.exceptions.AirflowConfigException: error: cannot use sqlite version < 3.15.0

我可以做些什么来解决这个问题?

【问题讨论】:

    标签: docker sqlite airflow centos7


    【解决方案1】:

    您需要升级您的 sqlite 版本:

    yum update
    yum install sqlite
    

    docker run -it centos:latest 为例:

    [root@d09e5ee37969 /]# sqlite3 --version
    3.26.0 2018-12-01 12:34:55 bf8c1b2b7a5960c282e543b9c293686dccff272512d08865f4600fb58238alt1
    

    Airflow >=2.0.0 仅适用于 Sqlite 3.15.0+

    【讨论】:

    • 嗨@kaxil 如果我们想使用postgresql,我们还需要安装Sqlite 3.15.0+吗?
    • 不,如果您使用的是 Postgres 或 MySQL,则根本不需要安装 Sqlite
    • 谢谢。但有趣的是,here 中描述了 sqlite 错误
    • 这基本上意味着您可能已经设置了sql_alchemy_conn 配置。运行airflow config list | grep sql_alchemy_conn进行验证
    猜你喜欢
    • 2018-11-07
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2018-07-01
    • 1970-01-01
    • 2023-02-08
    • 2021-12-25
    相关资源
    最近更新 更多