气流弃用警告

Question

我正在使用官方 Docker 映像运行分布式 Airflow 2.4.0 安装程序。所有容器都使用相同的.env 文件和相同版本的 Airflow 图像。当我登录其中一个 Airflow 容器时，我收到此警告：

/home/airflow/.local/lib/python3.7/site-packages/airflow/configuration.py:545: DeprecationWarning: The sql_alchemy_conn option in [core] has been moved to the sql_alchemy_conn option in [database] - the old setting has been used, but please update your config.
  option = self._get_environment_variables(deprecated_key, deprecated_section, key, section)
/home/airflow/.local/lib/python3.7/site-packages/airflow/configuration.py:545: DeprecationWarning: The auth_backend option in [api] has been renamed to auth_backends - the old setting has been used, but please update your config.
  option = self._get_environment_variables(deprecated_key, deprecated_section, key, section)
/home/airflow/.local/lib/python3.7/site-packages/airflow/configuration.py:367: FutureWarning: The auth_backends setting in [api] has had airflow.api.auth.backend.session added in the running config, which is needed by the UI. Please update your config before Apache Airflow 3.0.
  FutureWarning,

我检查了容器内的airflow.cfg，它有最新的变量。为什么我仍然收到警告消息？

Answer 1

由于该部分，您会看到这些变量。 airflow.cfg 是带节的配置文件。设置应该在适当的部分。

在您的情况下，您的 airflow.cfg 具有 sql_alchemy_conn，您可以在其中覆盖默认值。在 2.3.0 之前，此设置位于 core section 中，而在 2.3.0 中，它已移至 database section。 （见PR）

您需要做的只是打开airflow.cfg并将设置移动到适当的部分。例如：

[core]

sql_alchemy_conn = sqlite:///{AIRFLOW_HOME}/airflow.db

到：

[database]

sql_alchemy_conn = sqlite:///{AIRFLOW_HOME}/airflow.db

为什么会这样，在docs中也有解释。通过格式为 AIRFLOW__{SECTION}__{KEY} 的环境变量进行气流参考设置，因此在这种情况下它将是： AIRFLOW__DATABASE__SQL_ALCHEMY_CONN 因此该部分对于查找变量很重要。