使用 KubernetesExecutor 将 ConfigMap 挂载到 Airflow Worker Pod

Question

我有一个场景，我想使用 Helm 来部署每个使用 KubernetesExecutor 的环境 Airflow 配置。

我遇到的问题是，当 KubernetesExecutor 生成它们时，我需要在 Worker Pod 中为每个环境 ConfigMap 挂载调度程序。

我已经在 Web 和 Scheduler pod 中很好地安装了这些 ConfigMap，但我没有看到告诉 KubernetesExecutor 安装特定 ConfigMap 的方法。

我在文档中没有看到如何做到这一点，但我不是唯一一个希望他们的 Docker 映像与环境无关并将所有内容抽象到 Helm 级别的人。

任何建议将不胜感激:)

谢谢！

Answer 1

我相信最简单的方法是在airflow.cfg 中指定env_from_configmap_ref 设置，如here 所述。如果 configmap 在不同环境中的名称相同，这应该很简单，例如

[kubernetes]
...
env_from_configmap_ref = <your-airflow-configmap>
...

如果您在不同的环境中有不同名称的配置映射（并且无法使命名保持一致），那么您可能需要在配置映射本身中指定 airflow.cfg，例如 this 示例。