如何在基於 airflow 的 docker 上安裝 Kube.netes 操作員和執行器

Question

我正在使用 Puckels docker 文件來構建和運行 dags。 我正在嘗試創建可以在 Kube.netes pod 上執行的新 dag，但我不確定如何讓它在 docker 的 airflow 容器上運行。 我嘗試添加到 docker 文件

pip install 'apache-airflow[kubernetes]'

然后我嘗試將以下行添加到我的 dag 中：

from airflow.contrib.operators import KubernetesOperator

這是我收到的錯誤消息：

cannot import name 'KubernetesOperator' from 'airflow.contrib.operators' (unknown location)

Answer 1

Kube.netesPodOperator在kube.netes_pod_operator下定義。 你應該使用：

from airflow.contrib.operators.kubernetes_pod_operator import KubernetesPodOperator

另請查看此 Airflow 文檔頁面。