如何升级到 Airflow 2.0？

Question

现在 Airflow 2.0 已经发布，我们很高兴尝试一些新功能。

• 从 1.10.11 升级到 Airflow 2.0 的最佳方式是什么？
• 我现有的代码是否可以工作，或者我是否需要更改我的 DAG？

我们将在本周晚些时候开始在 DEV 环境中进行升级以进行测试。

Airflow 1.10.11 和本地执行器和Python3

Answer 1

我们已经在https://airflow.apache.org/docs/apache-airflow/stable/upgrading-to-2.html记录了它

第 1 步：升级到 Python 3

第 2 步：升级到 Airflow 1.10.14（又名 Airflow“桥”版本）

第 3 步：安装并运行 Airflow 升级检查脚本（ https://pypi.org/project/apache-airflow-upgrade-check/ ）

第 4 步：从 Backport Providers 导入算子

第 5 步：升级 Airflow DAG

第 6 步：升级配置设置

第 7 步：升级到 Airflow 2.0

升级检查 package 应该可以帮助您升级。

阅读https://airflow.apache.org/docs/apache-airflow/stable/upgrading-to-2.html#step-3-install-and-run-the-upgrade-check-scripts

Answer 2

该文档缺少信息，即如何在更新版本已经可用的情况下准确升级到 1.10.14。

根据 PIP 文档（ https://pip.pypa.io/en/stable/user_guide/#installing-packages ）这应该工作：

python -m pip install apache-airflow==1.10.14

这似乎对我有用，但之后我无法启动网络服务器。

首先，我必须升级数据库：

airflow upgradedb

其次，启动网络服务器显示了现在“secret_key”必须包含一个真正的密钥的问题。

执行

openssl rand -hex 30

并将十六进制密钥添加到 airflow.cfg 文件中。

然后按照升级文档中的剩余步骤（包括执行检查脚本）进行操作。

由于也没有描述，实际升级到 2.0 应该使用

pip install -U apache-airflow

请特别注意 DB 升级命令中的更改（ airflow db upgrade而不是airflow upgradedb ）。

问候， HerrB92