簡體   English   中英

apache氣流中的DAG文件在哪里寫入?

[英]where to write DAG files in apache air flow?

我剛開始學習 apache airflow,我在 gcp 和 web 的 composer 中創建了一個環境,服務器工作正常,一切正常,但我只是對在哪里編寫 DAG 文件感到困惑? 我的意思是我想編寫可以多次測試的文件,因為在 web UI 中,它向我顯示了一個存儲桶,我可以在其中存儲文件,但我無法理解在哪里編寫代碼。 我必須在我的機器上安裝 airflow 嗎?

ps - 我知道這是一個愚蠢的問題,任何幫助將不勝感激

您可以在本地安裝它是的。 如果您想在本地進行測試,這是我認為的唯一方法。

您可以使用幾種工具 - 有一個astro CLI 用於管理您的“dag 開發”環境,它由 Astronomer 發布, https://github.com/astronomer/astro-cli

MWAA 也有自己的工具——我想,我認為 Composer 沒有特定於 Composer 的工具。

但是對於“通用”Airflow(應該足以啟動),您可以使用社區管理的快速啟動(使用本地 venv 或 Docker-Compose):

https://airflow.apache.org/docs/apache-airflow/stable/start/index.html

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM