如何查看Airflow中BashOperator的output？

Question

我對 Airflow 很陌生，我想知道如果我執行一個 bash 運算符，我們如何獲得該運算符的控制台 output？ 我想知道設置xcom_push = true是否可以解決問題？ 我很高興有人能回答這個問題：）

Answer 1

如果xcom_push為True ，當 bash 命令完成時，只有寫入標准輸出的最后一行也將被推送到 XCom。

相關源碼： https://github.com/apache/airflow/blob/1.10.11/airflow/operators/bash_operator.py#L167-L168

Answer 2

要添加到@kaxil 的答案（因為我沒有足夠的聲譽來評論他的答案）：

如果您的bash_command返回要包含在 xcom 中的多行，則添加它以在一行上返回所有內容：

bash_command="<COMMAND> | tr '\n' '||'",

Answer 3

對於那些使用 Airflow 2+ 的用戶，BashOperator 現在返回整個 output （ source ），而不僅僅是最后一行，並且不需要指定do_xcom_push （2+ 中的新名稱而不是xcom_push ），因為它默認為 true。