RuntimeError: Split pattern data/* 不匹配任何文件

Question

我目前正在尝试将TFX-TFRS 教程转换为 Airflow 管道。 当我使用 LocalDagRunner() 运行此管道时，它执行时不会出错。 当我使用 AirflowDagRunner() 时，它会引发以下错误（通过 Airflow Web-UI 触发 Airflow 管道）：

RuntimeError: Split pattern data/* 不匹配任何文件。

数据文件夹内有一个 CSV 数据集。
在这两种情况下，我都使用标准的 CsvExampleGen 组件。

这是数据集的路径，它被管道摄取：

PIPELINE_NAME = 'TFRS-ranking'

# Directory where MovieLens 100K rating data lives
DATA_ROOT = os.path.join('data', PIPELINE_NAME)

Answer 1

我通过为 Airflow 管道提供数据的绝对路径而不是相对路径来解决此问题。