使用 EU BigQuery db 时，Google Cloud DataPrep 失败并出现跨区域错误

Question

我今天在开发一些新流程时遇到了一些问题 - 第一个我完成了从欧盟地区 BigQuery 数据库读取和加载的工作。

为了隔离问题，我采取了以下步骤：

1. 在欧盟地区创建一个新的 BQ 数据库
2. 通过上传 CSV 创建表格
3. 编写一个流，从该表中读取并输出到同一数据库中的新表中，无需任何转换

并且作业仍然失败并显示以下消息：

status: {
    "errorResult": {
        "message": "Cannot read and write in different locations: source: EU, destination: US",
        "reason": "invalid"
    },
    "errors": [{
        "message": "Cannot read and write in different locations: source: EU, destination: US",
        "reason": "invalid"
    }],
    "state": "DONE"
}

这是测试流程：

这是产生的数据流：

Answer 1

确保配置文件中设置的目录位于同一位置 (EU)。 可以在用户配置文件页面中更改配置文件设置。 请参阅https://cloud.google.com/dataprep/docs/html/User-Profile-Page_57344911

https://community.trifacta.com/s/question/0D51L00004pm0mASAQ/whenever-i-try-to-import-a-data-set-from-bigquery-for-example-it-gives 中报告了类似的问题-me-this-errorrequested-data-was-not-foundi-am-using-native-bigquery-tables-these-very-same-tables-i-have-been-able-to-import-and-wrangle-successfully -在意大利面的想法

Answer 2

我的欧盟数据源也有同样的问题。 即使我在 UE 中的 BQ 中确实有源 - DataPrep 默认暂存桶在美国。

我重新创建了相同的存储桶结构，但使用了 EU 位置，因为我无法修改由 Dataprep 暂存存储桶自动创建的位置。
这个链接： https ://cloud.google.com/dataprep/docs/html/User-Profile-Page_57344911 帮助找出在何处更改临时、作业运行、上传路径。