未使用 firestore 对大查询表进行分区 将 Collections 导出到 BigQuery 扩展
[英]Big Query Table not being partitioned with firestore Export Collections to BigQuery extension
问题描述
我正在使用Export Collections to BigQuery extension with firestore 将数据导出到 bigquery。我可以将数据导出到大查询，但即使我在创建时配置扩展时启用了扩展分区的表，表也没有分区。
1 个解决方案
解决方案1
0 2022-02-09 10:04:03
我今天在将数据从 Firestore 导出到 BigQuery 并使用npx firebaseextensions/fs-bq-import-collection命令进行历史加载时遇到了同样的问题。
这些是我的发现。 如果您将扩展配置为根据摄取时间进行分区，则必须等待第一条新记录触发该流式扩展并创建分区表。
如果你只是创建一个扩展并立即执行历史加载，则创建的表不会被分区。 我今天测试了 3 次。
问你一个问题——你是执行历史加载还是只导入新记录？
将查询结果从表写入 BigQuery 中的分区聚簇表
[英]Write query results from a table to a partitioned - clustered table in BigQuery
bigquery：从查询结果创建分区表不会分区旧时间戳
[英]bigquery: create partitioned table from query results does NOT partition old timestamps
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.