Apache Beam-BigQueryIO读取投影

Question

我有一个从BigQuery表读取的数据流管道。 但是，在读取数据时，除了使用read（SerializableFunction）或readTableRows（）方法读取所有记录外，没有其他选择。 我想知道使用这些方法时，是否可以提供类似列的投影（类似于HBaseIO Scan addColumn（）过滤器）。

我知道从BigQuery加载数据时可以使用执行查询的选项（使用readTableRows（）。fromQuery（） ），但是我想知道是否有类似的选项可以像在HBaseIO中那样进行投影。

Answer 1

到目前为止，fromQuery（）是唯一的选择，但是将来可能会改变。