簡體   English   中英

Apache Beam-BigQueryIO讀取投影

[英]Apache Beam - BigQueryIO read Projection

我有一個從BigQuery表讀取的數據流管道。 但是,在讀取數據時,除了使用read(SerializableFunction)readTableRows()方法讀取所有記錄外,沒有其他選擇。 我想知道使用這些方法時,是否可以提供類似列的投影(類似於HBaseIO Scan addColumn()過濾器)。

我知道從BigQuery加載數據時可以使用執行查詢的選項(使用readTableRows()。fromQuery() ),但是我想知道是否有類似的選項可以像在HBaseIO中那樣進行投影。

到目前為止,fromQuery()是唯一的選擇,但是將來可能會改變。

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM