從Avro讀取並寫入Mapper中的多個HBase
[英]Read from Avro and Write to multiple HBase in Mapper
問題描述
我已使用MultiTableOutputFormat並將其成功寫入TableReducer多個HBase表中。 但是如何在僅Mapper工作中實現這一目標？
我嘗試使用TableMapper但它只有<KEYOUT,VALUEOUT>而沒有<KEYIN,VALUEIN,KEYOUT,VALUEOUT> 。 因此，我無法讀取文本文件。
我的Mapper正在讀取文本/ Avro文件並進行處理，然后再推送到HBase。 那可能嗎？
1 個解決方案
解決方案1
0 2015-02-04 15:30:17
您可以打開HBase連接，並在實現的Mapper中自己編寫PUT操作
是否可以從Hadoop中的同一reducer寫入HBase和多個文件
[英]is it possible to write to HBase and multiple files from the same reducer in Hadoop
如何從HBase讀取記錄然后存儲到Spark RDD（彈性分布式數據集）中； 並讀取一條RDD記錄，然后寫入HBase？
[英]How to read a record from HBase then store into Spark RDD (Resilient Distributed Datasets); and read one RDD record then write into HBase?
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.