簡體   English   中英

hadoop mongodb連接器-輸出數據不是mongodb,而是hdfs

[英]hadoop mongodb connector - output data not as mongodb but hdfs

是否可以從hadoop mongodb插件連接器中讀取mongodb數據,使用mapreduce hadoop處理數據,並且在輸出結果中不使用hadoop mongodb插件連接器,而將mapreduce hadoop的結果照原樣保留在hdfs中?

我認為先前關於SO的答案在稍作改動的情況下回答了您的問題:

是否可以讀取MongoDB數據,使用Hadoop處理並將其輸出到RDBS(MySQL)中?

主要區別在於您可以將OutputFormatClass設置為類似以下內容:

job.setOutputFormatClass( SequenceFileOutputFormat.class );

您還需要在要將數據保存到的HDFS上設置輸出路徑。 請參閱其WordCount示例以獲取完整的代碼示例,但是將以上內容用作輸出格式,而不是MongoOutputFormat。

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM