簡體 English 中英

Hadoop HDFS Java客戶端用法

[英]Hadoop HDFS java client usage

原文 2012-06-26 10:06:15 4 1 java/ hadoop

我有一個Java應用程序，需要讀取和寫入文件到HDFS。 我確實使用FileSystem fs = FileSystem.get（configuration）;

而且效果很好。

現在的問題是：我應該保留此引用並將其作為單例使用，還是僅使用一次並每次獲取一個新的引用？

如果重要的話，我需要說該應用程序針對的流量很高。

謝謝

1 個解決方案

我認為答案取決於兩個數字的關系-網絡帶寬（HDFS客戶端和HDFS群集之間）和每秒可以饋入HDFS客戶端的數據量。 如果第一個更高-那么同時具有幾個連接是有意義的。
通常，2-3個並發連接是最佳的

Hadoop HDFS，Java客戶端無法連接到HDFS

[英]Hadoop hdfs, java client cannot connect to hdfs

Hadoop Flume Java客戶端將日志傳輸到hdfs

[英]Hadoop Flume java client to transfer log to hdfs

用Java測試Hadoop HDFS

[英]Test Hadoop HDFS in Java

Java / Scala遠程HDFS用法

[英]Java/Scala remote HDFS usage

Java Hadoop 不完整 HDFS URI，無主機

[英]Java Hadoop Incomplete HDFS URI, no host

Hadoop：如何使用Java應用程序寫入HDFS

[英]Hadoop: How to write to HDFS using a Java application

CMAKE-COMPILE 在 hadoop-hdfs-native 客戶端中失敗

[英]CMAKE-COMPILE fail in hadoop-hdfs-native client

hadoop hdfs java-將文件列表從hdfs復制到hdfs的最佳方法是什么

[英]hadoop hdfs java - what is the best way to copy a list of files from hdfs to hdfs

Hadoop 2.7-在HDFS中創建目錄的簡單Java代碼

[英]Hadoop 2.7 - Simple Java code to create directory in HDFS

Hadoop HDFS文件拆分為哪些Java文件

[英]Which Java file does Hadoop HDFS file splitting into Blocks

暫無

暫無

聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

相關問題 Hadoop HDFS，Java客戶端無法連接到HDFS Hadoop Flume Java客戶端將日志傳輸到hdfs 用Java測試Hadoop HDFS Java / Scala遠程HDFS用法 Java Hadoop 不完整 HDFS URI，無主機 Hadoop：如何使用Java應用程序寫入HDFS CMAKE-COMPILE 在 hadoop-hdfs-native 客戶端中失敗 hadoop hdfs java-將文件列表從hdfs復制到hdfs的最佳方法是什么 Hadoop 2.7-在HDFS中創建目錄的簡單Java代碼 Hadoop HDFS文件拆分為哪些Java文件

相關標簽

粵ICP備18138465號 © 2020-2024 STACKOOM.COM