繁体 English 中英

Hadoop HDFS Java客户端用法

[英]Hadoop HDFS java client usage

原文 2012-06-26 10:06:15 5 1 java/ hadoop

我有一个Java应用程序，需要读取和写入文件到HDFS。 我确实使用FileSystem fs = FileSystem.get（configuration）;

而且效果很好。

现在的问题是：我应该保留此引用并将其作为单例使用，还是仅使用一次并每次获取一个新的引用？

如果重要的话，我需要说该应用程序针对的流量很高。

谢谢

1 个解决方案

我认为答案取决于两个数字的关系-网络带宽（HDFS客户端和HDFS群集之间）和每秒可以馈入HDFS客户端的数据量。 如果第一个更高-那么同时具有几个连接是有意义的。
通常，2-3个并发连接是最佳的

Hadoop HDFS，Java客户端无法连接到HDFS

[英]Hadoop hdfs, java client cannot connect to hdfs

Hadoop Flume Java客户端将日志传输到hdfs

[英]Hadoop Flume java client to transfer log to hdfs

用Java测试Hadoop HDFS

[英]Test Hadoop HDFS in Java

Java / Scala远程HDFS用法

[英]Java/Scala remote HDFS usage

Java Hadoop 不完整 HDFS URI，无主机

[英]Java Hadoop Incomplete HDFS URI, no host

Hadoop：如何使用Java应用程序写入HDFS

[英]Hadoop: How to write to HDFS using a Java application

CMAKE-COMPILE 在 hadoop-hdfs-native 客户端中失败

[英]CMAKE-COMPILE fail in hadoop-hdfs-native client

hadoop hdfs java-将文件列表从hdfs复制到hdfs的最佳方法是什么

[英]hadoop hdfs java - what is the best way to copy a list of files from hdfs to hdfs

Hadoop 2.7-在HDFS中创建目录的简单Java代码

[英]Hadoop 2.7 - Simple Java code to create directory in HDFS

Hadoop HDFS文件拆分为哪些Java文件

[英]Which Java file does Hadoop HDFS file splitting into Blocks

暂无

暂无

声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

相关问题 Hadoop HDFS，Java客户端无法连接到HDFS Hadoop Flume Java客户端将日志传输到hdfs 用Java测试Hadoop HDFS Java / Scala远程HDFS用法 Java Hadoop 不完整 HDFS URI，无主机 Hadoop：如何使用Java应用程序写入HDFS CMAKE-COMPILE 在 hadoop-hdfs-native 客户端中失败 hadoop hdfs java-将文件列表从hdfs复制到hdfs的最佳方法是什么 Hadoop 2.7-在HDFS中创建目录的简单Java代码 Hadoop HDFS文件拆分为哪些Java文件

相关标签

粤ICP备18138465号 © 2020-2024 STACKOOM.COM