Hadoop hdfs 显示 ls: `/home/hduser/input/': No such file or directory 错误

Question

我已经使用本教程在单台机器上安装了Hadoop 2.6 。 我使用的是 Ubuntu 12.04 机器和 Java 版本 1.6.0_27。

我为 Hadoop 操作创建了单独的用户作为hduser 。 我已经将HADOOP_HOME环境变量的值设置为/usr/local/hadoop ，我在其中提取了 Hadoop 发行版。

现在我在做一个例子。 但是当我执行命令$HADOOP_HOME/bin/hdfs dfs -ls /home/hduser/input/它给出以下错误 -

15/01/02 18:32:38 WARN util.NativeCodeLoader：无法为您的平台加载本机 hadoop 库...在适用的情况下使用内置 Java 类 ls：`/home/hduser/input/'：没有这样的文件或目录

我也试过命令： $HADOOP_HOME/bin/hdfs dfs -mkdir /home/hduser/input/ ，但仍然得到同样的错误。

当我运行命令jps它显示 -

16023 SecondaryNameNode
16200 ResourceManager
16432 NodeManager
18971 Jps
15503 NameNode

它没有显示JobTracker和TaskTracker 的任何进程。

如何解决此错误并启动/列出JobTracker和TaskTracker的进程？

Answer 1

您正在尝试使用 hdfs 访问本地目录。 尝试以下步骤：

export PATH=$HADOOP_HOME/bin:$PATH ##Make this entry in your ~/.bashrc file
hdfs dfs -mkdir /user
hdfs dfs -mkdir /user/hduser
hdfs dfs -mkdir /user/hduser/input
hdfs dfs -ls /user/hduser/input
echo "Hello World" > file01
hadoop fs -copyFromLocal /user/hduser/input
hadoop fs -cat /user/hduser/input/file01