Hadoop 2.7.2 - 错误：无法找到或加载主类 org.apache.hadoop.hdfs.server.namenode.NameNode

Question

我是新手，我正在尝试找出解决此问题的方法。 我已经按照这个教程在 Ubuntu 15.10 上设置 Hadoop 2.7.2

http://idroot.net/tutorials/how-to-install-apache-hadoop-on-ubuntu-14-04/

当我启动“hdfs namenode 格式”时，我继续收到此错误错误：无法找到或加载主类 org.apache.hadoop.hdfs.server.namenode.NameNode

这是 bashrc 的内容

export JAVA_HOME=/usr/lib/jvm/java-8-oracle

export HADOOP_INSTALL=/usr/local/hadoop

export PATH=$PATH:$HADOOP_INSTALL/bin

export PATH=$PATH:$HADOOP_INSTALL/sbin

export HADOOP_MAPRED_HOME=$HADOOP_INSTALL

export HADOOP_COMMON_HOME=$HADOOP_INSTALL

export HADOOP_HDFS_HOME=$HADOOP_INSTALL

export YARN_HOME=$HADOOP_INSTALL

export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_INSTALL/lib/native

export HADOOP_OPTS="-Djava.library.path=$HADOOP_INSTALL/lib"

谁能帮我解决这个（我认为是愚蠢的）问题？

非常感谢卡玛

Answer 1

我也有这个错误。 对我来说，只是因为/share/hadoop/yarn/文件夹中的一些文件丢失了，这是hadoop.tar.gz下载不完整导致的，仍然可以通过命令行进行抽象。 可以帮到你，加油。

Answer 2

首先确保目录namenode和datanode已经存在于hdfs-site.xml文件中指定的位置。 您可以使用命令mkdir来创建这些。

然后尝试使用格式化名称节点

hdfs namenode -format

或者

/usr/local/hadoop/bin/hdfs namenode -format

请注意连字符。

---

我的 hadoop bashrc 配置：

#HADOOP VARIABLES START
export HADOOP_HOME=/usr/local/hadoop
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_HOME=$HADOOP_HOME
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"
export HADOOP_CLASSPATH=${JAVA_HOME}/lib/tools.jar
#HADOOP VARIABLES END

Answer 3

使用灰烬脚本解决了问题。 主要区别在于使用 open jdk 而不是 oracle jre。

谢谢您的帮助！

Answer 4

此问题背后的一个原因可能是用户定义的HDFS_DIR环境变量。 这是由脚本获取的，例如libexec/hadoop-functions.sh的以下几行：

HDFS_DIR=${HDFS_DIR:-"share/hadoop/hdfs"}
...
if [[ -z "${HADOOP_HDFS_HOME}" ]] &&
   [[ -d "${HADOOP_HOME}/${HDFS_DIR}" ]]; then
  export HADOOP_HDFS_HOME="${HADOOP_HOME}"
fi

解决方案是避免定义环境变量HDFS_DIR 。

就我而言，使用sudo有所帮助，但原因错误：权限没有问题，但环境变量有问题。