使用聯合身份驗證在完整集群中安裝apache Hadoop-2.0.0 aplha版本

Question

我已經成功安裝了hadoop穩定版。 但是在安裝hadoop -2.0.0版本時感到困惑。

我想在兩個節點上都使用聯邦在兩個計算機上安裝hadoop-2.0.0-alpha。 rsi-1，rsi-2是主機名。

為實施聯盟，以下屬性的值應該是什么。 這兩台機器也都用於數據節點。

fs.defaulFS dfs.federation.nameservices dfs.namenode.name.dir dfs.datanode.data.dir yarn.nodemanager.localizer.address yarn.resourcemanager.resource-tracker.address yarn.resourcemanager.scheduler.address yarn.resourcemanager.address

還有一點，在hadoop的穩定版本中，我在安裝目錄的conf文件夾下有配置文件。

但是在2.0.0-aplha版本中，存在etc / hadoop目錄，並且沒有mapred-site.xml，hadoop-env.sh。 我需要將共享文件夾下的conf文件夾復制到hadoop-home目錄中嗎？ 還是我需要將這些文件從共享文件夾復制到etc / hadoop目錄中？

問候，拉什米

Answer 1

您可以在sbin文件夾中運行hadoop-setup-conf.sh。 它指導您逐步進行配置。 請記住，當它詢問您輸入目錄路徑時，應使用完整鏈接，例如，當它詢問conf目錄時，應輸入/home/user/Documents/hadoop-2.0.0/etc/hadoop完成后，請記住檢查etc / hadoop中的每個配置文件。 以我的經驗，我在hadoop-env.sh中修改了JAVA_HOME變量，並在core-site.xml，mapred-site.xml中修改了一些屬性。 問候