CDH4：將新節點添加到現有集群

Question

我已經在ubuntu上使用CDH4成功創建了hadoop集群。 我用一個master（master）和一個slave（slave1）創建了這個。 現在，我想再添加一個集群。 為此，我克隆了slave2並更新了主機和ssh。 然后，我使用所有節點中的所有datanode dns名稱更新了conf / slaves文件，並重新啟動了所有內容。 但是它並沒有檢測到新的datanode，而是僅顯示了舊的slave1而不是slave2。 有人可以幫我嗎？ 我用過cdh4-repository_1.0_all.deb

Answer 1

@ user2009755，您只需要在主文件中創建一個主文件和從文件。 在$ HADOOP_HOME / etc / hadoop中的配置文件中，對指向主節點的URI進行必要的更改。

注意：嘗試格式化namenode並刪除tmp文件（通常是/ tmp / *），但是如果您在core-site.xml對其進行了更改，請在所有節點中格式化該目錄並啟動所有守護程序，它對我有用。

Answer 2

原因很多

您是否已將conf / hdfs-site.xml中的dfs.replication值更改為3？

用cammands檢查master主機上的hduser @ master：〜$ ssh slave ，如果沒有，則應顯示從終端，然后執行此cammand- hduser @ master：〜$ ssh-copy-id -i $ HOME / .ssh / id_rsa.pub hduser @奴隸

完全了解請參閱此鏈接

http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-multi-node-cluster/