通過Ubuntu 14.04手動安裝Hadoop多節點集群

Question

我是Hadoop的新手。 對於我的College項目，我們有4個VM。 我需要在該服務器上配置一個多模式Hadoop集群（1個主服務器3個從屬服務器）並在其上運行我的webapp。 我將在項目中使用HBase。 通常CentOS用於HDP的安裝和部署，而我則被賦予ubuntu。 我無法使用Apache ambari插件進行安裝，因為Ubuntu不支持該插件。 我需要手動部署它們，因此我嘗試尋找教程。 我尋找了一個在ubuntu上安裝HDP多節點集群的教程，發現了這個[ http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-multi-node-cluster/]，但是太過時了（2010）
我在這里有官方文檔，但是我無法正確遵循它。
[ http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.1-latest/bk_installing_manually_book/content/rpm-chap2-3.html] ，我嘗試關注它們。

有人可以向我建議一些最新的鏈接，該教程提供了相當數量的屏幕快照，用於在Ubuntu 14.04上安裝多節點集群（也可以使用12.04）。

非常感謝！！

Answer 1

我認為Michael Noll教程太舊了。 我找到了這個網站：

• https://www.digitalocean.com/community/tutorials/how-to-install-hadoop-on-ubuntu-13-10

我的大學實驗室中有一個小型集群（帶有5個從屬和一個主控）。 Ubuntu 12.04和Hadoop 2.5.0在那里。 此外，我在Ubuntu 12.04上的Hadoop 1.2.1筆記本電腦中也有一個VM群集（兩個從屬和一個主控）。

但是我無法在Ubuntu 14.04中安裝Hadoop（任何版本）。 我不記得原因，但是我認為這是Java版本的問題（我不檢查）。

希望對您有所幫助！

Answer 2

我可以在同一問題上在Ubuntu 14.04上安裝HDP 2.2，並找到了解決方案。 我在這里記錄了所有內容： http : //www.swiss-scalability.com/2014/12/install-hdp-22-on-ubuntu-1404-trusty.html

簡而言之，魔術發生在這里：

sed -e "s/14.04/12.04/g" -i /etc/*-release

並且您可以安裝或重新啟動ambari-agent，它將能夠與ambari-server通信。