單節點hadoop中有並行性嗎？

Question

我是hadoop的新手。 我可以在單節點hadoop中運行mahout示例。 單節點hadoop中有並行性嗎？ （例如，在Jobs，Chunk中）（在我的工作負載中，Hadoop的運行速度比WEKA快）

Answer 1

您所指的模式與偽分布式模式相同。 這是一個單節點群集。 在此，您有一個名稱節點，一個作業跟蹤程序以及一個正在運行的數據節點和任務跟蹤程序。 您可以使用“ jps”命令進行驗證。

默認情況下，tasktracker最多可以運行兩個map並並行減少任務（mapred.tasktracker.map.tasks.maximum和mapred.tasktracker.reduce.tasks.maximum），因此您實際上會在一台計算機上看到一些並發性。