现有MapReduce和YARN（MRv2）之间的差异

Question

有人会告诉我，现有的MapReduce和YARN之间存在差异，因为我发现这两者之间没有明显的差异吗？

PS：我要求比较这些之间的东西。

谢谢！

Answer 1

MRv1使用JobTracker为数据节点创建和分配任务，当群集扩展得足够远时（通常大约4,000个节点），这可能成为资源瓶颈。

MRv2（又名YARN，“又一个资源协商器”）为每个集群都有一个资源管理器，每个数据节点都运行一个节点管理器。 对于每个作业，一个从节点将充当应用程序主节点，监视资源/任务等。

Answer 2

MRv1也称为Hadoop 1，其中HDFS （资源管理和调度）和MapReduce（编程框架）紧密耦合。 由于这种非批处理应用程序无法在hadoop 1上运行。它具有单一的namenode，因此，它不提供高系统可用性和可伸缩性。

MRv2 （又名Hadoop 2）在此版本的hadoop中，资源管理和调度任务与MapReduce分开，MapReduce由YARN（Yet Another Resource Negotiator）分隔。 资源管理和调度层位于MapReduce层之下。 它还提供高系统可用性和可扩展性，因为我们可以创建冗余的NameNode。 快照的新功能，我们可以通过它来备份有助于灾难恢复的文件系统。