在YARN中設置作業優先級

Question

我的群集（HDP）使用YARN容量調度程序。 nameNode UI顯示版本2.7.1.2.4.3.30。
我正在嘗試在蜂巢腳本中將作業優先級設置為“高”：

set mapreduce.job.priority=HIGH; 

但是，我認為資源分配沒有區別。 我在yarn-site.xml yarn.scheduler.fair.preemption不到屬性yarn.scheduler.fair.preemption 。 此外，Tez的等效屬性是什么？

Answer 1

因為您使用的是Hadoop 2.7.1，所以必須在yarn-site.xml中顯式設置yarn.scheduler.fair.preemption。 不將其設置為true會導致優先級無法使用，因為yarn.scheduler.fair.preemption = false的默認值。

關於您關於Tez的問題，沒有類似的問題。 您可能想在這里閱讀更多有關搶占的信息 ！