簡體   English   中英

如何從映射器或化簡器內部獲取Hadoop任務跟蹤器信息

[英]How to get Hadoop task tracker info from inside a mapper or reducer

您的Mapper和Reducer類始終在特定的任務跟蹤器上運行。 但是,如何獲得任務跟蹤器上的信息? 傳遞給setup方法的唯一一件事是TaskInputOutputContext。 您可以獲取任務嘗試ID,但是如何將其映射到TaskTracker對象? (例如,為了獲得主機名,相應的作業服務器等是的,我知道你可以通過獲取主機名java.net.InetAddress.getLocalHost().getHostName()但是這是Hadoop的以外完全。)

您可以隨時訪問MapReduce網絡用戶界面,並查看所有這些信息。只需單擊要分析的作業,然后您就可以看到幾乎所有單個地圖和簡化任務的內容。

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM