繁体   English   中英

Hadoop中的主节点资源使用情况

[英]Master node resource usage in Hadoop

我在Hadoop群集中有一个主节点。 它也可以是工作者节点,也可以不是。 如何获得有关用于协调其他节点的主节点的CPU /内存使用情况以及有关其自身的工作节点使用情况的信息? 例如,40%的内存或CPU用于其主节点任务(其他工作程序节点的协调),30%的内存用于工作程序节点任务(主节点机器内部的工作程序节点)。 有办法知道吗?

谢谢。

是的,通过使用NamenodeDatanode JVM任务的JMX监视 ,有一种完美的方式来处理该场景。

您将能够跟踪namenode,datanode,jobtracker JVM进程的各种性能指标。

请参考

http://blog.cloudera.com/blog/2009/03/hadoop-metrics/ https://theholyjava.wordpress.com/2012/09/21/enabling-jmx-monitoring-for-hadoop-and-hive/

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM