关于Hadoop Metrics

简介

Metrics的英文含义是“度量”，这里可以理解为“监控指标”。关于Hadoop的Metrics，官网直接给出了总结，初学者很难理解，以下以HDFS为例来说明。

打开HDFS Web UI —

http://namenode:50070/dfshealth.html#tab-overview

，如下所示，







从该网址我们可以得到整个集群容量（HDFS）的各种信息，实际上上述信息也可以通过请求

http://namenode:50070/jmx

全部得到，如下所示。



也可以在请求中加参数获取特定的信息。当然上述是对namenode的请求，对datanode，HBase，Hive的请求也类似，不过host和端口号不同（笔记–Hadoop端口.md），详情见下节。

深入了解

How to monitor Hadoop metrics - Datadog和How to collect Hadoop metrics - Datadog对Hadoop Metrics: 作了全面的总结，非常详细。

通过 JMX 获取Hadoop/HBase监控数据：介绍了使用JMX获取Hadoop/HBase的监控数据。

Enabling JMX Monitoring for Hadoop And Hive ：介绍了使用JMX获取Hadoop和Hive的监控数据。

Hadoop集群监控：jmx信息获取：介绍了jmx请求链接的书写方式。