关于Hadoop Metrics,HadoopMetrics
简介
Metrics的英文含义是“度量”,这里可以理解为“监控指标”。关于Hadoop的Metrics,官网直接给出了总结,初学者很难理解,以下以HDFS为例来说明。
打开HDFS Web UI — http://namenode:50070/dfshealth.html#tab-overview,如下所示,
从该网址我们可以得到整个集群容量(HDFS)的各种信息,实际上上述信息也可以通过请求http://namenode:50070/jmx全部得到,如下所示。
也可以在请求中加参数获取特定的信息。当然上述是对namenode的请求,对datanode,HBase,Hive的请求也类似,不过host和端口号不同(笔记–Hadoop端口.md),详情见下节。
深入了解
- How to monitor Hadoop metrics - Datadog和How to collect Hadoop metrics - Datadog对Hadoop Metrics: 作了全面的总结,非常详细。
- 通过 JMX 获取Hadoop/HBase监控数据:介绍了使用JMX获取Hadoop/HBase的监控数据。
- Enabling JMX Monitoring for Hadoop And Hive :介绍了使用JMX获取Hadoop和Hive的监控数据。
- Hadoop集群监控:jmx信息获取:介绍了jmx请求链接的书写方式。
本站文章为和通数据库网友分享或者投稿,欢迎任何形式的转载,但请务必注明出处.
同时文章内容如有侵犯了您的权益,请联系QQ:970679559,我们会在尽快处理。