HDFS & YARN jmx prometheus exporter & grafana dashboard

2020-05-06 18:24:59 +08:00
 geekard

使用 JMX HTTP API,并发采集 HDFS 和 YARN 各节点的指标数据,用 grafana 展示。

地址: https://github.com/opsnull/hadoop_jmx_exporter

效果如下:

2763 次点击
所在节点    程序员
4 条回复
wpf375516041851
2020-05-07 10:42:23 +08:00
最重要的 rpc 监控,锁监控加上啊
hakim
2020-05-07 12:09:35 +08:00
表格挺好看的!
geekard
2020-05-08 10:34:33 +08:00
@wpf375516041851
有的,截图只是一部分。GC 、Queue 、Locker 、RPC 的 qps 、latency 都有的。
wpf375516041851
2020-05-08 11:16:26 +08:00
@geekard
开源业界缺少一套类似 dataworks 的基础数据平台,监控这块可以整合到自动化运维平台中去,目前 jmx_exporter 可以少花些力气,大部分公司都有自己的一套,如果能搞出通用的大数据自动化运维平台,我觉得市场面会广些

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/669026

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX