yarn 可以监控 hadoop 或者 spark 的服务吗？

2019-01-04 09:38:31 +08:00
 cirton

yarn 可以监控 hadoop 的任务，它可以同时监控 hadoop 的服务吗?比如说运行在 namenode 节点上的服务。

4010 次点击
所在节点    Hadoop
9 条回复
cirton
2019-01-04 09:41:08 +08:00
或者使用什么技术监控 hadoop 节点上的服务列表好一些呢？
zhuangzhuang1988
2019-01-04 10:09:49 +08:00
yarn 只能安装 js 包吧
kex0916
2019-01-04 10:11:21 +08:00
yarn 是 hadoop 的资源管理调度器，可以监控在 yarn 上运行的任务，但是不能监控 hadoop 生态的其余的组件。
你说的这种集群监控可以使用 CM，或者 Ambari 这类工具。
90928yao
2019-01-04 10:26:54 +08:00
@zhuangzhuang1988 不是 npm 的 yarn
cirton
2019-01-04 10:30:20 +08:00
可以换个角度，使用 java 获取主机上的进程，然后判断下 hadoop 的服务进程是否在进程列表中就可以了。
huiyifyj
2019-01-04 11:13:14 +08:00
@zhuangzhuang1988
搞混了，不是 node 包管理工具 yarn。是 Hadoop 生态的工具
scalaer
2019-01-04 12:21:55 +08:00
ambari 了解下
blueskea
2019-01-04 12:28:43 +08:00
CDH ？
scalaer
2019-01-04 13:33:36 +08:00
@blueskea cdh 和 hdp 有啥区别

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/523715

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX