一、查看yarn日志的方式
1、如果是Apache搭建的集群
1)可以通过ResourceManager角色服务器的IP来访问(http://hadoop101:8088/cluster)
2)也可以通过查看JobHistory历史服务器角色所在IP来访问 http://hadoop100:19888/jobhistory(必须先搭建好启动了)
2、如果你是CDH或者HDP集群,那就直接去到管理界面选择相关组件查看就好了(会自动跳转到如上访问地址)
二、ResourceManager UI界面
1、界面分为两部分左边菜单框右边显示框
2、菜单框:Cluster和Tool两大菜单
1)Cluster包含菜单:
About:显示集群的整体概述
可以通过Yar REST API 在代码中也可以获取到集群的About信息 hadoop101:8088/ws/v1/cluster/metrics
About主要包含三块(Cluster Metrics、Scheduler Metrics、Cluster overview)
Cluster Metrics:集群当前度量指标情况
Apps Submitted:应用作业的提交个数
Apps Pending:在所有队列总等待执行的作业个数
Apps Running:正在运行的作业个数
Apps Completed:已经运行完成的作业个数
Containers Running:当前正在运行的容器个数
Memory Used:集群中所有任务所耗用的内存
Memory Total:yarn所能占用的最大内存(所有NodeManager管理的内存总和)
Memory Reserved:预留内存,防止部分应用因为需要等待少部分内存而无限期等待情况
VCores Used:正在运行作业所耗用的总虚拟CPU
VCores Total:yarn所能占用的最大虚拟CPU
Active Nodes:当前集群存活的节点个数,(其实就是NodeManager的个数