系统调试工具总结

Nmon

jmap

• jmap -F -dump:format=b,file=dump.log [pid]
• jmap -histo [pid]

这两个工具有些时候不管用。。

jvisualvm结合jstatd进行远程监控

• 配置[b]java[/b]安全访问，将如下的代码存为文件 jstatd.all.policy (名字随便起)，但要放到JAVA_HOME/bin中，其内容如下，

grant codebase"file:${java.home}/../lib/tools.jar"{ permission java.security.AllPermission; };

• 启动jstatd

./jstatd -J-Djava.security.policy=jstatd.all.policy -J-Djava.rmi.server.hostname=192.168.0.23

• 打开本地的jvisualvm, 右键Remort,选择 “Add Remort Host…”

Spark 监控

• History Server
• Rest Api

$curl http://namenode:18080/api/v1/applications

[ {
  "id" : "local-1459299007260",
  "name" : "Spark shell",
  "attempts" : [ {
    "startTime" : "2016-03-30T00:49:58.201GMT",
    "endTime" : "2016-03-30T00:50:42.170GMT",
    "sparkUser" : "hadoop",
    "completed" : true
  } ]
}]

$curl http://localhost:4040/api/v1/applications/[app-id]/jobs