监控/定位/诊断必杀技——JAVA应用生产问题

系统稳定运行还好，就怕出问题。但事情往往是越拍啥越来啥，所以我们要做好预案，并且手头得有几件趁手的兵器。
列一列常见的问题和针对的处理步骤。

1. 通过系统日志可以直观的处理一部分问题，比如业务处理异常；
2. 遇到应用没有debug或者生产日志是关闭的情况，就得为了加个debug更新应用；
3. 跨系统接口调用，互相扯皮，我说你有问题，你说你没调我；
4. 某个接口调用总是说慢，慢在哪里，我加点debug日志看看吧；
5. 某个接口异常退出了，又没有日志，到底出了啥异常了；
6. jvm中哪些线程比较占cpu，他们到底在做什么；
7. 我想看看某个接口的调用堆栈；
8. jvm总体的健康状况是啥样；
   这些问题都可以用一个工具来搞定，但是有个前提：JVM是健康运行的，如果jvm自顾不暇，那这兵器就废了。而且会对主机性能有些许的影响。如果内存比较吃紧，如果再启动一个进程，也许就是压块房子的最后一根稻草。平时莫怕！
   Alibaba开源jvm监控工具arthas，这不巫妖王吗，阿里游戏玩家不少啊。一生征战的王者，也许是这隐喻吧。
   耳畔怎么突然响起了beyond的光辉岁月：一生经过彷徨的挣扎 自信可改变未来…仿佛是在唏嘘程序员的一生，各种挣扎战斗，好伤感。
   Maybe，能改变我们的未来。继续战斗吧！
   

其内部使用了java字节码技术，动态修改代码。
下载运行时需要联网下载依赖jar包，依赖jar包会放到用户主目录的~/.arthas/lib。
java -jar arthas-boot.jar
如果做成shell脚本，就变成一个监控利器了。
启动后，会列出当前正在运行的java进程，选择一个就好。

CAUTION:jdk版本最好一致，否则可能会一直连不上进程

Arthas采用命令行交互模式，同时提供丰富的 Tab 自动补全功能
先看一下进程总体运行情况：
$dashboard

当前哪些线程最耗费CPU：
$ thread -n 3

如果做成脚本，系统异常时，就可以实时捕获到异常的程序
查看java方法的调用堆栈：

如果上线后方法没有执行，可以看看调用链，就可知道
观察一段时间内哪一步比较慢：

此技能必须点赞啊
观察一段时间内接口出入参，异常情况：

扯皮必杀技，抓住他！！也可以监控出入参中的某个字段
观察一段时间内接口调用成功率，是否正常返回，耗时等：

接口运行是否稳定，打开此锦囊
最后观察完，记得shutdown，要不然运行时的class还是带着arthas的监控代码的。

恢复原状