线上监控java程序运行情况,解决多线程问题------java应用诊断器arthas

参考链接,官方文档:https://arthas.aliyun.com/doc/en/

 

应用场景

最近写的一个多线程的采集程序出现问题,导致kafka堆积的数据过多,但是光看代码或者本地测试看不出来问题

于是就用到了arthas,

arthas简介

arthas是java应用诊断器

只需要将安装包传到服务器上解压,再执行对应的命令就能从不同维度查看程序的运行状况,比如内存,线程,某个变量的值等等

官网地址:https://arthas.aliyun.com

首页面可以切换中英文

下载安装

https://arthas.aliyun.com/doc/en/

 

 

 

下载之后的文件如下:

将文件放在服务器上任意路径解压即可,注意unzip解压之后不是一个文件夹,而是一堆文件,最好新建一个文件夹在其中解压,以免以后想删除的时候不好找

比如

mkdir arthasDic

cd arthasDic

mv arthas-packaging-3.5.0-bin.zip ./arthasDic

unzip arthas-packaging-3.5.0-bin.zip

 

使用教程

 

命令详细介绍在Commands,各种参数和使用场景描述得比较全面,而我用得就比较浅了

这里总结一下我的使用步骤和常用命令:

(1)执行java -jar arthas-boot.jar

(2)找到需要被监控的应用程序的序号,教程里面的程序名是arthas-demo,直接输入数字2,然后回车即可开始监控

 

 

(3)执行dashboard

查看被监控的应用的各种线程的运行情况和内存

尤其是多线程程序,可以查看线程的个数是否符合预期,以及看内存占用情况,判断是否有gc溢出问题

这个界面会不断刷新,查看的是实时数据,想要停止就ctrl+c退出

(id为-1的是JVM的内部线程,通过内部线程可以观测到JVM活动，如GC、JIT编译等占用CPU情况，方便了解JVM整体运行状况)

 

(4)查看某个线程的运行情况

thread 默认按照cpu使用率降序排列,只显示第一页,类似dashboard的上半部分

thread id 查看某个线程的栈轨迹(可以看到这个线程是什么类的,因此给线程取名字是个好习惯),id是上图中第一列,线程id

像教程中指定搜索线程中的方法名也可以:

 

(5)反编译某个类

有的时候看源代码可能没有思路,但是看反编译后的代码可能会找到突破点

jad 全路径.类名

(6)查看静态属性的值

getstatic 全路径.类名 静态属性名

(7)watch

能够查看返回值,抛出异常,入参

参数比较复杂,见官方文档

(8)trace 全路径.类名 方法名

方法内部调用路径，并输出方法路径上的每个节点上耗时

(9)stack

输出当前方法被调用的调用路径

很多时候我们都知道一个方法被执行，但这个方法被执行的路径非常多，或者你根本就不知道这个方法是从那里被执行了，此时你需要的是 stack 命令。

(10)最后如果不需要监控了,就执行exit命令

 

通过这些命令,我观察到了我程序中线程类中的方法调用频率太高,并且线程个数也不符合预期,得出了线程没有合理关闭的结论

 

此外我还遇到一个意外情况,刚exit之后想起来有个东西还没看,还想再进入监控页面,结果在(2)输入程序对应的数字的时候报错了,说是端口占用,那个端口是个和这些程序都无关的程序在用的,最后重启了那个程序,再进入监控页面就能进去了,原因不明