线上阿里云的服务器出现了CPU过高,如下图所示:
各个服务的接口服务响应时间超过了4秒,整个服务的体验非常的差。
1、top命令显示PID为22800的java进程占用的cpu资源过高。
2、使用 ps -ef | grep 22800 命令,查看到这是一个tomcat服务,找到具体的目录,我的服务的路径为/home/tomcat/tomcat6/9601_timerbackend。
3、进入tomcat目录底下,cd /home/tomcat/tomcat6/9601_timerbackend,执行命令
java -jar arthas-boot.jar
注意本条命令,只有阿里云服务器才有,其他云服务器需要安装。
选择具体的进程,在后面的序号中输入自己的编号。我这边输入的是1
5、当看到ARTHAS时,输入dashboard
命令,如下图所示
看到C2 CompilerThread1,C2 CompilerThread2,C2 CompilerThread0 三个线程占用内存非常高。
6、使用thread -1
命令,查看都是什么线程造成的cpu使用过高。
7、查看tomcat的jvm配置,使用jps
,查看所有的进程,
然后使用jmap -heap 10444
,查看到内存分配,可以使用free -m
查看自己机器的内存,整个jvm的分配不是越大越好。
7、修改后的jvm的配置参数如下:
JAVA_OPTS='-server -Xmn4g -Xms8g -Xmx8g -Xss512K -XX:+AggressiveOpts -XX:+UseBiasedLocking -XX:+DisableExplicitGC -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:+CMSParallelRemarkEnabled -XX:+UseCMSCompactAtFullCollection -XX:+UseFastAccessorMethods -XX:+UseCMSInitiatingOccupancyOnly -XX:PermSize=1g -XX:MaxPermSize=1g'
8、修改后重新查看系统运行情况,已经正常。