CPU使用率过高问题排查方法,ps命令和jstack命令查看线程调用栈 “load.1minPerCPU“升高

问题

记录一下上周中午,系统突然出的CPU使用过高导致的异常。异常主要表现在load.1minPerCPU、cpu.user以及cpu.idle等指标明显上升,而且重启容器后指标不下降。由于系统的特殊性(支持热部署代码运行),第一反应是,猜测提交的热部署代码中有死循环的部分导致的。所以现在就要想办法定位出这是哪一段代码,以及在哪里运行的。

排查过程

1.找出CPU使用占比最高的java进程。这里直接使用top命令就可以查看到对应的pid。这里可以看到这个进程的CPU占用非常高
在这里插入图片描述
2.找出进程中占用top是的线程,这里我使用的是ps命令查看线程id,当然还有top -Hp <进程ID>命令

ps -mp <进程ID> -o THREAD,tid

这里的tid可以理解为线程tid(pthread_self() 进程内唯一)
在这里插入图片描述
3.将获得tid转换成16进制,这里以137076为例,转换为0x21774

printf "%x" <tid>

4.通过jstack命令查看线程堆栈的情况看。这里为了方便排查,打印一定数量的前后文本

jstack <进程ID> | grep nid=<TID的16进制值> --after-context <NUM> 
jstack 136992 |  grep nid=0x21774 --after-context 100

ps:刚查出来的tid对应jstack中的nid(tid: java内的线程id,nid: 操作系统级别线程的线程id)。

5.最后根据堆栈内的信息来定位问代码即可

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值