linux性能调试----cpu篇

linux性能调试----cpu篇

1、mpstat -P ALL 2，观察cpu是否有异常，下列哪一项异常：

 %usr 用户态的cpu时间（%）（不包含nice值为负的进程）----pstack
%nice nice值为负的进程的cpu时间（%）
%sys 内核态的cpu时间（%）-----strace+pstack
%iowait 硬盘io等待时间（%）------iostat
%irq 硬中断时间
%soft 软中断时间-----mpstat -I+cat /proc/interrupts
%idle 空闲时间（也没在等待硬盘io）


2、top和top -H -p pid找出进程ID和线程ID。
3、如果%usr偏高，多次执行pstack lwp观察是哪个函数耗cpu厉害。
4、如果%sys偏高，strace -c -p lwp来查看系统调用统计，pstack lwp观察在哪里调用这个系统函数。
5、如果%iowait偏高，iostat观察磁盘读写情况，block_dump统计磁盘读写操作。
6、如果%soft偏高，mpstat -I SUM -P ALL 2查看中断次数统计，mpstat -I CPU -P cpuid 2查看某个核的中断情况；
对照cat /proc/interrupts可查找出是哪个设备/项目造成。


其它：
1、采用strace -o strace.out -Ttt -p pid来优化程序，查看哪些系统调用比较费时。 
2、gcore pid产生core文件，方便事后分析。结合上面的top、top -H -p pid、pstack pid、strace -c -p lwp可事后分析cpu飙高原因。
3、关键过程：哪个进程、哪个线程、哪个函数造成cpu飙高。