CPU性能分析

已于 2024-07-26 21:08:43 修改
阅读量112 收藏 1
点赞数
分类专栏： Linux开发 文章标签： linux 后端
于 2023-06-12 21:49:17 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010378559/article/details/131177577
版权

目录


我们承担ROS，FastDDS等中间件以及Linux，C++，cmake等技术的项目开发和专业指导和培训，有10年+工作经验，质量有保证，如有需要请私信联系。

工具集

在这里插入图片描述

性能分析工具

uptime

$ uptime
19:49:31 up 36 days,  5:25,  1 user,  load average: 0.52, 0.11, 0.04
当前时间 系统运行时间         正在登陆的用户数       1min  5min 15min的平均负载

vmstat：

在这里插入图片描述

  • cs(context switch)：每秒上下文切换的次数
  • in(interrupt)：每秒中断的次数
  • r(running or runnable):就绪队列长度，也就是正在运行和等待的CPU的进程数
  • b(blocked)：不可中断睡眠状态的进程数
  • us：用户进程CPU使用率
  • sy：系统进程CPU使用率

pidstat

pidstat是一个非常实用的系统性能工具，可以用来监控单个任务的cpu，每个任务用户态，内核态的cpu占用，内存，I/O等使用情况。pidstat是sysstat工具包的一部分。
pidstat可以看到每个进程的上下文切换的详细情况。

  • 命令行参数

    • 没有命令行参数，显示所有进程的cpu使用情况
    • pid -p [pid] : 显示指定进程的cpu使用情况
    • pidstat -r : 显示所有进程的内存使用情况
    • pidstat -r -p [pid] : 显示指定继承的内存使用情况
    • pidstat -d : 显示所有进程的i/o使用情况
    • pidstat -d -p [pid] : 显示特定进程的io使用情况
    • 持续监控进程的cpu使用情况，每隔5s更新一次：pidstat 5
    • 持续监控某个进程的cpu使用情况，每个5s更新一次：pidstat -p [pid] 5,持续监控的最后部分还有average部分，用来计算5组数据的平均值
    • 默认显示进程的指标数据，加上 -t 之后才会输出线程的指标
      在这里插入图片描述
      在这里插入图片描述

  • 输出内容

    • %usr：用户态cpu使用率
    • %system：内核态cpu使用率
    • %guest：运行虚拟机cpu使用率
    • %wait：等待cpu使用率
    • %cpu：总的cpu使用率
    • cswch：每秒自愿上下文切换的次数
    • nvcswch：每秒非自愿上下文切换的次数

perf

perf是性能分析工具，（运行perf需要管理员权限）收集各种类型的性能数据：

  1. perf stat：这个命令可以收集和显示统计信息，包括CPU周期，缓存引用计数等；如perf stat ls, 会运行ls命令，并显示其性能统计信息
  2. perf top：类似于top，能实时显示占用cpu时钟最多的函数或指令，因此可以用来查找热点函数，时展示了系统的性能信息，但它的缺点是并不保存数据，也就无法用于离线或者后续的分析
hello@gf:~$ sudo perf top
Samples: 4M of event 'cycles', 4000 Hz, Event count (approx.): 25589544241 lost: 0/0 drop: 0/0
Overhead  Shared Object                  Symbol            
   0.14%  [kernel]                       [k] pty_write                                                       
   0.14%  node                           [.] v8::internal::(anonymous namespace)::Invoke                     
   0.14%  libc.so.6                      [.] cfree@GLIBC_2.2.5                                               
   0.14%  perf                           [.] sort__sym_cmp                                                   
   0.14%  node                           [.] v8::internal::GlobalBackingStoreRegistry::Unregister            
   0.14%  node                           [.] Builtins_KeyedLoadIC_Megamorphic                                
   0.14%  [kernel]                       [k] __cond_resched                                                  
   0.14%  mem_test                       [.] tts                                                             
For a higher level overview, try: perf top --sort comm,dso

输出结果中，第一行包含三个数据：采样数Samples，事件类型event，事件总数量Event count；
每行中，
第一列：Overhead：该符号的性能事件在所有采样中的比例
第二列Shared Object：该函数或指令所在的动态共享对象，如内核，进程名，动态库，内核模块等
第三列Object：动态共享对象的类型，[.] 表示用户空间的可执行程序或动态库，[k]表示内核空间
第四列Symbol：符号名/函数名，当函数名未知时，用十六进制的地址来表示

  1. perf record：记录程序的性能事件供后续分析，会在当前目录下创建一个名为perf.data文件，包含收集的性能数据，需要用 perf report -i 解析展示
  2. perf list：这个命令会列出所有可用事件

以上命令中，可以加上-g参数，开启调用关系的采样，方便根据调用链来分析性能问题。

CPU性能指标

CPU使用率

CPU使用率描述了非空闲时间占总CPU时间的百分比，根据cpu上运行任务的不同，又分为用户cpu，系统cpu，等待I/O cpu，软中断，硬中断等。

  • 用户cpu使用率：包括用户态cpu使用率(user)和低优先级用户态cpu使用率(nice)，表示cpu在用户态运行的时间百分比。用户态cpu使用率高，说明有应用程序比较繁忙

  • 系统cpu使用率：表示cpu在内核态运行的时间百分比

  • 等待I/O的cpu使用率：也成为iowait，表示等待I/O的时间百分比。iowait高，说明系统和硬件设备的io交互时间较长

  • 软中断与硬中断的cpu使用率：使用率高说明系统发生了大量的中断

  1. /proc 虚拟文件系统，向用户空间提供了系统内部状态的信息，/proc/stat 提供的是系统的CPU和任务统计信息，可以通过命令 cat /proc/stat | grep ^cpu 查看cpu的信息
  2. /proc/[pid]/stat 这个文件包含了每个进程的cpu信息

平均负载

单位时间内，系统处于可运行状态和不可中断状态的平均进程数，也就是平均活跃进程数。和CPU的使用率并没有直接关系
平均负载的计算方式为：通过对过去的负载进行指数衰减平均得到，涉及到一些比较复杂的算法。

  • 可运行状态：正在使用或者正在等待使用CPU的进程，使用ps命令看到的处于R状态的进程
  • 不可中断状态是ps总看到的D状态
    平均负载多少较为合理？
    首先，平均负载最理想的情况是等于CPU个数。所以在评判平均负载时，首先需要知道系统有几个CPU，可以通过文件 /proc/cpuinfo中读取：grep 'model name' /proc/cpuinfo | wc -l；有了CPU个数，就可以判断出，当平均负载比CPU个数还大的时候，系统已经出现了过载。
    在实际环境中，当平均负载高于CPU个数的70%的时候（经验值），可能就是平均负载过高了，就需要排查分析原因了。
    当然70%并不是绝对的，最推荐的方式，就是把系统的平均负载监控起来，然后根据更多的历史数据来判断负载的变化趋势，当发现负载有明显升高的趋势时，再做分析和调查。

平均负载和CPU使用率，这两个概念容易混淆，现做以下区分：

  • CPU密集型进程：使用大量CPU会导致平均负载升高，此时两者是一致的；
  • I/O密集型进程：等待I/O会导致平均负载升高，但CPU使用率不一定高
  • 大量等待CPU的进程调度会导致平均负载升高，此时CPU使用率也会比较高

上下文切换

上下文切换是保证Linux正常运行的一项功能，但过多的上下文切换会成为cpu性能瓶颈

  • CPU寄存器中存储当前和即将执行的指令，被称作CPU上下文，CPU的上下文切换就是将前一个任务的CPU上下文保存起来，然后加载新任务的上下文到这些寄存器和程序计数器当中，然后再跳转到程序计数器所指的新位置运行新任务。
  • CPU的上下文切换包括进程上下文切换，线程上下文切换，中断上下文切换
  • 自愿上下文切换：进程无法获取所需资源导致的上下文切换，如I/O，内存等系统资源不足时，就会发生自愿上下文切换
  • 非自愿上下文切换：进程由于时间已到等原因，被系统强制调度，进而发生的上下文切换，如，大量进程都在争抢CPU时就容易发生非自愿上下文切换

CPU缓存的命令率

CPU性能排查

  1. 通过vmstat查看正在运行和等待CPU的进程数，查看上下文切换次数
  2. 通过pidstat查看是哪个进程导致CPU使用率过高，和上下文切换，通过-t查看每个线程
  3. 通过查看/proc/interrupts 查看中断次数的增加原因
  4. 找到进程：通过top，ps，pidstat等工具的使用，可以找到cpu使用率过高的进程
  5. 找到函数：perf

CPU优化

应用程序优化

  1. 编译器优化，如gcc打开优化选项 -O2等
  2. 算法优化，使用复杂度更低的算法，如在数据较大的情况下可以用O(nlogn)的排序算法代替O(n^2)的排序算法
  3. 异步处理：避免程序因为等待某个资源而一直阻塞，从而提升程序的并发处理能力，如把轮询替换为事件通知等
  4. 多线程代替多进程，相比于进程的上下文切换，线程的上下文切换不切换进程地址空间，因此可以降低上下文切换的成本
  5. 善用缓存
  6. 代码优化，代码中不合理的地方，如频繁的线程创建销毁使用线程池，频繁的内存申请释放采用内存池，懒初始化，函数内联，内存对齐等

系统优化

  1. CPU绑定：把进程绑定到一个或多个核上，可以提高cpu缓存的命中率，减少跨cpu调度带来的上下文切换问题
  2. cpu独占：跟cpu绑定类似，进一步将cpu分组，并通过cpu亲和性机制为其分配进程
  3. 优先级调整：使用nice调整进程的优先级。适当降低非核心应用的优先级，增高核心应用的优先级，可以确保核心应用程序得到优先处理
  4. 为进程设置资源限制：使用linux cgroups 来设置进程的cpu使用上限，可以防止由于某个应用自身的问题而耗尽系统资源
  5. NUMA优化：支持 NUMA 的处理器会被划分为多个 node，每个 node 都有自己的本地内存空间。NUMA 优化，其实就是让 CPU 尽可能只访问本地内存。
  6. 中断负载均衡：无论是软中断还是硬中断，它们的中断处理程序都可能会耗费大量的 CPU。开启 irqbalance 服务或者配置 smp_affinity，就可以把中断处理过程自动负载均衡到多个 CPU 上。

避免过早优化

过早优化是万恶之源
因为，一方面，优化会带来复杂性的提升，降低可维护性；另一方面，需求不是一成不变的。针对当前情况进行的优化，很可能并不适应快速变化的新需求。这样，在新需求出现时，这些复杂的优化，反而可能阻碍新功能的开发。所以，根据性能评估再进行优化。

压力测试工具

stress

Linux系统压力测试工具
cpu密集型：stress --cpu 1 --timeout 6000
io密集型：stress -i 1 --timeout 600

sysbench

sysbench是一个模块化、跨平台和多线程的基准测试工具，主要用于评估和测试各种系统参数，如CPU性能，磁盘I/O性能，内存分配和传输速率，POSIX线程，数据库负载性能等。

Sysbench的主要功能和用途如下：

  • CPU性能测试：通过执行特定的计算任务，例如计算素数，来评估CPU的性能。
  • 文件I/O性能测试：评估文件系统的性能，包括文件的创建，读写，重写，删除等。
  • 内存性能测试：评估内存操作的性能，如分配内存以及内存读写速度。
  • 线程和同步性能测试：测试多线程环境下的锁和互斥锁的性能。
  • 数据库性能测试：对MySQL, PostgreSQL, Oracle等数据库进行读写和查询的性能测试。

sysbench是一款非常强大的系统性能基准测试工具，它在性能测试和性能调优，服务器配置，硬件评估等场景都有广泛的应用。
示例：

# 以10个线程运行5分钟的基准测试，模拟多线程切换的问题
$ sysbench --threads=10 --max-time=300 threads run

ab

ab（apache bench）是一个常用的 HTTP 服务性能测试工具

General_G
关注
专栏目录
性能测试之cpu 分析
u012343977的博客
11-29 1551
非自愿上下文切换： 可能是因为 cpu瓶颈， 抢占资源所导致的 （被迫执行优先级更高的指令或指令执行的时间已经到了 被迫中止当前的指令，去执行其他指令）1 sys高+si高 推导出===>内存 or 网络I/o问题----解决办法:排查内存 和 I/o。场景2：si 软中断高 -------排查cpu抢占资源 结合sy 系统进程查看。场景1：sy 系统进程高 -------排查cpu的上下文切换。场景3：us 用户进程态高 -------用户程序计算。转存失败重新上传取消。
Android开发之——Profiler-CPU性能分析(1)
piade的博客
05-01 1119
以下是资料目录和内容部分截图里面包括详细的知识点讲解分析，带你一个星期入门Flutter。还有130个进阶学习项目实战视频教程，让你秒变大前端。《Android学习笔记总结+移动架构视频+大厂面试真题+项目实战源码》点击传送门，即可获取！里面包括详细的知识点讲解分析，带你一个星期入门Flutter。还有130个进阶学习项目实战视频教程，让你秒变大前端。[外链图片转存中…(img-NggmtFQR-1714511893508)]
性能调试---(三)CPU性能分析
s_sword的专栏
03-07 1393
性能调试---(三)CPU性能分析 2005年04月05日        打印自: unix中文宝库地址: http://www.douzhe.com/article/article.php/634 性能调试---(三)CPU性能分析 1:CPU的体系结构和工作原理 2:操作系统和进程 3:衡量CPU闲忙程度的指标 4:CPU资源成为系统性能的瓶颈的征兆 5:哪
快速分析CPU性能问题
weixin_30414155的博客
09-11 259
Linux的CPU性能问题，相信在工作中很容易遇到。这篇文章会总结出一个大概的套路，相信能够解决工作中90%以上的CPU性能问题！ 会告诉大家在不同的场景下，cpu性能指标工具如何选择，性能瓶颈怎么找。 CPU性能指标 往下看之前，自己可以先想想cpu性能指标有哪些。 首先，最容易想到的就是CPU的使用率，也是工作中最常见的。 CPU的使用率描述了非空闲时间占总CPU时间的百分比，根据C...
cpu 性能分析
weixin_46202430的博客
12-09 317
mpstat -P ALL 5 12 监控所有cpu 的性能情况 ，5s 一次，输出12次 pidstat -u 5 12 查看各个进程的cpu使用情况 ，5s 一次，输出12次 pidstat -d 晒看进程的IO 情况 CPU 密集型进程，使用大量 CPU 会导致平均负载升高，此时这两者是一致的； I/O 密集型进程，等待 I/O 也会导致平均负载升高，但 CPU 使用率不一定很高； 大量等待 CPU 的进程调度也会导致平均负载升高，此时的 CPU 使用率也会比较高。 第二种和第三种 的io.
性能分析(一):CPU性能分析
01-21 1574
性能调试---CPU性能分析 2005年04月05日        打印自: unix中文宝库地址: http://www.douzhe.com/article/article.php/634 性能调试---CPU性能分析 1:CPU的体系结构和工作原理 2:操作系统和进程 3:衡量CPU闲忙程度的指标 4:CPU资源成为系统性能的瓶颈的征兆 5:哪些进程是占用CPU资源的大户? 6:利用SA
Java CPU性能分析工具代码实例
08-25
"Java CPU性能分析工具代码实例" Java CPU性能分析工具代码实例是用于诊断和解决Java应用程序中的CPU性能问题的工具。该工具通过示例代码详细介绍了如何使用jstack命令来定位CPU飙升问题的根源，并提供了一个脚本...
Intel cpu 性能分析
06-20
本篇文章将深入探讨Intel CPU性能分析以及与CPU Cache相关的知识点。 首先，CPU Cache是计算机系统中的高速缓冲存储器，它的存在是为了减少CPU访问主内存的时间。Intel CPU通常包含多级缓存，如L1、L2和L3，它们的...
基于Tensorflow:CPU性能分析
09-17
### 基于Tensorflow:CPU性能分析 #### 引言 随着深度学习技术的不断发展，TensorFlow作为其中的一种主流框架，在数据科学、机器学习等领域得到了广泛应用。在使用TensorFlow进行模型训练时，CPU的性能直接影响到...
CPU性能分析01
PFFstronger的博客
07-16 377
简介 CPU性能分析是做好性能测试的关键，学会查看CPU的处理能力，分析性能瓶颈 查看CPU相关信息命令 #查看CPU的信息 cat /proc/cpuinfo 重要参数： physical id：CPU的物理封装的编号，从0开始依次编码； siblings： 每个物理封装上的逻辑核心数目； cpu cores： 每个物理封装上的物理核心数目； core id： 当前物理核心在物理封装上的编号 processor： 逻辑CPU核心编号，从0开始依次编码； 总核数 = 物理CPU的个数 * 每颗物理
（52）性能分析 ---CPU的性能分析
weixin_46356321的博客
08-03 464
但是，Ubuntu系统，默认是没有安装sshd服务，所以，默认，是不能用客户端远程连接到Ubuntu系统的。远程连接linux系统，被连接的系统，需要启动sshd服务，并且开发这个服务的端口，才能远程连接。因为 centos系统，默认是安装了sshd服务，且开发22端口的。centos系统： cat /etc/redhat-release。ubuntu系统： cat /etc/os-release。怎么看系统是 centos系统 还是 Ubuntu系统？现阶段：性能分析，首先，分析 硬件性能。......
CPU性能分析方式
qq_27031005的博客
12-17 1440
性能分析原理 应用程序CPU占用分析主要可以由cpu占用率和程序运行指令数两方面进行分析，两个指标的侧重点不同： CPU占用率：程序运行占用CPU时间与对应CPU运行总时间的比值，该数值为相对值，与每个cpu的运算效 率有关，在不同的CPU以及硬件环境下运行的差距较大 程序运行指令数据：该衡量指标采用MIPS来衡量，这里有几个概念需要澄清 1，主频 主频 = 时钟频率，它是指CPU内部晶振的频率，常用单位为MHz，它反映了CPU的基本工作节拍。 当前大部分cpu，实际主频一般会比标注的时钟频率要高，计算性能
性能分析4-分析CPU
qq_38224014的博客
04-19 232
查看cpu详细命令 1.cat /proc/cpuinfo 2.查询物理cpu cat /proc/cpuinfo| grep "physical id"| sort| uniq| wc -l 3.查看每个物理cpu的核数cat /proc/cpuinfo |grep "cpu cores"|uniq 4.查看逻辑cpu的个数cat /proc/c...
分析服务器 CPU 性能
qq_25497867的博客
08-16 608
通过分析堆栈得到 理论上是一个java进程中的一个线程在监听 分析堆栈： jstack -Hp java进程号 printf "%x\n" 线程号 jstack 进程号 | grep 线程16进制 jstack 进程号  ...
性能测试分析-cpu
jyonghu003的博客
04-18 2402
应用cpu飙高，我们该如何去分析？1、用户、进程id、父进程id、线程id、运行时间、CPU使用率、启动命令并按CPU使用率排序ps H -eo user,pid,ppid,tid,time,%cpu,cmd --sort=%cpu如果线程id（TID=9932）占用的cpu比较高的话，将9932转化为16进制，即0x26CCjstack 9859 > jstack-9859.dump我们从...
Linux系统性能分析——CPU
zsw_2015的博客
11-14 761
Linux性能分析 CPU top vmstat mpstat uptime strace /proc/cpuinfo lscpu
六、性能测试之CPU分析与实战
好多可乐的博客
08-28 1533
一段程序要被执行，先编译成机器语言，进入内存。cpu控制器再从内存中获取指令，数据，放入寄存器中。时钟控制cpu的运算器什么时候开始计算，计算多久。运算器开始计算。运算过程中，如果还需要数据，控制器就从寄存器中拿数据，拿不到就从内存中拿。如果1个时间片段计算不完，就先干其他事，之后再执行。执行完了，输出数据给寄存器，传给内存–> 切换，中断。
性能分析基础知识(1):CPU
06-13 989
小编从事分布式文件系统相关的工作。经常需要进行性能测试。性能测试并不是简单的执行几个脚本，还需要掌握一些基础知识，否则，可能导致最终得出的测试结果毫无及价值。小编将从几方面来介绍文件系统测试过程中应该注意的基础知识。 本文先介绍CPU相关的知识。 文章目录CPU架构介绍多CPU多核多核超线程CPU信息的查看方法CPU高速缓存智能内存访问内存消歧内存预取CPU的工艺演进CPU性能影响分析总结 ...
性能测试瓶颈：CPU 问题的深度分析和调优
最新发布
主要分享测试的学习资源，帮助快速了解测试行业，帮助想转行、进阶、小白成长为高级测试工程师。
05-09 1214
我们做性能测试的时候，除了使用工具编写脚本并执行之外，最核心的工作就是做性能测试结果分析和问题调优。然后在做性能测试的时候，非常常见的一类问题就是CPU的问题。所以，要专业做性能测试就免不了要深入学习一下CPU的原理和常见的分析和监控的命令。
Android CPU 性能分析
07-27
Android CPU性能分析可以通过使用Android Studio的profiler工具来实现。该工具可以分析CPU活动和跟踪记录，实时检查应用的CPU使用率和线程活动，并提供方法轨迹、函数轨迹和系统轨迹的详细信息。具体包括Sample Java...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值