Golang性能分析

傅里叶、

已于 2024-01-25 21:15:54 修改

阅读量1k

点赞数

分类专栏： Golang笔记文章标签： golang pprof

于 2023-02-05 22:33:38 首次发布

本文链接：https://blog.csdn.net/qq_34562093/article/details/128894472

版权

Golang笔记专栏收录该内容

50 篇文章 5 订阅

订阅专栏

一、通过pprof实时分析

性能分析的场景主要有CPU、Memory、IO、Goroutine、死锁几种

1、两种类型的应用

（1）服务型应用 _ "net/http/pprof" 包，专用于采集 web 服务 运行数据的分析。即在运行的服务中通过 API 调用取数据。服务型应用场景中因为应用要一直提供服务。所以 pprof 是通过 API 访问来获取，pprof 使用了默认的 http.DefaultServeMux 挂在这些 API 接口。开发者也可以手动注册路由规则挂载 API，如 r.HandleFunc("/debug/pprof/debugopen", openFunc)

（2）工具型应用 "runtime/pprof" 包，专用于采集 应用程序 运行数据的分析。通过代码手动添加收集命令。工具性应用是一个提供特定功能使用的工具，使用完就会退出进程的应用。开发者手动控制把 profile 文件保存到报告文件中。封装的接口可以调用，如要进行 CPU Profiling，则调用 pprof.StartCPUProfile(w io.Writer) 写入到 w 中，停止时调用 StopCPUProfile()；要获取内存数据，直接使用 pprof.WriteHeapProfile(w io.Writer) 函数则可。

2、功能介绍

CPU 分析（profile）: 每秒采集99次

内存分配（allocs）: 堆栈等空间上的内存分配采样，每分配512K字节时取样一次

阻塞（block）: 堆栈跟踪导致阻塞的同步原语

命令行调用（cmdline）: 命令行调用的程序

goroutine: 当前 goroutine 的堆栈信息

堆（heap）: 堆上内存分配的抽样，每分配512K字节时取样一次

互斥锁（mutex）: 堆栈跟踪竞争状态互斥锁的持有者

系统线程的创建（threadcreate）: 堆栈跟踪系统新线程的创建

trace: 追踪当前程序的执行状况. 你可以用 seconds 参数指定抽样持续时间. 你获取到 trace 概览后可以用 go tool trace命令调查这个 trace

3、下载pprof文件

curl -o cpu_profile http://127.0.0.1:8888/debug/pprof/profile?seconds=60 || http://127.0.0.1:8888/debug/pprof/heap?seconds=60 ||http://127.0.0.1:8888/debug/pprof/allocs?seconds=60 || http://127.0.0.1:8888/debug/pprof/block || http://127.0.0.1:8888/debug/pprof/groutines?seconds=60

kubectl cp <ns-name>/<pod_name>:cpu_profile /root/fourier/tmp/cpu_profile

go tool pprof /root/fourier/tmp/cpu_profile

go tool pprof -http :8888 cpu_profile

注意：go tool 与生成pprof的go版本应一致，否则可能报错 unrecognized profile format

4、命令行工具，即go tool pprof工具

go tool pprof [文件或链接]

go tool pprof http://127.0.0.1:8081/debug/pprof/allocs

go tool pprof http://127.0.0.1:8081/debug/pprof/profile?seconds=60

go tool pprof C:\Users\fourier\Downloads\profile

go tool pprof http://localhost:6060/debug/pprof/heap

（1）top命令

top 5

flat: 在给定函数上运行耗时

flat%: 在给定函数上运行耗时总比例

sum%: 给定函数累计使用 CPU 总比例

cum: 当前函数 以及包含子函数 的调用运行总耗时

cum%: 同上的 CPU 运行耗时总比例

最后一列为函数名称，详细见后续指标介绍

（2）list命令

list [funcName]

list `*$ 查看所有函数

（3）查看堆情况


$ go tool pprof http://localhost:6060/debug/pprof/heap
Fetching profile over HTTP from http://localhost:6060/debug/pprof/heap
Saved profile in /Users/eddycjy/pprof/pprof.alloc_objects.alloc_space.inuse_objects.inuse_space.008.pb.gz
Type: inuse_space
Entering interactive mode (type "help" for commands, "o" for options)
(pprof) top
Showing nodes accounting for 837.48MB, 100% of 837.48MB total
      flat  flat%   sum%        cum   cum%
  837.48MB   100%   100%   837.48MB   100%  main.main.func1

-inuse_space：分析应用程序的常驻内存占用情况

-alloc_objects：分析应用程序的内存临时分配情况

5、web命令及可视化工具

需安装Download | Graphviz，可参考https://www.cnblogs.com/shuodehaoa/p/8667045.html

（1）web UI

go tool pprof -http=:8080 cpu_profile

访问http://127.0.0.1:8080/ui即可看到如下


-VIEW看各种视图
  -Top：主要看占用内存当排名信息
  -Graph：连接图，主要看调用关系图，并且通过框框的粗细、颜色当深浅、线的实虚、以及数字信息包括执行时间和占比
  -FlameGraph：火焰图，要看宽度和深度，heap中宽度表明内存占用大小，
  -Peek
  -Source
  -Disassemble
-SAMPLE：采样信息，包括申请对象、申请空间、占用对象、占用空间的信息
-REFINE：可以精细化视图中的信息
  -Focus：聚焦在选中元素的上下游元素
  -Ignore：忽略选中当元素，包含其后继元素
  -Hide：隐藏选中当元素，但不会隐藏其后继元素
  -Show：只显示选中的元素，不包含后继元素
  -Showfrom：从选中当某一个元素开始，只列出其后继元素
-CONFIG：能将当前已精细化的页面保存起来

（2）理解指标

flat 表示样本中当前函数占用的CPU时间，cum表示当前函数以及当前函数调用其他函数的时间，sum表示当前函数flat及其调用函数的flat之和。

具体理解为：flat只包含当前函数的栈帧信息，不包括其调用函数的栈帧信息。cum字段既包括当前函数的栈帧信息，也包括其调用函数的栈帧信息，flat%和cum%分别表示flat和cum字段占总字段的百分比。

flat可以让我们知道哪个函数耗时多，而cum可以帮助我们找到是哪些函数调用了这些耗时的（flat值大的）函数。对于内存也是一样的。

（3）CPU连接图

web [funcName] 查看函数的连接图

go tool pprof -web C:\Users\fourier\Downloads\profile 查看连接图

节点越大，其flat和flat%越大；

节点的颜色越红，其cum和cum%越大；

线条代表了函数的调用链，线条越粗，代表指向的函数消耗了越多的资源。反之亦然。

线条的样式代表了调用关系：实线代表直接调用；虚线代表中间少了几个节点；带有inline字段表示该函数被内联进了调用方（不用在意，可以理解成实线）。

对于一些代码行比较少的函数，编译器倾向于将它们在编译期展开从而消除函数调用，这种行为就是内联。

连接图中的性能问题一般在最红最粗的线。

（4）CPU火焰图

火焰图的Y 轴表示调用栈，调用顺序是从上到下（有些是从下到上，如火焰一般），每一块都是一个函数，越大代表占用 CPU 时间越长。调用栈越深，火焰就越高，顶部就是正在执行的函数，下方都是它的父函数。

火焰图的X 轴表示抽样数，如果一个函数在 x 轴占据的宽度越宽，就表示它被抽到的次数多，即执行的时间长，通常执行频率是 99Hz（每秒99次），如果99次都返回同一个函数名，那就说明 CPU 这一秒钟都在执行同一个函数，可能存在性能问题。注意，x 轴不代表时间，而是所有的调用栈合并后，按字母顺序排列的。

一般采样记录信息有三个参数：采样的进程号、采样的频率（每秒采样多少次，通常 99 次）、采样持续时间

火焰图的颜色表示 CPU 的繁忙程度。

火焰图主要看顶层的哪个函数占据的宽度最大。有"平顶"（plateaus）则表示该函数可能存在性能问题。但是直接观察"平顶"（plateaus）往往不能快速定位性能问题，因为顶部记录的大多是对底层库函数的调用情况。要快速定位性能问题，首先应该观察业务函数在火焰图中的宽度，然后再往顶部找到第一个库函数来缩小范围，而不是直接看平顶。