总体性能调优思路为性能瓶颈点分析、关键参数调整以及SQL调优。在调优过程中,通过系统资源、吞吐量、负载等因素来帮助定位和分析性能问题,使系统性能达到可接受的范围
判断CPU是否达到瓶颈,主要通过以下方式:
- 在所有存储节点,逐一执行top命令,查看CPU整体占用情况
- 在所有存储节点,逐一执行htop命令,查看每个核的占用情况
- 如果CPU整体占用超过90%(id < 10),说明此时CPU已经成为瓶颈
如果存在某个核占用接近100%,其他核使用率不高,说明某个核成为瓶颈。可以通过mpstat -P ALL 10查看每个核的使用具体情况;
当确认cpu成为瓶颈时, 主要通过以下手段进一步定位:
- 执行perf top,实时查看cpu使用最多的是哪里
- 执行vmstat 2 10,实时查看cpu的分配情况,看系统调用,上下文切换是否过多
- 为mysql和vtgate生成火焰图,查看具体堆栈使用cpu的分配情况