Linux 性能调优技巧全面指南

Hello.Reader

已于 2024-08-28 15:25:43 修改

阅读量2k

点赞数 49

分类专栏：运维 linux 文章标签： eureka 运维 linux

于 2024-08-28 09:15:00 首次发布

本文链接：https://blog.csdn.net/weixin_43114209/article/details/141601653

版权

运维同时被 2 个专栏收录

16 篇文章 0 订阅

订阅专栏

linux

10 篇文章 0 订阅

订阅专栏

1. 理解 Linux 性能的基本组成

在深入探讨具体的调优技巧之前，了解影响 Linux 性能的核心组件是很重要的：

CPU 使用率：CPU 资源的利用百分比。
内存使用：系统对 RAM 的利用效率。
I/O 性能：数据读/写操作的速度和效率。
网络性能：数据传输和接收的有效性。
内核与进程管理：Linux 内核和进程的管理与调度方式。

2. CPU 性能调优

问题：高 CPU 使用率会导致性能下降、进程延迟和系统无响应。

解决方案：

处理器亲和性：使用 taskset 命令将进程绑定到特定 CPU，以确保更好的缓存利用率和减少上下文切换。
```
taskset -c 1,2 <process_id>
```
- -c 参数：指定要绑定的 CPU 核心编号，如 1,2 表示绑定到 CPU 1 和 2 上。
- 性能指标：通过将进程绑定到特定的 CPU 核心，减少上下文切换次数，提高 CPU 缓存命中率，从而提升处理速度。
调整 CPU 调度器：可以通过 /proc/sys/kernel/sched_* 参数调整完全公平调度器 (CFS)。例如，调整 sched_min_granularity_ns 可以影响分配给进程的时间片，在吞吐量和响应性之间取得平衡。
```
echo 1000000 > /proc/sys/kernel/sched_min_granularity_ns
```
- sched_min_granularity_ns：设置最小时间片，单位为纳秒。较小的值有利于提高响应性，而较大的值则有助于提高吞吐量。
- 性能指标：优化 CPU 任务切换的频率，以适应不同类型的工作负载需求。
实时调度：对于时间敏感的应用程序，可以使用 chrt 配置实时调度策略。
```
chrt -r 99 <process_id>
```
- -r 参数：指定实时调度策略。
- 99：设置优先级为 99（实时调度的最高优先级）。
- 性能指标：确保关键进程获得最高的 CPU 资源调度优先级，从而减少延迟，保证实时性能。

3. 内存管理与优化

问题：内存使用效率低下会导致交换，从而显著降低性能。

解决方案：

交换性 (Swappiness)：swappiness 参数控制内核交换内存页的积极性。降低此值可以减少交换，这对需要高内存访问速度的应用程序非常有利。
```
sysctl vm.swappiness=10
```
- vm.swappiness：0 表示最小化交换，100 表示最大化交换。推荐值通常在 10 左右。
- 性能指标：通过减少交换操作，最大化内存访问速度，特别是在内存密集型应用中显著提升性能。
HugePages：启用 HugePages 可以通过使用更大的内存页来减少内存管理的开销，这对于像 Oracle 和 PostgreSQL 这样的数据库特别有用。
```
echo 1024 > /proc/sys/vm/nr_hugepages
```
- nr_hugepages：指定 HugePages 的数量，如 1024 表示分配 1024 个 HugePages。
- 性能指标：减少内存页表开销，提高内存密集型应用程序的性能，特别是在大内存需求的场景中。
OOM Killer 调优：当内存耗尽时，可以配置 OOM killer 保护关键进程不被杀死。调整 oom_score_adj 值以影响 OOM 行为。
```
echo -1000 > /proc/<pid>/oom_score_adj
```
- oom_score_adj：范围从 -1000 到 1000，-1000 表示最大保护，1000 表示最小保护。
- 性能指标：确保关键进程在内存压力下不被意外终止，保持系统稳定性。

4. 磁盘 I/O 性能调优

问题：缓慢的磁盘 I/O 会成为系统性能的瓶颈，尤其是在数据密集型应用中。

解决方案：

选择合适的 I/O 调度器：根据工作负载选择适当的 I/O 调度器。例如，deadline 或 noop 可能更适合 SSD，而 cfq 更适合传统 HDD。
```
echo deadline > /sys/block/sda/queue/scheduler
```
- scheduler：选择 I/O 调度策略，如 deadline，适用于需要低延迟和公平分配的工作负载。
- 性能指标：优化 I/O 调度策略，减少磁盘访问延迟，提升 I/O 密集型任务的性能。
预读设置：调整预读缓冲区可以提高顺序数据访问模式的性能。
```
blockdev --setra 2048 /dev/sda
```
- --setra 参数：设置预读大小，以扇区为单位，如 2048 扇区（1MB）。
- 性能指标：通过增加预读大小，减少磁盘 I/O 操作次数，提高大数据读取性能。
I/O 请求队列大小调整：调整 I/O 请求队列大小，可以提高处理高并发 I/O 请求的能力。
```
echo 128 > /sys/block/sda/queue/nr_requests
```
- nr_requests：设置 I/O 请求队列的最大请求数，例如 128。
- 性能指标：通过优化 I/O 请求队列大小，提升磁盘在高并发读写操作下的处理能力。
使用 iotop 监控 I/O：使用 iotop 识别并排查占用 I/O 资源的进程。
```
iotop -o
```
- -o 参数：仅显示有 I/O 活动的进程。
- 性能指标：识别高 I/O 使用的进程，便于针对性优化，提高整体系统 I/O 性能。

5. 网络性能优化

问题：网络延迟和吞吐量问题会严重影响应用性能，尤其是在分布式系统中。

解决方案：

TCP 调优：调整 TCP 窗口大小等参数可以提高网络性能。例如，增加 tcp_window_scaling 可以允许更大的 TCP 窗口大小。
```
sysctl -w net.ipv4.tcp_window_scaling=1
```
- tcp_window_scaling：启用或禁用 TCP 窗口缩放，1 表示启用。
- 性能指标：允许更大的 TCP 窗口尺寸，提高高带宽网络中的数据传输效率。
通过禁用 Nagle 算法减少延迟：禁用 Nagle 算法可以减少需要低延迟通信的应用程序的延迟。
```
sysctl -w net.ipv4.tcp_nodelay=1
```
- tcp_nodelay：启用或禁用 Nagle 算法，1 表示禁用。
- 性能指标：减少小数据包发送的延迟，提高低延迟网络应用的性能。
绑定接口：将多个网络接口合并为一个 bond，以提高冗余性和增加吞吐量。
```
modprobe bonding
ifconfig bond0 <ip_address>
```
- bonding：加载网络接口绑定模块。
- ifconfig bond0：配置网络接口绑定后的 IP 地址。
- 性能指标：通过网络接口冗余提高网络可靠性，并增加网络吞吐量。

6. 内核与进程管理

问题：效率低下的进程管理会导致资源争用和系统性能下降。

解决方案：

调整内核参数：通过调整 /etc/sysctl.conf

中的内核参数可以优化系统性能。例如，vm.dirty_ratio 控制系统内存中可以填充的脏页百分比。

sysctl -w vm.dirty_ratio=15

vm.dirty_ratio：设置系统内存中脏页的最大百分比，较小的值减少磁盘写入压力，较大的值提升系统响应速度。
性能指标：优化内存管理，平衡内存写入和系统响应速度。
使用 cgroups 进行资源分配：使用控制组 (cgroups) 控制和限制分配给不同进程的资源。这在多租户环境中特别有用。
```
cgcreate -g cpu,memory:/mygroup
cgset -r cpu.shares=512 mygroup
cgexec -g cpu,memory:mygroup <command>
```
- -g cpu,memory:/mygroup：创建一个包含 CPU 和内存资源的控制组。
- cpu.shares=512：分配 CPU 资源权重，值越大，分配的 CPU 资源越多。
- 性能指标：通过控制组的资源限制，提高关键任务的资源利用率，避免资源争用。
NUMA 调优：对于具有非统一内存访问 (NUMA) 的系统，使用 numactl 命令优化进程的内存位置。
```
numactl --membind=0 --cpubind=0 <command>
```
- --membind=0：绑定进程的内存分配到 NUMA 节点 0。
- --cpubind=0：绑定进程的 CPU 执行到 NUMA 节点 0。
- 性能指标：优化进程与内存的物理位置，减少内存访问延迟，提高性能。

7. 监控和分析工具

问题：如果没有适当的监控，识别性能瓶颈将变得非常困难。

解决方案：

top 和 htop：这是监控 CPU、内存和进程使用情况的实时工具。
```
htop
```
- htop：提供直观的界面，实时显示系统资源使用情况。
- 性能指标：监控 CPU、内存、I/O 等资源使用，帮助快速识别系统瓶颈。
vmstat：提供有关系统进程、内存、交换、I/O 和 CPU 性能的详细信息。
```
vmstat 2
```
- 2：表示每两秒刷新一次系统状态。
- 性能指标：跟踪系统的整体性能指标，识别瓶颈并监控系统健康状况。
perf：一个强大的 CPU 性能分析工具，可用于分析缓存未命中、分支错误预测等。
```
perf stat -p <pid>
```
- stat -p <pid>：对指定进程 ID 进行性能统计分析。
- 性能指标：深入分析 CPU 性能，如缓存命中率、分支预测准确率等，帮助优化 CPU 使用。
sysstat 包：包含如 iostat、mpstat 和 pidstat 等全面的系统性能监控工具。
```
apt-get install sysstat
```
- sysstat：提供包括磁盘 I/O、CPU 使用率等在内的综合性能分析工具包。
- 性能指标：监控和分析系统各个资源的使用情况，提供优化建议。

8. 高级文件系统调优

问题：文件系统效率低下会导致数据访问速度慢和整体系统性能下降。

解决方案：

选择合适的文件系统：根据您的工作负载选择文件系统。例如，ext4 是一个通用文件系统，而 XFS 可能更适合大文件。
挂载选项：使用适当的挂载选项，例如 noatime，可以防止不必要的磁盘写入，从而提高性能。
```
mount -o noatime /dev/sda1 /mnt
```
- noatime：禁止更新访问时间，减少磁盘写入操作。
- 性能指标：通过减少磁盘 I/O 操作，提升文件系统的读写性能，特别是在高频读操作环境下。
优化日志功能：对于具有日志功能的文件系统（例如 ext4、XFS），可以考虑调整日志模式 (data=writeback) 以提高性能，特别是在高写入环境中。
```
tune2fs -o journal_data_writeback /dev/sda1
```
- journal_data_writeback：将日志模式设置为 writeback，减少数据写入延迟。
- 性能指标：优化文件系统的日志写入性能，减少因日志操作导致的写入延迟。