linux 系统负载

最新推荐文章于 2024-08-14 12:30:36 发布
最新推荐文章于 2024-08-14 12:30:36 发布
阅读量872 收藏 2
点赞数
分类专栏： linux 文章标签： linux 服务器 运维
原文链接：https://segmentfault.com/a/1190000020255329?utm_source=tag-newest
版权
本文探讨了系统监控中的关键指标——平均负载，通过top, uptime, htop命令详解，并结合stress工具模拟场景，讲解了CPU密集型和IO密集型负载变化。同时介绍了sysstat包中的mpstat和pidstat命令用于诊断进程。
摘要由CSDN通过智能技术生成

前言

作为一名开发，我们绕不过去的一道坎是在服务器上对系统进行监控，并且当系统出现异常情况，需要快速排查，我们今天了解的平均负载就是监控中重要的一环。

在学习平均负载之前，我们需要了解相关指标，根据指标看清楚相关问题。正因为如此，我们从浅入深了解如下知识。

  1. 常用的相关命令
  2. 平均负载
  3. 相关工具了解
  4. 案例解析

常用的相关命令

常用的top命令，uptime命令，htop命令命令。

top

常用的性能分析工具，可以实时动态的查看系统整体情况和各个进程的资源占用情况，top命令提供动态互动式界面，还提供了热键式操作。

关于top命令详解可以参考 https://man.linuxde.net/top. 有top命令的详细解析。该网站提供很多命令查询，如果命令忘记了可以上去查询。

注意：该网站是一个可以被收藏的工具网站​​​​​​​

uptime

显示系统运行时间与系统的平均负载，显示时间依次为：现在时间，系统已经运行了多长时间，几个在线用户，平均负载。 可以结合watch使用。

  1. ruiqi@ruiqi:~/content$ uptime
  2. 15:24:41 up 3 min,2 users, load average:0.34,0.48,0.22​​​​​​​

htop

htop是比top更详细的监控软件，操作上更加方便。有如下优势：

  1. 操作上比top相对来说简单
  2. 默认支持图形界面的鼠标操作
  3. 横向或者纵向的浏览进程列表，查看所有进程，当然也包括完整的命令行。

还有更多的操作技巧，htop在各家的linux系统中并没有默认安装，需要在各家系统上进行安装。 展示方式也跟top有类似的参照。

平均负载

什么是平均负载

在上面每个命令，都可以看到load average参数，这是平均负载的英文标识。三个顺序分别为1min，5min,15min。

可能会有朋友说，平均负载不就是CPU使用率嘛？这句话说对也对，说不对也不对。

那怎么说呢？

一般分析负载情况可以分为以下三种：

  1. CPU密集型进程，需要大量消耗CPU资源，这时候大量的CPU消耗会导致平均负载的升高。
  2. IO密集型进程，需要等待IO，这时候也会导致负载的增高，但这种情况CPU的使用并不高。
  3. 还有一种就是等待CPU的情况，此时CPU消耗很高，cpu的等待也很高，平均负载也是很高的。

说了平局负载升高的情况，那平均负载究竟是什么呢？

在了解平均负载之前，先了解下Linux中进程的几种状态：

  • TASK_RUNNINT: 简称R,可执行状态
  • TASK_INTERRUPTIBLE:简称S，可中断的睡眠状态，能够响应信号。
  • TASK_UNINTERRUPTIBLE:简称D,不可中断的睡眠状态。该状态主要是显示内核在处理一些流程时，是不可中断的，不可中断状态可以认为是一种保护机制，来保证系统对进程和设备之间的一致性。
  • TASKSTOPPED || TASKTRACED:简称T,暂停状态或跟踪状态，
  • TASKDEAD - EXITZOMBIE :简称Z,退出状态，进程为僵尸进程，该进程不可被kill，不响应任务信号。
  • TASKDEAD-EXITDEAD: 简称X,退出状态，进程即将被销毁。

平均负载呢，可以简单地理解为在一定时间内，系统处于可运行状态和不可中断状态的平均进程数。

  1. 可运行状态就是我们上面所说的TASK_RUNNING,可运行状态，该状态包含正在使用CPU或者等待CPU的进程。
  2. 不可中断状态的进程:是我们上面所说的TASK_UNINTERRUPTIBLE,简称D的进程。

所以我们可以看到平均负载并不只是可运行状态的进程，还包含着不可中断的进程。

平均负载的评判标准

利用所说的top，uptime，htop命令，很方便的查看系统现在负载的状况。

但平均负载究竟是多少才算是不合理的数据呢？由于每个服务器或者客户机所拥有的的硬件配置不同，我们并不能简简单单的定义一个具体数值来说明平均负载的好与坏。

但我们了解平均负载最理想的情况就是等于CPU的个数，根据这一条，我们首先确定机器的CPU个数，方式有多种。

CPU的个数

  • 从文件中读取
  1. $ grep 'model name'/proc/cpuinfo
  2. model name :Intel(R)Core(TM) i7-6700K CPU @4.00GHz
  3. model name :Intel(R)Core(TM) i7-6700K CPU @4.00GHz
  4. 或者再用wc -l 统计一下
  5. $ grep 'model name'/proc/cpuinfo | wc -l
  6. 2​​​​​​​
  • top/htop 使用top 再按快捷键1就可以看出有多少个CPU

使用htop，看数字可以看出有多少CPU

评断标准

了解CPU个数之后，视角转回到load average上，发现该参数有三个数值，分别为1m，5m,15m,那我们该用哪个时间代表负载的标准呢？

其实也很简单，他们分表代表的是1m，5m，15m内的负载均值情况，代表这段时间内负载运行的趋势。根据不同时间内的值大小，可以评判出系统负载变化的趋势，方便得出平均负载的变化。一般情况下，超过系统可容纳负载70%的时候，监控人员就需要引起注意，并查看系统是否出现异常情况。

当然该70%只是理论值，需要根据不同的机器做不同的判断，比如服务器属于老旧服务器，对于其负载指标可以降低负载均值。负载过高时，及时作出应急措施。

相关工具了解

由于我们并没有实际的环境实现，则需要我们进行环境的模拟，那么在实现案例之前需要先学习相关工具，帮助我们辅助实验环境的搭建

Stress

stress 是压力测试工具，是Posix系统下生成CPU/Menory/IO/Disk负载的工具

Stress 安装

  • ubuntu上安装
  1. sudo apt-get install stress
  • centos 安装
  1. Centos7
  2. ## 启用第三方源
  3. rpm -ivh http://apt.sw.be/redhat/el7/en/x86_64/rpmforge/RPMS/rpmforge-release-0.5.3-1.el7.rf.x86_64.rpm
  4. ## 安装stress
  5. yum install stress
  6. Centos6
  7. ## 启用三方源
  8. yum install epel-release
  9. ## 安装Stress
  10. yum install stress

Stress 参数说明

  1. -?显示帮助信息
  2. -v 显示版本号
  3. -q 不显示运行信息
  4. -n，--dry-run 显示已经完成的指令执行情况
  5. -t --timeout N 指定运行N秒后停止
  6. --backoff N 等待N微妙后开始运行
  7. -c --cpu 产生n个进程每个进程都反复不停的计算随机数的平方根
  8. -i --io 产生n个进程每个进程反复调用sync()，sync()用于将内存上的内容写到硬盘上
  9. -m --vm n 产生n个进程,每个进程不断调用内存分配malloc和内存释放free函数
  10. --vm-bytes B 指定malloc时内存的字节数(默认256MB)
  11. --vm-hang N 指示每个消耗内存的进程在分配到内存后转入休眠状态，与正常的无限分配和释放内存的处理相反，这有利于模拟只有少量内存的机器
  12. -d --hadd n 产生n个执行write和unlink函数的进程
  13. --hadd-bytes B 指定写的字节数，默认是1GB
  14. --hadd-noclean 不要将写入随机ASCII数据的文件Unlink
  15. 时间单位可以为秒s，分m，小时h，天d，年y，文件大小单位可以为K，M，G

Stress 使用教程

  • 多CPU
  1. stress -c 13

  • 多io操作
  1. stress --io 5
  2. stress -i 5
  • 产生多个CPU与多个io进程并且定时1分钟停止
  1. stress -c 4-i 4--timeout 1m
  2. stress: info:[19613] dispatching hogs:4 cpu,4 io,0 vm,0 hdd
  3. stress: info:[19613] successful run completed in60s
  • 输出文件到本地
  1. stress -d 1--hdd-bytes 1G

当然stress并不止这些内容，但有一点注意stress无法模拟更复杂的场景，并且stress的压力CPU是在用户态，内核态并没有产生压力。如果需要更复杂的压力测试我们还可以使用stress-ng。

sysstat

sysstat是常用的性能监控工具包，里面包含了多个性能工具。比如我们下面要用的mpstat,pidstat,iostat,sar等指令。

安装

  1. ubuntu
  2. sudo apt-get install sysstat

2.centos

  1. yum install sysstat

mpstat

mpstat会输出所有CPU的平均统计信息

命令使用：

  1. ~$ mpstat -A 该命令等同于我们 mpstat -u -l ALL -p ALL
  2. Linux4.15.0-55-generic(ruiqi)08/31/2019 _x86_64_ (2 CPU)
  3. 07:15:31 AM CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle
  4. 07:15:31 AM all 0.770.011.8317.850.000.210.000.000.0079.32
  5. 07:15:31 AM 00.740.011.4216.580.000.420.000.000.0080.83
  6. 07:15:31 AM 10.810.022.2519.110.000.010.000.000.0077.81
  7. 07:15:31 AM NODE %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle
  8. 07:15:31 AM all 0.770.011.8317.850.000.210.000.000.0079.32
  9. 07:15:31 AM 00.760.011.8017.490.000.210.000.000.0077.70
  10. 07:15:31 AM CPU intr/s
  11. 07:15:31 AM all 177.24
  12. 07:15:31 AM 0118.28
  13. 07:15:31 AM 1119.02
  14. 07:15:31 AM CPU 0/s 1/s 6/s 8/s 9/s 12/s 14/s 15/s 16/s 17/s 18/s 19/s 24/s 25/s 26/s 27/s 28/s 29/s 30/s 31/s 32/s 33/s 34/s 35/s 36/s 37/s 38/s 39/s 40/s 41/s 42/s 43/s 44/s 45/s 46/s 47/s 48/s 49/s 50/s 51/s 52/s 53/s 54/s 55/s 56/s 57/s 58/s NMI/s LOC/s SPU/s PMI/s IWI/s RTR/s RES/s CAL/s TLB/s TRM/s THR/s DFR/s MCE/s MCP/s HYP/s ERR/s MIS/s PIN/s NPI/s PIW/s
  15. 07:15:31 AM 00.000.000.000.000.000.000.000.000.0042.520.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.590.130.000.0041.940.000.000.000.0016.350.180.000.000.000.000.000.000.000.000.000.000.000.00
  16. 07:15:31 AM 10.000.000.000.000.000.000.000.000.000.000.002.890.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.270.000.000.0055.250.000.000.000.0017.080.040.000.000.000.000.000.000.000.000.000.000.000.00
  17. 07:15:31 AM CPU HI/s TIMER/s NET_TX/s NET_RX/s BLOCK/s IRQ_POLL/s TASKLET/s SCHED/s HRTIMER/s RCU/s
  18. 07:15:31 AM 00.0028.960.190.0042.850.000.1325.510.0020.65
  19. 07:15:31 AM 10.0045.750.002.890.250.000.0841.030.0029.01

命令说明：

  • P: 携带ALL, 将每个CPU的统计信息进行输出。
  1. ruiqi@ruiqi:~$ mpstat -P ALL
  2. Linux4.15.0-55-generic(ruiqi)08/31/2019 _x86_64_ (2 CPU)
  3. 07:17:31 AM CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle
  4. 07:17:31 AM all 0.770.011.8317.830.000.210.000.000.0079.34
  5. 07:17:31 AM 00.740.011.4216.570.000.420.000.000.0080.85
  6. 07:17:31 AM 10.800.022.2519.090.000.010.000.000.0077.83
  • N: 代表每隔几秒输出CPU的信息
  • I: 代表输出每个处理器的中断统计信息
  • u: 代表输出所有CPU的统计信息

pidstat

pidstat 用来监控进程和当前受内核管理的线程，并且还可以检查子进程和线程的状态

  1. pidstat -t -p 进程号23#每隔两秒对指定进程的cpu信息统计输出3次
  2. pidstat -p ALL # 展示所有进程信息
  3. pidstat -u 51# 展示CPU信息，每五秒展示一组
  4. pidstat -d 2# 输出io统计消息, 2秒为统计信息

案例

从上面例子可以看到负载升高的几种情景，为了帮助我们理解这方面的内容，则我们创建一个例子来演示下。

机器环境如下

搭建虚拟机环境：

  • 双核
  • 内存是2g
  • 操作系统是ubuntu18.04
  • 安装stress,top，htop

CPU密集型进程

CPU密集型进程，需要大量消耗CPU资源，这时候大量的CPU消耗会导致平均负载的升高。 借助stress 模拟CPU密集进程。

  1. stress -c 10--timeout 600

使用top命令查看平均负载。

从图上可看到load average 正在逐步的升高。系统已经进入高负载。

mpstat -p ALL 显示所有信息，检查是什么导致负载升高

由图上可知，CPU的使用率基本上都为100%而iowait等待则为0，代表平均负载的升高是由CPU使用率高导致的。

那究竟怎么看是哪一个进程导致CPU使用率这么高的，在这里就可以使用pidstat命令查看。

  1. pidstat -p ALL # 展示所有进程信息
  2. pidstat -u 51# 展示CPU信息，每五秒展示一组
  3. pidstat -d 2# 输出io统计消息, 2秒为统计信息
  4. pidstat -t -p 进程号23#每隔两秒对指定进程的cpu信息统计输出3次

other

IO密集型进程，需要等待IO，这时候也会导致负载的增高，但这种情况CPU的使用并不高，多进程的方式造成的负载升高。

这两种情况都是使用mpstat来观察负载，找到cpu超标还是io等待或者是进程多导致cpu等待造成的负载升高，最后使用pidstat找到对应的进程，检查其情况。

总结

本文主要描述平均负载来源，顺带的说了下压力测试工具stress,stress-ng,mpstat,pidstat指令。

用这些工具辅助我们来进行系统监控与问题查找。

戴国进
关注
专栏目录
Linux系统负载平均值的详解
VaLinux的博客
09-28 255
负载平均值是指单位时间内系统中正在运行或等待运行的进程数量的平均值。它是一个无单位的值，通常用三个数值来表示，分别对应于最近1分钟、5分钟和15分钟的平均负载。例如，一个负载平均值为0.50的系统表示在平均情况下，每个时间段内有0.50个进程在运行或等待运行。一般来说，负载平均值超过CPU核心数的70%-80%时，就可以认为负载过高。负载平均值是衡量系统繁忙程度的重要指标，通过对负载平均值的监控和分析，可以及时调整系统资源，保证系统的正常运行。文件来获取负载平均值，并根据需要进行相应的调优。
linux负载
o_o137的博客
06-13 715
linux查看负载命令
linux系统的负载
yx1166的博客
09-14 3572
负载（load）是linux机器的一个重要指标，直观了反应了机器当前的状态。
【Linux入门】Linux五大负载以及相关基础命令详解（含示例）
最新发布
Karoku的博客
08-14 1349
它提供了系统的整体性能信息和当前正在运行的进程的详细信息，并允许用户进行排序、过滤等操作以获取所需的信息。前台进程是用户当前正在操作的进程，而后台进程则是在用户不直接干预的情况下运行的进程。命令在Linux系统中是一个非常有用的工具，用于以树状图的形式显示进程之间的派生关系，帮助用户更好地了解系统中运行的进程以及它们之间的关系。综上所述，Linux的五大负载优化需要综合考虑系统的各个方面，通过合理的监控、分析和调整，以达到提升系统性能和稳定性的目的。手工启动进程指的是由用户通过输入命令直接启动一个进程。
LINUX 查看当前系统的负载情况
weixin_30384217的博客
11-24 240
uptime linux uptime命令主要用于获取主机运行时间和查询linux系统负载等信息。 eg: # uptime 02:03:50 up 126 days, 12:57, 2 users, load average: 0.08, 0.03, 0.05 10:19:04 up 257 days, 18:56, 12 users, load average: 2.10, 2.10...
Linux查看负载
weixin_33762321的博客
05-20 128
负载(load)是linux机器的一个重要指标，直观了反应了机器当前的状态。如果机器负载过高，那么对机器的操作将难以进行。 Linux的负载高，主要是由于CPU使用、内存使用、IO消耗三部分构成。任意一项使用过多，都将导致服务器负载的急剧攀升。 查看服务器负载有多种命令，w或者uptime都可以直接展示负载， $ uptime12:20:30 up 44 days, 21:46, 2 u...
查看Linux系统负载命令
qq_59438034的博客
07-12 3310
我们来看一下常用的查看Linux负载的命令有哪些。1.top 命令：查看系统整体状态，动态的显示进程状态，每5秒会自动刷新一次。top命令提供了实时的对系统处理器的状态监视。 前五行是当前系统情况整体的统计信息区。第一行：任务队列信息：06：29：23— 当前系统时间up 8：21 — 系统已经运行了8小时421分钟12 users — 当前有12个用户登录系统load average: 2.12, 1.83, 1.77............
Linux系统设计-基于go获得Linux系统负载， web
01-10
Linux系统是一个免费使用和自由传播的类Unix操作系统，基于POSIX和UNIX的多用户、多任务、支持多线程和多CPU的操作系统。它继承了Unix以网络为核心的设计思想，是一个性能稳定的多用户网络操作系统，Linux是许多企业...
Linux系统负载均衡处理流程详解
09-22
Linux 系统负载均衡处理流程详解 Linux 系统的负载均衡处理流程是通过 init_sched_fair_class() 函数注册一个软中断（vector = SCHED_SOFTIRQ）触发系统的负载均衡。该软中断对应的处理函数是 run_rebalance_...
查看Linux系统负载的命令
m0_72636465的博客
07-16 890
查看Linux系统负载的命令
LINUX 负载LINUX 负载
02-24
LINUX 负载LINUX 负载LINUX 负载LINUX 负载LINUX 负载
linux 性能分析-负载
借风拥你
05-09 1233
平均负载是指单位时间内，系统处于可运行状态和不可中断状态的平均进程数，也就是平均活跃进程数。它不仅包括了正在使用 CPU 的进程，还包括等待 CPU 和等待 I/O 的进程 它和 CPU 使用率并没有直接关系CPU 密集型进程，使用大量 CPU 会导致平均负载升高，此时系统负载和cpu使用率高是一致的；I/O 密集型进程，等待 I/O 也会导致平均负载升高，但 CPU 使用率不一定很高；大量等待 CPU 的进程调度也会导致平均负载升高，此时的 CPU 使用率也会比较高。 3.2 安装压测工具 使用stres
Linux系统负载
周大侠的专栏
08-21 2474
阿里2014校招笔试的一道题目 22.关于Linux系统的负载，以下表述正确的是： A: 通过就绪和运行的进程数来反映 B: 通过TOP命令查看 C: 通过uptime查看 D: Load:2.5,1.3,1.1表示系统的负载压力在逐渐变小 参考答案：BC 再学习下Linux系统负载的知识查看的命令 w or uptime or procinf
Linux查看系统负载常用命令
孙益瑞的博客
06-07 1513
网站服务器经常会遇到linux系统负载的问题，那么linux下查看系统负载的命令有哪些呢？ linux下查看负载的主要命令有下面一些：top， uptime，w，vmstat1、top命令查看linux负载：第一行解释： top - 01:18:39 up 2 days, 18:54, 1 user, load average: 0.04, 0.03, 0.05 01:18:39：系统当前时间 u...
Linux负载命令详解
qq_50915088的博客
06-10 350
查看服务器负载一般使用：top，uptime，free，mpstat，ifstat，df。
Linux负载命令
weixin_69084736的博客
06-12 1255
Linux查看负载的命令
linux 系统负载,理解Linux系统的平均负载
weixin_31108679的博客
05-02 331
1. 平均负载的查看在Linux系统中，如果我们想查看系统的负载，可以通过top指令或者uptime指令。以uptime指令为例，可以看到以下输出：[root@hadoop05 ~]# uptime22:13:29 up 4 min, 3 users, load average: 1.17, 1.36, 0.63uptime指令输出数据的各项含义如下22:13:29 ...
Linux操作系统中关于负载的定义
最实用的Linux博客
09-28 987
原贴：http://blog.chinaunix.net/u/17030/showart_342669.html新手学堂 Linux操作系统中关于负载的定义 使用uptime或者top命令，都可以看到一个负载的输出，形如load average: 0.00, 0.03, 0.00，这个负载到底是什么东西呢，man文档里只是一笔带过，没有具体的给出负载的定义。　　负载的统计，必然是由内核完
查看Linux负载命令
jdvdudvrvd的博客
07-18 1836
查看Linux负载命令
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值