系统和应用监控指标

最新推荐文章于 2023-01-13 22:07:42 发布
最新推荐文章于 2023-01-13 22:07:42 发布
阅读量9.3k 收藏 30
点赞数 1
分类专栏： 职场@系统操作 文章标签： 系统指标参考 应用系统指标监控
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wolf_love666/article/details/88582746
版权
  • 系统指标
  • 网络指标
  • 磁盘指标
  • 容器指标
  • 硬件指标

系统指标

CPU负载和CPU使用率区别：
CPU利用率:显示的是程序在运行期间实时占用的CPU百分比
CPU负载:显示的是一段时间内正在使用和等待使用CPU的平均任务数。CPU利用率高，并不意味着负载就一定大。
举例说明：
某公用电话亭，有一个人在打电话，四个人在等待，每人限定使用电话一分钟，若有人一分钟之内没有打完电话，只能挂掉电话去排队，等待下一轮。电话在这里就相当于CPU，而正在或等待打电话的人就相当于任务数。
在电话亭使用过程中，肯定会有人打完电话走掉，有人没有打完电话而选择重新排队，更会有新增的人在这儿排队，这个人数的变化就相当于任务数的增减。为了统计平均负载情况，我们5秒钟统计一次人数，并在第1、5、15分钟的时候对统计情况取平均值，从而形成第1、5、15分钟的平均负载。有的人拿起电话就打，一直打完1分钟，而有的人可能前三十秒在找电话号码，或者在犹豫要不要打，后三十秒才真正在打电话。如果把电话看作CPU，人数看作任务，我们就说前一个人（任务）的CPU利用率高，后一个人（任务）的CPU利用率低。
当然， CPU并不会在前三十秒工作，后三十秒歇着，只是说，有的程序涉及到大量的计算，所以CPU利用率就高，而有的程序牵涉到计算的部分很少，CPU利用率自然就低。但无论CPU的利用率是高是低，跟后面有多少任务在排队没有必然关系。

在这里插入图片描述

内存使用率：
指标含义：内存使用率百分比(%)。

指标解释：容器的内存使用率是读取物理机cgroup下面的文件的，获取的是整个容器的内存使用率并不是针对某个程序。物理机内存使用率和使用free命令计算结果是一致的。物理机和容器两者内存计算数据是独立的。

容器内存占用查看方式：使用top命令查看重点查看RES一列，top命令详解请参考文档：

系统是否实例和主机是否存在在这里插入图片描述> 指标含义：连通性（0 or 1），0为存活，1未不存活。
指标解释：系统每次检测时会ping4次，计算得到丢包率。目前不是100%丢包的都算作是存活就（即0），只有100%丢包才会算作不存活（即1）。

负载问题之前说过系统负载不超过3，我这里接近5的时候直接应用停顿了，所有的连接都断了

在这里插入图片描述

系统负载
指标含义：系统负载（1分钟粒度平均值）。
指标解释：在Linux系统中，使用uptime或这top命令可以查看当前系统的负载（top可以看到的信息更加详尽一些）。
“load average”，它的意思是"系统的平均负载"，里面有三个数字，我们可以从中判断系统负载是大还是小。这三个数字分别表示最近1分钟、5分钟、15分钟内系统的负载平均值。详情参考

2019-03-15 19:35:03.322 WARN 108710 — [LI-WORKER-5-T-6] c.j.j.g.t.AbstractTCPClientTransport : [JSF-22114]Not found future which msgId is 36 when receive response. May be this future have been removed because of timeout
2019-03-15 19:35:03.323 WARN 108710 — [LI-WORKER-5-T-6] c.j.j.g.t.AbstractTCPClientTransport : [JSF-22114]Not found future which msgId is 37 when receive response. May be this future have been removed because of timeout

在这里插入图片描述

指标含义：swap使用率百分比(%)。
指标解释：Linux中Swap（即：交换分区），类似于Windows的虚拟内存，就是当内存不足的时候，把一部分硬盘空间虚拟成内存使用,从而解决内存容量不足的情况。
swap space 是磁盘上的一块区域，可以是一个分区，也可以是一个文件。所以具体的实现可以是 swap 分区也可以是 swap 文件。当系统物理内存吃紧时，Linux 会将内存中不常访问的数据保存到 swap 上，这样系统就有更多的物理内存为各个进程服务，而当系统需要访问 swap 上存储的内容时，再将 swap 上的数据加载到内存中，这就是常说的换出和换入。交换空间可以在一定程度上缓解内存不足的情况，但是它需要读写磁盘数据，所以性能不是很高。

现在的机器一般都不太缺内存，如果系统默认还是使用了 swap 是不是会拖累系统的性能？理论上是的，但实际上可能性并不是很大。并且内核提供了一个叫做 swappiness 的参数，用于配置需要将内存中不常用的数据移到 swap 中去的紧迫程度。这个参数的取值范围是 0～100，0 告诉内核尽可能的不要将内存数据移到 swap 中，也即只有在迫不得已的情况下才这么做，而 100 告诉内核只要有可能，尽量的将内存中不常访问的数据移到 swap 中。在 ubuntu 系统中，swappiness 的默认值是 60。如果我们觉着内存充足，可以在 /etc/sysctl.conf 文件中设置 swappiness：

网络指标：

在这里插入图片描述

指标含义：网络入向流量（MB/s）（1分钟粒度平均值）；网络向内接收的流量。
指标含义：网络出向流量（MB/s）（1分钟粒度平均值）；网络向外发送的流量。

在这里插入图片描述

指标含义：网络入向包速率（packet/s）（1分钟粒度平均值）；网络向内接收包的个数。
指标解释： 数据包：包(Packet)是TCP/IP协议通信传输中的数据单位，一般也称“数据包”。
TCP/IP协议是工作在OSI模型第三层(网络层)、第四层(传输层)上的。

指标含义：网络出向包速率（packet/s）（1分钟粒度平均值）；网络向外发送包的个数。
在这里插入图片描述
指标含义：当前处于“ESTABLISHED (正在连接)”状态的tcp连接数。
取值方式：cat /proc/net/snmp，参数含义请参考：
指标解释：
一、ESTABLISHED (正在连接) 即有一个TCP 连接正在进行
二、TCP 关闭四步
1、Client发送了FIN给server，2、server发送ACK给Client，而Server 程序处于CLOSE_WAIT状态 3、server发送FIN给Client，Server 就置为LAST_ACK（主动关闭）状态 4、Client发送了ACK给server TCP 连接才会关闭
如果第三步没有进行则server会保持CLOSE-WAIT (被动关闭)状态，通常会保持2个小时
在这里插入图片描述
TCP Active opens
指标含义：主动建立tcp连接频率，既主动发送SYN，进入“SYN-SENT”状态的频率（次/s）（1分钟粒度平均值）。
取值方式：cat /proc/net/snmp，参数含义请参考：TCP SNMP counters
指标解释：SYN_SENT表示请求连接，当你要访问其它的计算机的服务时首先要发个同步信号给该端口，此时状态为SYN_SENT，如果连接成功了就变为ESTABLISHED，此时SYN_SENT状态非常短暂。但如果发现SYN_SENT非常多且在向不同的机器发出，那你的机器可能中了冲击波或震荡波之类的病毒了。这类病毒为了感染别的计算机，它就要扫描别的计算机，在扫描的过程中对每个要扫描的计算机都要发出了同步请求，这也是出现许多SYN_SENT的原因。

在这里插入图片描述

指标含义：入向IP报文速率（packet/s）（1分钟粒度平均值）
取值方式：cat /proc/net/snmp，参数含义请参考：TCP SNMP counters
指标解释：TCP/IP协议定义了一个在因特网上传输的包，称为IP数据包，而IP数据报(IP Datagram)是个比较抽象的内容，是对数据包的结构进行分析。 由首部和数据两部分组成，其格式如图所示。首部的前一部分是固定长度，共20字节，是所有IP数据报必须具有的。在首部的固定部分的后面是一些可选字段，其长度是可变的。首部中的源地址和目的地址都是IP协议地址。
在这里插入图片描述

在这里插入图片描述

丢弃IP包（IP发送包数)
指标含义：入向的ip包中，没有错误但是被丢弃的。
取值方式：cat /proc/net/snmp，参数含义请参考：TCP SNMP counters
指标解释：丢弃的原因可能有buffer满了。

TCP接收包数
指标含义：入向TCP包速率（packet/s）（1分钟粒度平均值）。。
取值方式：cat /proc/net/snmp
在这里插入图片描述

TCP发送包数
指标含义：出向TCP包速率（packet/s）（1分钟粒度平均值）。
取值方式：cat /proc/net/snmp，
在这里插入图片描述
TCP包传输错误数
指标含义：入向TCP错误包频率（packet/s）（1分钟粒度平均值）。
取值方式：cat /proc/net/snmp，参数含义请参考：TCP SNMP counters
指标解释：TCP是一个可靠的协议，TCP包的头部带有标识，通过校验发现接收的包是错误的，然后将该包进行丢弃后返回一个值要求重新进行传送。

TCP包重传数
指标含义：TCP重传包频率（packet/s）（1分钟粒度平均值）。
取值方式：cat /proc/net/snmp，参数含义请参考：TCP SNMP counters

磁盘指标：

磁盘使用率：
指标含义：磁盘使用率百分比(%)
指标解释：目前是按照每个分区来进行统计。
在这里插入图片描述
磁盘繁忙率
指标含义：磁盘负载百分比(%)（1分钟粒度平均值）
查看磁盘负载：
iostat -x 1 10 查看 %util
#如果没有iostat 需要yum install sysstat安装；
#如果 %util 接近 100%，说明产生的I/O请求太多，I/O系统已经满负荷，该磁盘可能存在瓶颈。

在这里插入图片描述

指标含义：磁盘每秒读取的数据量(KB/s)（1分钟粒度平均值）
指标含义：磁盘每秒写入的数据量(KB/s)（1分钟粒度平均值）
指标含义：磁盘每秒读取次数（次/s）（1分钟粒度平均值）。
指标含义：磁盘每秒写入次数（次/s）（1分钟粒度平均值）。

在这里插入图片描述
在这里插入图片描述

容器指标

在这里插入图片描述

线程数
指标含义：平均到每个核的线程数
进程数
指标含义：当前容器内进程总数
在这里插入图片描述
内存分配失败次数
指标含义：申请内存/swap失败次数（1分钟粒度）
句柄数
指标含义：当前容器内打开的文件句柄数
指标解释：在文件I/O中，要从一个文件读取数据，应用程序首先要调用操作系统函数并传送文件名，并选一个到该文件的路径来打开文件。该函数取回一个顺序号，即文件句柄（file handle），该文件句柄对于打开的文件是唯一的识别依据。要从文件中读取一块数据，应用程序需要调用函数ReadFile，并将文件句柄在内存中的地址和要拷贝的字节数传送给操作系统。当完成任务后，再通过调用系统函数来关闭该文件。

在这里插入图片描述

memory_swap使用量(MB)
指标含义：容器的swap使用量（MB）

硬件指标

CPU温度
指标含义：CPU温度（℃）
在这里插入图片描述
服务器功率
指标含义：服务器功率（W）
在这里插入图片描述
CPU风扇
指标含义：CPU风扇转速（RPM）
指标解释：RPM =round per minute，即每分钟多少转。
在这里插入图片描述

小诚信驿站
关注
  • 1
    点赞
  • 踩
  • 30
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
SkyWalking应用性能监控系统-其他
06-11
SkyWalking 是一款开源的应用性能监控系统，包括指标监控，分布式追踪，分布式系统性能诊断。功能：1、服务，服务实例，端点指标分析2、根本原因分析。在运行时分析代码。阅读Apache SkyWalking：使用性能分析来修复...
Linux之swap分区使用进程查看及释放
热门推荐
月生的静心苑
05-23 1万+
有些服务器因为历史原因和特殊需求分配的swap空间比较大，服务器长时间运行后发现swap空间使用率很高。我们知道swap实际上是使用的硬盘空间，比起内存运行会慢很多。那到底是哪些进程占用了大量的swap空间呢？又如何释放swap空间呢？
swap分区使用率过高
qq_34208660的博客
07-26 4485
上图可看出，内存还是剩余很多的 但是swap却是剩的可怜。 使用swap而不使用物理内存 ，会大大降低进程的运行质量 解决：找出使用swap的进程，重启 for i in `cd /proc;ls |grep "^[0-9]"|awk ' $0 >100'` ;do awk '/Swap:/{a=a+$2}END{print '"$i"',a/1024"M"}' /proc/$i/smaps ;done |sort -k2nr |head -n 20 命令：分析/proc/[pid...
系统内存还有很多的情况下为何swap使用很高了
linxi7的博客
10-10 6656
Swap是什么 Swap就是把一块磁盘空间或者一个本地文件，当成内存来使用。 换出，就是把进程暂时不用的内存数据存储到磁盘中 换入，就是在进程再次访问这些内存的时候，从磁盘中读取到内存 Swap其实是把系统的可用内存变大了，这样即使服务器的内存不足，也可以腾出空间来运行大内存的应用程序。 既然Swap是为了回收内存，那么Linux会在什么时候需要回收内存呢？它又是怎么来衡量内存是不是紧张或者压力大呢？ 内存回收是什么？ 内存回收是子系统释放掉可以回收的内存 缓存和缓冲区，他们在内存管理中，叫做文件页
Linux Swap空间利用率过高
qq_35789269的博客
06-27 8084
在单独部署的mysql数据库服务器中发现，在高并发的情况下发现内存不够用，进一步发现swap的利用率很高。公司的DBA提了两点建议：1、建议先减小数据库缓冲池(buffer pool)的大小；2、进行数据库内存扩容 1、首先，不是内存不够用吗？swap利用率为什么高呢？swap是什么呢？ 什么是swap? swap space是磁盘上的一块区域，可以是一个分区，也可以是一个文件，或者是他们的组合。简单点说，当系统物理内存吃紧时，Linux会将内存中不常访问的数据保存到swap上，这样系统就有更多的物理
【swap】swap使用过高的处理方法
michaelwoshi的博客
01-15 1967
生产有一台主机Swap使用很高，一看内存使用率高，基本耗尽。 Linux内核为了提高读写效率与速度，会将文件在内存中进行缓存，这部分内存就是Cache Memory(缓存内存)。 即使你的程序运行结束后，Cache Memory也不会自动释放。 这就会导致你在Linux系统中程序频繁读写文件后，你会发现可用物理内存变少。 当系统的物理内存不够用的时候，就需要将物理内存中的一部分空间释放出来，以供当前运行的程序使用。 那些被释放的空间可能来自一些很长时间没有什么操作的程序，这些被释放的空间被临时保存
linux内存利用率计算以及swap的设置
niceHack的博客
01-13 4642
linux内存利用率计算以及swap的设置
服务器swap占用过高,主机swap区使用率过高
weixin_36084130的博客
07-29 2719
故障现象客户一台rx8640的主机，巡检的时候发现syslog.log中有一条信息：Jul 30 09:37:52 imisdb2 vmunix: Deferred swap reservation failure pid: 3255根据这条信息的意思是说swap异常，如是去查看swap的详细情况。用glance和swapinfo –atm查看，发现swap使用率达到了83%，这个值跟以前的相比，...
swap使用率达到100%的解决办法
hzj_001的博客
04-18 1万+
一：方法 1.增加物理内存的大小，减少swap使用的可能性； 2.杀掉使用swap最多的进程，这种方法比较low，不太建议了； 3.通过创建swapfile分区，来增加swap空间； 4.主动swapout:swapoff -a 执行结束后，再执行swapon -a。 二：具体操作 1.增加物理内存就无话可说了； 2.找到10个最大进程数量： #!/bin/bash ps ax -o p...
Swap使用过高问题排查
zhaorongxi的博客
10-09 6458
随着中间件,服务部署的越来越多,内存使用也越来越多,swap也占用的越来越多,如何排查出占用swap过高的程序
ApacheFlink在eBay监控系统上的实践和应用
02-24
本文将结合监控系统Flink的现状，具体讲述Flink在监控系统上的实践和应用，希望给同业人员一些借鉴和启发。eBay的监控平台Sherlock.IO每天处理着上百亿条日志（log），事件（event）和指标（metric）。通过构建...
Apache Flink 在 eBay 监控系统上的实践和应用
02-26
Sherlock.IO 是 eBay 现有的监控平台，每天要处理上百亿条日志、事件和指标。Flink Streaming job 实时处理系统用于处理其中的日志和事件。... Flink 在监控系统上的实践和应用，希望给同业人员一些借鉴和启发。
基于Ganglia和Nagios的云计算平台智能监控系统
06-23
该系统可对云计算平台内主机和服务以及运行环境的各项性能指标进行全方位监控,实现对故障的实时预警和报警,使得管理人员能准确定位、实时处理云平台异常情况,从而提高了云平台的服务质量,有较好的应用价值。
互联网数据中心基础设施监控指标规范 v1.2.pdf
11-29
数据中心基础设施监控指标规范文档；本标准规定了互联网数据中心基础设施(包括:强电、暖通、弱电。不包括:IT基础设施)应向互联网数据中心基础设施... 本标准适用于互联网数据中心基础设施、管理和控制系统的建设和应用
Linux初级运维+系统服务搭建（九）菜鸟零基础搭建jdk环境到搭建服务器tomcat到搭建nexus私服教程
小诚信驿站
11-25 1764
第一步： 下载JDk： :rpm http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html:tar http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 第二步： 下载tomca
Windows初级运维（一）文件查找DOS命令大全
小诚信驿站
09-18 1061
参考网上整理出来的，需要了解下dos命令的可以看： 知识前提了解： 快速打开 cmd windows+R 快速关闭 alt+空格+c 或者输入exit dir directory 显示文件和子目录 cd change directory 改变当前的路径 md make directory 新建一个子目录（文件夹） rd remove directory 删除一个子目录（文件夹
Linux初级运维+系统服务搭建（三）用户管理及权限、IO重定向、grep、正则表达式
小诚信驿站
09-30 736
计算资源 内核—程序（进程）–交互工具shell 权限 用户，容器，关联权限—-我们将所有用户放入不同的容器让其关联不同的权限，简化方便指配权限—-就达到了用户组 计算机如何实现获取每个用户，对于计算机每个用户都是正对于外界就是个标示符。用户组也是标示符。 进程是用户的执行程序的一个代理，那么我们可以理解为的就是当你用不同的用户登录执行命令，那么进程的用户组就是不同用户的代理进行执行操作。
Linux初级运维+系统服务搭建（一）linux文件系统根目录详解
小诚信驿站
09-25 720
文件系统根目录：rootfs 查看所有文件夹: ls / 系统启动相关的文件，如内核、initrd以及grub（bootloader） 设备文件：/dev hdc符号链接–相当于快捷方式 ：ls -l /dev 显示的样式： 设备文件（显示的时候–颜色背景黑色，字体黄色，元数据）： 块设备：随机访问，数据块 字符设备：线性
应用系统监控和性能优化
最新发布
04-26
对于应用系统监控和性能优化，有一些常见的方案和工具可以使用。首先，可以使用监控工具来实时监测应用系统的运行情况，如CPU、内存、磁盘IO等指标，以及网络通信状况，发现问题及时处理。例如，常用的监控工具有Zabbix、Nagios等。其次，可以使用日志管理工具或应用程序性能管理（APM）工具，对系统的应用程序日志进行集中管理，快速定位故障。例如，常用的APM工具有New Relic、AppDynamics等。最后，可以使用性能优化工具和技术，优化应用程序的性能，如代码优化、数据库调优等。例如，可以使用MySQL、Redis等数据库技术进行优化。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小诚信驿站

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值