读书笔记之LoadRunner性能测试巧匠训练营(十一）

《LoadRunner性能测试巧匠训练营》第9章 java项目性能测试全程实践

5. 操作系统性能监控分析工具的选择及使用

2.Spotlight on Windows

Spotlight on Windows是Quest开发的一款针对Windows的性能监控工具，Spotlight on Windows通过实时地显示Windows操作系统内部的数据流动，来快速识别和解决性能问题。它能监控包括网络与CPU、CPU与内存、CPU与虚拟内存、内存与磁盘、内存与虚拟内存这些系统部件之间的实时数据流动图。各部件之间绿色或者黄色的连线，显示了数据流动的方向；连线的下方显示了数据流动的速度。通过这个数据流动图，可以帮助性能测试人员全面、深入地认识系统。

5.2 Linux监控工具选择及监控详解

1.top
top命令能够实时监控系统的运行状态，可以按照CPU、内存和执行时间排序，还可以通过交互式命令设定显示。top命令的输出如下图所示。

下面介绍top命令的语法。
top-hv|-bcisSHM-d delay-n iteratI/Ons[-u user|-U user]-p pid[，pid...]
各个选项以及参数的含义如下：
·-b：批次模式运行。通常用来将top的输出结果传送给其他程式或储存成文件。
·-c：显示执行任务的命令行。
·-d：设定延迟时间。
·-h：帮助。
·-H：显示线程。当这个设定开启时，将显示所有进程产生的线程。
·-i：显示空闲的进程。
·-n：执行次数，一般与-b搭配使用。
·-u：监控指定用户相关进程。
·-U：监控指定用户相关进程。
·-p：监控指定的进程。当监控多个进程时，进程ID以逗号分隔。这个选项只能在命令行下使用。
·-s：安全模式操作。
·-S：累计时间模式。
·-v：显示top版本，然后退出。
·-M：自动显示内存单位。

top命令输出的第一行是任务队列信息，同uptime命令的执行结果，依次表示的信息是：当前时间、系统运行时间、当前登录用户数、过去1分钟/5分钟/15分钟系统的平均负载。
第二、第三行为进程和CPU的信息。这些内容可能会超过两行。具体内容如下。
·Tasks：进程总数。
·running：正在运行的进程数。
·sleeping：睡眠的进程数。
·stopped：停止的进程数。
·zombie：僵尸进程数。
·%us：用户态占用CPU百分比。
·%sy：系统态占用CPU百分比。
·%ni：用户进程空间内改变过优先级的进程占用CPU百分比。
·%id：空闲CPU百分比。
·%wa：等待输入输出的CPU时间百分比。
·%hi：硬件中断所占CPU百分比。
·%si：软件中断所占CPU百分比。
·Mem：物理内存总量。
·used：物理内存使用量。
·free：剩余物理内存总量。
·buffers：缓存区的内存总量。
·Swap：交换区总量。
·used：交换区已使用内存总量。
·free：交换区剩余总量。
·cached：交换区缓冲区内存总量。
统计信息区域下方显示了各个进程的详细信息，具体解释如下。
·PID：进程ID。
·PPID：父进程ID。
·RUSER：Real user name。
·UID：进程所有者的用户ID。
·USER：进程所有者的用户名。
·GROUP：进程所有者的组名。
·TTY：启动进程的终端名。不是从终端启动的进程，则显示为？。
·PR：优先级。
·NI：nice值。负值表示高优先级，正值表示低优先级。
·P：最后使用的CPU，仅在多CPU环境下有意义。
·%CPU：从上次更新到现在的CPU时间占用百分比。
·TIME：进程使用的CPU时间总计，单位为s。
·TIME+：进程使用的CPU时间总计，单位为1/100s。
·%MEM：进程使用的物理内存百分比。
·VIRT：进程使用的虚拟内存总量，单位为KB。VIRT=SWAP+RES。
·SWAP：进程使用的虚拟内存中，被换出的大小，单位为KB。
·RES：进程使用的、未被换出的物理内存大小，单位为KB。RES=CODE+DATA。
·CODE：可执行代码占用的物理内存大小，单位为KB。
·DATA：可执行代码以外的部分（数据段+栈）占用的物理内存大小，单位为KB。
·SHR：共享内存大小，单位为KB。
·nFLT：页面错误次数。
·nDRT：最后一次写入到现在，被修改过的页面数。
·S：进程状态。D表示不可中断的睡眠状态，R表示运行状态，S表示睡眠状态，T表示跟踪/停止状态，Z表示僵尸进程。
·COMMAND：命令名/命令行。
·WCHAN：若该进程在睡眠，则显示睡眠中的系统函数名。
·Flags：任务标志，参考sched.h。
在默认情况下，仅显示比较重要的PID、USER、PR、NI、VIRT、RES、SHR、S、%CPU、%MEM、TIME+、COMMAND列。可以通过下面的快捷键来更改显示内容：
·通过f键可以选择显示的内容：按f键之后会显示列的列表，按a～z键即可显示或隐藏对应的列，最后按回车键确定。
·按o键可以改变列的显示顺序：按小写的a～z键可以将相应的列向右移动，而按大写的A～Z键可以将相应的列向左移动。最后按回车键确定。
·按大写的F或O键，然后按a～z键可以将进程按照相应的列排序。而按大写的R键可以将当前的排序倒转。
通过top命令可以从宏观上观察各个进程对CPU的占用情况以及内存使用情况。
2.vmstat
vmstat是一款功能比较齐全的性能监测工具，它是Virtual Memory Statistics（虚拟内存统计）的缩写，很多Linux版本都默认安装了该命令工具，可以对操作系统的内存信息、进程状态、CPU活动、磁盘等信息进行监控，不足之处是，无法对某个进程进行深入分析。vmstat基本用法如下：

（1）vmstat命令
vmstat命令的用法如下：
vmstat[-a][-n][-S unit][delay[count]]
下面介绍各个选项以及参数含义。
·-a：显示活跃和非活跃内存。
·-m：显示slabinfo。
·-n：只在开始时显示一次各字段名称。
·-s：显示内存相关统计信息及多种系统活动数量。
·delay：刷新时间间隔。如果不指定，则只显示一条结果。
·count：刷新次数。如果不指定刷新次数，但指定了刷新时间间隔，则刷新次数为无穷。
·-d：显示各个磁盘相关统计信息。
·-S：使用指定单位显示。参数有k、K、m、M，分别代表1000、1024、1000000、1048576字节（byte）。默认单位为K（1024bytes）。
·-V：显示vmstat版本信息。
·-p：显示指定磁盘分区统计信息。
·-D：显示磁盘总体信息。
（2）vmstat输出字段

• procs区域
• memory区域
• swap区域
• I/O区域
• system区域
• cpu区域

3.iostat
iostat是I/O statistics（磁盘输入/输出统计）的缩写，主要是对系统的磁盘I/O操作进行监控，它的输出主要显示磁盘读写操作的统计信息，同时给出CPU的使用情况。同vmstat一样，iostat不能对某个进程进行深入分析，仅对操作系统的整体情况进行分析。
iostat在早一些的Linux系统版本上不会随系统安装，要使用iostat工具，需要在系统上安装一个Sysstat的工具包，安装后系统会多出3个命令：iostat、sar、mpstat。
iostat命令行的语法如下。
iostat[-c|-d][-k|-m][-t][-V][-x][device[...]|ALL]
[-p[device|ALL]][interval[count]]
各选项以及参数含义如下。
·-c：仅显示在采样时间内的CPU统计信息，与-d选项互斥。
·-d：仅显示在采样时间内的磁盘统计信息，与-c选项互斥。
·-k：以K为单位显示在采样时间内每秒的磁盘请求数，默认单位为块。
·-p：device|ALL，与-x选项互斥，用于显示块设备及系统分区在采样时间内的统计信息，也可以在-p后指定一个设备名。
·-t：在输出数据时，打印统计信息开始执行的时间。
·-V：打印版本号和帮助信息。
·-x device：输出指定要统计的磁盘设备名称，默认为所有磁盘设备。
·-interval：指两次统计间隔时间，可选参数。
·-count：按照interval指定的时间间隔统计的次数，可选参数。

4.sar
sar是非常强大的性能分析命令，是分析系统性能的重要工具之一。通过sar命令可以全面获取系统的CPU、运行队列、磁盘I/O、交换区、内存、CPU中断、网络等性能数据。

5.netstat
netstat命令用于显示本机网络连接、运行端口、路由表等信息。

6.nmon
nmon是一种在aix与各种Linux操作系统上广泛使用的监控与分析工具，它主要记录以下内容。
·CPU占用率。
·内存使用情况。
·磁盘I/O速度、传输和读写比率。
·文件系统的使用率。
·网络I/O速度、传输和读写比率、错误统计率与传输包的大小。
·消耗资源最多的进程。
·计算机详细信息和资源。
·页面空间和页面I/O速度。
·用户自定义的磁盘组。
·网络文件系统。

7.Spotlight on Linux
Spotlight on UNIX是一个Linux操作系统的诊断和解决方案，适用于Solaris、AIX、UNIX和Red Hat/Linux操作系统。它采用基于Windows的控制台，在同一界面上实时显示组件活动。通过显示实时的UNIX/Linux操作系统、I/O和内核的活动，Spotlight能够查明问题发生来源。图形化的数据流表明了所有组件之间数据的流动效率。Spotlight主界面显示的内存、缓存、磁盘存储和网络等组件之间来往的脉冲信号代表相对的数据传输速率和系统内的活动水平，这些流量可以检验有关具体系统的性能特点。
 

6.数据库系统性能监控工具及选择

6.2 Mysql监控分析

MySQLMTOP是一个由Python+PHP开发的开源MySQL企业监控系统。系统由Python实现多进程数据采集和告警，PHP实现Web展示和管理。MySQL服务器无须安装任何Agent，只需在监控Web界面配置相关数据库信息，启动监控进程后，即可对上百台MySQL数据库的状态、连接数、QTS、TPS、数据库流量、复制、性能慢查询等进行实时监控，能在数据库偏离设定的正常运行阈值（如连接异常、复制异常、复制延迟）时，发送报警邮件，通知到相关责任人进行处理，并对历史数据归档，通过图表展示数据库近期状态，以便DBA和开发人员、性能测试人员等能对遇到的问题进行分析和诊断。

MySQL MTOP主要功能特性如下：
（1）实时MySQL可用性监视
数据库可用性监视和衡量可以让开发者和DBA了解数据库是否符合预期的性能要求。
（2）实时MySQL状态监视和警报
MySQL MTOP持续监视MySQL的基本状态和性能信息，包括数据库连接状态、启动时间、数据库版本、总连接数、活动进程、QPS、TPS、进出MySQL数据库的流量信息等。在数据库状态异常或偏离正常基准水平时，发出报警邮件。
（3）实时MySQL复制监视
MySQL MTOP自动发现MySQL复制拓扑结构，自动监视数据库的延时和binlog信息，可以了解所有MySQL主服务器和从服务器的性能、可用性和运行状况。并在问题（如从服务器延迟）导致停机前，向管理员提供改正建议。

（4）远程监视云中的MySQL
适合于云和虚拟机的设计，能远程监视MySQL服务器，而不需要任何远程代理器。

（5）直观管理所有MySQL服务器
MySQL MTOP提供一个基于Web的界面，可帮助用户全面深入地了解数据库性能、可用性、关键活动等；直观地查看一台服务器、自定义的应用组或所有服务器。一组丰富的实时图形和历史图形将帮助用户深入了解详细的服务器统计信息。

（6）可视化MySQL慢查询分析
监视实时查询性能，查看执行统计信息，筛选和定位导致性能下降的SQL代码。结合使用Information Schema，可直接从MySQL服务器收集数据，无须额外的软件或配置。

（7）MySQL性能监视
监视影响MySQL性能的主要指标，如查询缓存命中率、Key_buffer_read_hits、Key_buffer_write_hits、Thread_cache_hits、Key_blocks_used_rate、Created_tmp_disk_tables_rate等信息，根据相关性能指标可以对服务器核心参数进行调整优化。