nGrinder对监控机器收集自定义数据及源码分析

0.背景

性能测试工具nGrinder支持在无需修改源码的情况下，对目标服务器收集自定义数据，最多支持5类；

在性能测试详细报告页，目标服务器->你的机器ip便签页下，默认只收集CPU, Memory, Received Byte/s, Sent Byte Per Secode/s等4类数据；

可能你还需要监控其它的性能统计数据，用于分析(比如load, Full Gc)；本文先介绍实现方法；再分析nGrinder源码，看它是怎么实现的。

1.实现

1-1. 安装monitor

在你的nGrinder系统下，下载监控

安装到你测试服务所在的机器，解压tar包，执行sh run_monitor_bg.sh;

其实脚本是启了个java服务，以monitor模式启动；

之前介绍过Agent有2种模式：

gent mode: 运行进程和线程，压测目标服务；

monitor mode: 监控目标系统性能(cpu/memory)。

[root@10 ngrinder-monitor]# cat run_monitor.sh
#!/bin/sh
curpath=`dirname $0`
cd ${curpath}
java -server -cp "lib/*" org.ngrinder.NGrinderAgentStarter --mode monitor --command run $@

Agent的home路径为/root/.ngrinder_agent，你在执行sh run_monitor_bg.sh默认获取的配置信息为/root/.ngrinder_agent/agent.conf； 如果加上-o，sh run_monitor_bg.sh 读取你安装monitor目录下的__agent.conf， 该配置文件定义了Agent的模式，ip, 端口。

[root@10 .ngrinder_agent]# cat agent.conf 
common.start_mode=monitor
#If you want to monitor bind to the different local ip not automatically selected ip. Specify below field.
#monitor.binding_port=hostname_or_ip
monitor.binding_port=13243

自定义数据需放在/root/.ngrinder_agent/monitor/custom.data文件里，格式如下：

类型1数据,类型2数据,类型3数据,类型4数据,类型5数据

最多支持5类，每类数据用“,”分隔，注意的是： 数据是实时的写文件，不是累积数据到文件中(类似shell中的>, 不是>>)，即同一时刻，只有一行数据。

1-2. 定制收集脚本

以收集load和full GC为例：

[root@10 bin]# cat updateCustomData.sh 
#!/bin/sh
#@author hugang

customDataRoot=/root/.ngrinder_agent/monitor/custom.data;
#  获取load信息 
load=`/bin/cat /proc/loadavg | awk '{print $1}'`;
#  获取full gc count
if [[ $1 -gt 0  ]]; then
  fgc=`jstat -gcutil $1 | tail -1 | awk '{print $8}'`;
  echo $load,$fgc > $customDataRoot;
else
  echo $load > $customDataRoot;
fi;

开始性能测试时，每秒去执行该脚本，收集数据到custom.data中：

 watch -n 1 sh updateCustomData.sh 5528

5528为需监控java服务进程pid;

当你性能测试结束后，monitor收集的数据会放到/root/.ngrinder/perftest/0_999/${test_id}/report/monitor_system_${ip}.data文件中:

[root@10 report]# cat monitor_system_10.13.1.139.data 
ip,system,collectTime,freeMemory,totalMemory,cpuUsedPercentage,receivedPerSec,sentPerSec,customValues
10.13.1.139,LINUX,20160302151441,97102768,132112072,26.895683,32954,27897,4.93,49
10.13.1.139,LINUX,20160302151443,97075896,132112072,30.513468,45702,32306,4.93,49
10.13.1.139,LINUX,20160302151445,97034772,132112072,30.411074,110306,65391,5.02,49
10.13.1.139,LINUX,20160302151447,96972504,132112072,22.073017,84813,57503,5.02,49
...

1-3.结果展示

2.源码分析

nGrinder使用Sigar工具（https://support.hyperic.com/display/SIGAR/Home）收集系统信息，该工具可以收集以下数据：

System memory, swap, cpu,