查看grafana版本_案例:性能监控工具之Grafana+Prometheus+Exporters

在本模块中,我将把几个常用的监控部分给梳理一下。前面我们提到过,在性能监控图谱中,有操作系统、应用服务器、中间件、队列、缓存、数据库、网络、前端、负载均衡、Web 服务器、存储、代码等很多需要监控的点。显然这些监控点不能在一个专栏中全部覆盖并一一细化,我只能找最常用的几个,做些逻辑思路的说明,同时也把具体的实现描述出来。如果你遇到了其他的组件,也需要一一实现这些监控。在本篇中,主要想说明白下图的这个监控逻辑。

bb54771f58a5669dda381a8c97f2d99f.png


这应该是现在最流行的一套监控逻辑了吧。我今天把常见的使用 Grafana、Prometheus、InfluxDB、Exporters 的数据展示方式说一下,如果你刚进入性能测试领域,也能有一个感性的认识。有测试工具,有监控工具,才能做后续的性能分析和瓶颈定位,所以有必要把这些工具的逻辑跟你摆一摆。所有做性能的人都应该知道一点,不管数据以什么样的形式展示,最要紧的还是看数据的来源和含义,以便做出正确的判断。我先说明一下 JMeter 和 node_exporter 到 Grafana 的数据展示逻辑。至于其他的 Exporter,我就不再解释这个逻辑了,只说监控分析的部分。

d14eb9dced33dd1263794dc7c233fef0.png

JMeter+InfluxDB+Grafana 的数据展示逻辑
一般情况下,我们用 JMeter 做压力测试时,都是使用 JMeter 的控制台来查看结果。如下图所示:

f7b83d64233c72af8f43effcdf0ab0a1.png


或者装个插件来看结果:


或者用 JMeter 来生成 HTML:

14170cb4f52f999dc59a88be83b0cf75.png


这样看都没有问题,我们在前面也强调过,对于压力工具来说,我们最多只关心三条曲线的数据:TPS(T 由测试目标定义)、响应时间、错误率。这里的错误率还只是辅助排查问题的曲线,没有问题时,只看 TPS 和响应时间即可。不过采取以上三种方式有几个方面的问题。
1.整理结果时比较浪费时间。
2.在 GUI 用插件看曲线,做高并发时并不现实。
3.在场景运行时间比较长的时候,采用生成 HTML 的方式,会出现消耗内存过大的情况,而实际上,在生成的结果图中,有很多生成的图我们并不是那么关注。
4.生成的结果保存之后再查看比较麻烦,还要一个个去找。
那么如何解决这几个问题呢?用 JMeter 的 Backend Listener 帮我们实时发送数据到 InfluxDB 或 Graphite 可以解决这样的问题。Graphite Backend Listener 的支持是在 JMeter 2.13 版本,InfluxdDB Backend Listener 的支持是在 JMeter 3.3 的版本,它们都是用异步的方式把数据发送出来,以便查看。其实有这个 JMeter 发送给 InfluxDB 的数据之后,我们不需要看上面的那些 HTML 数据,也可以直观地看到系统性能的性能趋势。并且这样保存下来的数据,在测试结束后想再次查看也比较方便比对。JMeter+InfluxDB+Grafana 的结构如下:

3d9caa973ba979d6f9730b89c602ef88.png


在这个结构中,JMeter 发送压力到服务器的同时,统计下 TPS、响应时间、线程数、错误率等信息。默认每 30 秒在控制台输出一次结果(在 jmeter.properties 中有一个参数 #summariser.interval=30 可以控制)。配置了 Backend Listener 之后,将统计出的结果异步发送到 InfluxDB 中。最后在 Grafana 中配置 InfluxDB 数据源和 JMeter 显示模板。然后就可以实时查看 JMeter 的测试结果了,这里看到的数据和控制台的数据是一样。但如果这么简单就说完了,这篇文章也就没价值了。下面我们来说一下,数据的传输和展示逻辑。

2bb84a067d461e262755442a6e57dea8.png

JMeter 中 Backend Listener 的配置
下面我们就 InfluxDB 的 Backend Listener 做个说明。它的配置比较简单,在脚本中加上即可。

3ea8b8dcc6aee524c4a876e21bdf0744.png


我们先配置好 influxdb Url、application 等信息,application 这个配置可以看成是场景名。那么 JMeter 如何将数据发给 InfluxDB 呢?请看源码中的关键代码,如下所示:1 private void addMetrics(String transaction, SamplerMetric metric) {
2 // FOR ALL STATUS
3 addMetric(transaction, metric.getTotal(), metric.getSentBytes(), metric.getReceivedBytes(), TAG_ALL, metric.getAllMean(), metric.getAllMinTime(),
4 metric.getAllMaxTime(), allPercentiles.values(), metric::getAllPercentile);
5 // FOR OK STATUS
6 addMetric(transaction, metric.getSuccesses(), null, null, TAG_OK, metric.getOkMean(), metric.getOkMinTime(),
7 metric.getOkMaxTime(), okPercentiles.values(), metric::getOkPercentile);
8 // FOR KO STATUS
9 addMetric(transaction, metric.getFailures(), null, null, TAG_KO, metric.getKoMean(), metric.getKoMinTime(),
10 metric.getKoMaxTime(), koPercentiles.values(), metric::getKoPercentile);
11
12
13 metric.getErrors().forEach((error, count) -> addErrorMetric(transaction, error.getResponseCode(),
14 error.getResponseMessage(), count));
15 }
16 从这段代码可以看出,站在全局统计的视角来看,这里把 JMeter 运行的统计结果,比如事务的 Total 请求、发送接收字节、平均值、最大值、最小值等,都加到 metric 中,同时也会把成功和失败的事务信息添加到 metric 中去。在源码中,还有更多的添加 metric 的步骤,你有兴趣的话,也可以看一下 JMeter 源码中的InfluxdbBackendListenerClient.java。保存了 metric 之后,再使用 InfluxdbMetricsSender 发送到 Influxdb 中去。
往期精彩文章答对了这19道题目 她应届生拿到了10K的offer银行项目之信贷系统管理业务知识代码覆盖率从这里开始了解银行软件测试人员需要知道的银行业务知识凡猫学院软件测试高薪就业班招生简章Python3 基础快速入门(列表 循环控制语句)喜报来了!凡猫学员薪资最高16K!金融行业软件测试介绍2020年为什么大家都开始学习自动化测试?

16a6ea929b8ff87842185db66b858ddc.gif
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值