【博学谷学习记录】超强总结，用心分享 | 软件测试 性能测试理论

1. 性能测试理论

1. 性能测试概述

1. 性能的概念

• 性能：就是软件质量属性中的“效率”特性
  • 效率特性：
    • 时间特性：指系统处理用户请求的响应时间
    • 资源特性：指系统在运行过程中，系统资源的消耗情况
      • CPU
      • 内存
      • 磁盘IO（磁盘的写入与读取）

2. 性能测试的概念

• 性能测试：使用自动化工具，模拟不同的场景，对软件各项性能指标进行测试和评估的过程

• 测试范围：

  • 后台处理程序
  • 中间件（应用服务器）、数据库、程序架构等等
  • 服务器资源的消耗（CPU、内存、磁盘、网络）

• 业务需求

  • 大量用户下，系统能否稳定运行
  • 用于硬件服务器的选型
  • 用于软件技术的选型

3. 性能测试的目的

1. 评估当前的系统能力
   • 验收第三方提供的软件
   • 获取关键的性能指标，与同类型的软件对比（跑分）
2. 发现性能问题后，虚招性能瓶颈，优化性能
3. 评估软件能否满足未来的性能需要

4. 性能测试与功能测试

• 关注点：
  • 功能测试：关注系统对用户需求规则的满足程度。关注点（正向、逆向）
  • 性能测试：关注系统对用户业务场景的满足成都。关注点（时间、资源）
• 关系：
  • 在一个项目中，功能测试与性能测试共存
  • 功能测试通过后，才进行性能测试

2. 性能测试策略

1. 基准测试

• 狭义上讲：单个用户进行业务场景的测试，并统计性能的各项指标（为后续性能测试做参考对比）
• 广义上讲：在某一个时刻进行性能测试建立一个已知的性能水平，当软硬件发生变化时再测试，观察变化对于性能产生的影响

2. 负载测试

• 通过逐步增加系统负载量，测试系统性能的变化，在满足性能指标的前提下，系统所能够承受的最大负载量的测试。

• 通过负载测试，一般能找到系统的最优负载和最大负载。

• 最大负载一般项目组内部知晓，不会对外公布。

• 普通用户看到的系统的最大能力，一般都是测试得到的最优负载。

3. 稳定性测试

• 在服务器稳定运行（业务正常的负载量）的情况下，进行长时间的测试，保证服务器能够正常运行。
  • 长时间：1天、1周

4. 并发测试

• 系统在短时间内同时处理大量请求，查看系统的并发处理能力

5. 压力测试

• 测试系统在强负载的情况下，测试系统在峰值情况下的操作，是否具有良好的容错能力及错误的恢复能力。

• 稳定性压力测试：在系统高负载的情况下（接近C点），长时间运行（24小时），查看系统的处理能力，

• 破坏性压力测试：在系统极限负载的情况下（C-D点），对系统进行压力测试，查看系统容错能力和错误恢复能力。

6. 容量测试

• 关注系统在极限情况下的各种极限参数值

3. 性能指标

• 指标：在性能测试的过程中，记录的一系列的数据值。用这些实际记录的数据值与需求中的性能要求做对比，达成需求要求则无问题；未达到需求要求则说明是性能bug。
• 常见的性能指标：响应时间、并发数、吞吐量、错误率、点击数、资源利用率

1. 响应时间

• 客户端发送请求，到客户端收到服务器返回的响应，过程中所经历的全部时间，都是响应时间

• 响应时间 = 应用程序处理时间（A1+A2+A3） + 网络传输时间（N1+N2+N3+N4）

2. 并发数

• 说明：并发测试的用户数量
• 分类：
  • 系统用户数：系统注册的总用户数
  • 在线用户数：某段时间内访问系统的用户数，这些用户并不一定同时向系统发送提交请求
  • 并发用户数：某一物理时刻同时向系统提交请求的用户数

3. 吞吐量

• 概念：单位时间内，系统处理客户端请求的数量。衡量服务器性能好坏的直接指标。

• 从不同维度描述：

  • 业务维度：业务数/秒，业务数/小时，业务数/天

  • 网络维度：字节数/秒，字节数/小时，字节数/天

  • 技术维度：TPS（每秒事务数）、QPS（每秒请求数）

    • TPS : 服务器每秒钟处理的事务请求数量。

      (一个事务通常指的是界面上的一个操作。一个事务可以包含一个或者多个接口请求。)

* QPS : 服务器每秒钟处理的接口请求数量。

  （一个服务器中有多个接口，QPS指的是所有接口在同一个单位时间内的接口处理数量之和）

4. 错误率

• 错误率不是功能有错误或者bug
• 指的是在系统高负载的情况下，业务失败的次数/业务的总次数 * 100%

5. 点击数

• 点击数不是指在页面上的一次点击。
• 指的是页面（html代码、图片、js。。。）加载时，向服务器发送的请求数量
• 可以用每秒点击数来衡量web服务器的处理能力

6. 资源利用率

• 概念：是指系统各种资源的使用情况，一般用“资源的使用量/总的资源可用量×100%”形成的资源利用率数据