Python+Pytest实现压力测试详解

在现代Web应用程序中,性能是至关重要的。为了确保应用程序能够在高负载下正常运行,我们需要进行性能测试。本文就来用Pytest进行压力测试,希望对大家有所帮助

在现代Web应用程序中,性能是至关重要的。为了确保应用程序能够在高负载下正常运行,我们需要进行性能测试。 今天,应小伙伴的提问, 田辛老师来写一个Pytest进行压力测试的简单案例。 这个案例的测试网站我们就隐藏了,不过网站的基本情况是:

  • 阿里

  • 框架:FastAdmin.net

1.程序说明

1.1 设置测试参数
首先,做的第一件事情就是设置测试参数。代码如下

# 定义测试用例
def test_performance():
# 设置测试参数
url = 'http://www.a.com/'
num_threads = 20
num_requests = 200
timeout = 5

设置网站的URL, 线程数, 每个线程的请求次数,以及超时时间。 可以看到一共会做4000次请求。

1.2 初始化测试结果
这段代码, 这里做一个提示:注意缩进, 这段代码仍然在测试用例test_performance内。


    # 初始化测试结果  

    response_times = []  

    errors = 0  

    successes = 0

1.3 定义测试函数
接下来, 定义一个内部函数。这个函数就是在某一线程内完成设定次数的请求。

     # 定义测试函数      def test_func():          nonlocal errors, successes          for _ in range(num_requests):              try:                  start_time = time.time()                  requests.get(url, timeout=timeout)                  end_time = time.time()                  response_time = end_time - start_time                  response_times.append(response_time)                  successes += 1              except requests.exceptions.RequestException:                  errors += 1

1.4 创建线程、执行线程、等待

# 创建测试线程  

    threads = []  

    for _ in range(num_threads):  

        t = threading.Thread(target=test_func)  

        threads.append(t)  

      

    # 启动测试线程  

    for t in threads:  

        t.start()  

      

    # 等待测试线程结束  

    for t in threads:  

        t.join()


1.5 计算测试结果

# 计算测试结果  

    total_requests = num_threads * num_requests  

    throughput = successes / (sum(response_times) or 1)  

    concurrency = num_threads  

    error_rate = errors / (total_requests or 1)  

    cpu_usage = psutil.cpu_percent()  

    memory_usage = psutil.virtual_memory().percent

1.6 将测试结果写入文件

# 将测试结果写入文件  

    with open('performance_test_result.txt', 'w') as f:  

        f.write(f'总请求数:{total_requests}\n')  

        f.write(f'总时间:{sum(response_times):.2f}s\n')  

        f.write(f'吞吐量:{throughput:.2f} requests/s\n')  

        f.write(f'并发数:{concurrency}\n')  

        f.write(f'错误率:{error_rate:.2%}\n')  

        f.write(f'CPU利用率:{cpu_usage:.2f}%\n')  

        f.write(f'内存利用率:{memory_usage:.2f}%\n')

2.程序执行

2.1 直接执行
在PyCharm里面直接执行这段代码, 得出的结果是:

总请求数:4000 总时间:1837.65s 吞吐量:2.17 requests/s 并发数:20 错误率:0.12% CPU利用率:4.10% 内存利用率:88.60%

2.2 加个装饰器然后出报告
如果在PyCharm里面直接执行上面的代码, 虽然我们把结果写在文件中,但是, 不好看呀。

额外介绍一个方法,这个方法能够生成一个相对美观的测试报告出来。

2.2.1 声明压力测试

首先在定义用例的时候通过装饰器声明这是一个压力测试:

定义测试用例

@pytest.mark.performance  

def test_performance():  

    # 设置测试参数  

    url = 'http://www.a.biz/'  

    num_threads = 20

2.2.2 在命令行中通过pytest命令执行测试

第二步, 在命令行中执行测试

-v 用于显示详细的测试结果

–html 用于指定输出报告的位置。 这个参数需要依赖包:pytest-html

$ pytest -v --html=report.html test_a.py

输出执行结果是:

======================== test session starts =================================platform win32 -- Python 3.10.9, pytest-7.2.1, pluggy-1.0.0 -- D:\python-grp\miniconda_env\py3.10_playwright\python.execachedir: .pytest_cachemetadata: {'Python': '3.10.9', 'Platform': 'Windows-10-10.0.22624-SP0', 'Packages': {'pytest': '7.2.1', 'pluggy': '1.0.0'}, 'Plugins': {'allure-pytest': '2.12.0', 'base-url': '2.0.0', 'html': '3.2.0', 'metadata': '2.0.4', 'ordering': '0.6', 'playwright': '0.3.0'}, 'JAVA_HOME': 'D:\\java-grp\\jdk\\', 'Base URL': ''}rootdir: E:\develop\python\pytest-training\testplugins: allure-pytest-2.12.0, base-url-2.0.0, html-3.2.0, metadata-2.0.4, ordering-0.6, playwright-0.3.0collected 1 item                                                                                                                                                                 test_a.py::test_performance PASSED                                                                                                                                 [100%]========================== warnings summary ================================= test_a.py:25  E:\develop\python\pytest-training\test\test_a.py:25: PytestUnknownMarkWarning: Unknown pytest.mark.performance - is this a typo?  You can register custom marks to avoid this warning - for details, see https://docs.pytest.org/en/stable/how-to/mark.html    @pytest.mark.performance-- Docs: https://docs.pytest.org/en/stable/how-to/capture-warnings.html-- generated html file: file:///E:/develop/python/pytest-training/test/report.html -- ================= 1 passed, 1 warning in 99.09s (0:01:39) =================== (D:\python-grp\miniconda_env\py3.10_playwright) E:\develop\python\pytest-training\test>

最终生成的报告是:(截取了关键部分)

3.案例缺陷

因为时间关系, 本案例今天没有时间在服务器端执行, 所以通过psutil库所取得CPU利用率和内存利用率时间并不对。 如果是在服务器端执行, 这两个数字才是对的。

如果要在本地获取服务器的CPU,内存,IO等情况,有一个监控神器:Prometheus。不过这东西配置起来又是另一个话题。

4 完整源码

# 压力测试案例  



import threading  

import time  

  

import psutil  

import pytest  

import requests  

  

  

# 定义测试用例  

@pytest.mark.performance  

def test_performance():  

    # 设置测试参数  

    url = 'http://www.tdouya.biz/'  

    num_threads = 20  

    num_requests = 200  

    timeout = 5  

  

    # 初始化测试结果  

    response_times = []  

    errors = 0  

    successes = 0  

  

    # 定义测试函数  

    def test_func():  

        nonlocal errors, successes  

        for _ in range(num_requests):  

            try:  

                start_time = time.time()  

                requests.get(url, timeout=timeout)  

                end_time = time.time()  

                response_time = end_time - start_time  

                response_times.append(response_time)  

                successes += 1  

            except requests.exceptions.RequestException:  

                errors += 1  

  

    # 创建测试线程  

    threads = []  

    for _ in range(num_threads):  

        t = threading.Thread(target=test_func)  

        threads.append(t)  

  

    # 启动测试线程  

    for t in threads:  

        t.start()  

  

    # 等待测试线程结束  

    for t in threads:  

        t.join()  

  

    # 计算测试结果  

    total_requests = num_threads * num_requests  

    throughput = successes / (sum(response_times) or 1)  

    concurrency = num_threads  

    error_rate = errors / (total_requests or 1)  

    cpu_usage = psutil.cpu_percent()  

    memory_usage = psutil.virtual_memory().percent  

  

    # 输出测试结果  

    print(f'总请求数:{total_requests}')  

    print(f'总时间:{sum(response_times):.2f}s')  

    print(f'吞吐量:{throughput:.2f} requests/s')  

    print(f'并发数:{concurrency}')  

    print(f'错误率:{error_rate:.2%}')  

    print(f'CPU利用率:{cpu_usage:.2f}%')  

    print(f'内存利用率:{memory_usage:.2f}%')  

  

    # 将测试结果写入文件  

    with open('performance_test_result.txt', 'w') as f:  

        f.write(f'总请求数:{total_requests}\n')  

        f.write(f'总时间:{sum(response_times):.2f}s\n')  

        f.write(f'吞吐量:{throughput:.2f} requests/s\n')  

        f.write(f'并发数:{concurrency}\n')  

        f.write(f'错误率:{error_rate:.2%}\n')  

        f.write(f'CPU利用率:{cpu_usage:.2f}%\n')  

        f.write(f'内存利用率:{memory_usage:.2f}%\n')

到此这篇关于Python+Pytest实现压力测试详解的文章就介绍到这了。


最后

如果你想学习自动化测试,那么下面这套视频应该会帮到你很多

如何逼自己1个月学完自动化测试,学完即就业,小白也能信手拈来,拿走不谢,允许白嫖....

最后我这里给你们分享一下我所积累和整理的一些文档和学习资料,有需要直接领取就可以了!


以上内容,对于软件测试的朋友来说应该是最全面最完整的备战仓库了,为了更好地整理每个模块,我也参考了很多网上的优质博文和项目,力求不漏掉每一个知识点,很多朋友靠着这些内容进行复习,拿到了BATJ等大厂的offer,这个仓库也已经帮助了很多的软件测试的学习者,希望也能帮助到你。

​​

​​​​

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
pytest是一个基于Python的功能强大的测试框架,用于编写和执行各种类型的测试,包括接口测试。它提供了丰富的功能和灵活的配置选项,使得测试编写和执行变得简单和高效。 以下是pytest接口测试框架的详解: 1. 安装pytest:可以使用pip命令安装pytest库,例如:pip install pytest。 2. 编写测试用例:使用pytest编写测试用例非常简单,只需要创建一个以test_开头的函数,并使用assert语句进行断言。例如: ```python import requests def test_get_user(): response = requests.get('https://api.example.com/users/1') assert response.status_code == 200 assert response.json()['name'] == 'John Doe' ``` 3. 运行测试:在命令行中切换到测试文件所在的目录,并运行pytest命令。pytest会自动查找以test_开头的函数并执行。例如:pytest test_api.py。 4. 断言和报告:pytest提供了丰富的断言方法,可以用于验证测试结果。如果测试失败,pytest会生成详细的报告,显示失败的断言信息和相关的上下文。 5. 参数化测试:pytest支持参数化测试,可以通过@pytest.mark.parametrize装饰器来传递不同的参数进行多次测试。例如: ```python import pytest @pytest.mark.parametrize('user_id', [1, 2, 3]) def test_get_user(user_id): response = requests.get(f'https://api.example.com/users/{user_id}') assert response.status_code == 200 ``` 6. 用例标记:pytest支持用例标记,可以通过@pytest.mark标记器为测试用例添加标记,例如标记为smoke、regression等。可以使用命令行参数来选择运行特定标记的用例。例如:pytest -m smoke。 7. 夹具(fixture):pytest提供了夹具机制,用于在测试之前和之后执行一些准备和清理工作。可以使用@pytest.fixture装饰器定义夹具函数,并在测试函数中使用。例如: ```python import pytest @pytest.fixture def setup(): # 执行一些准备工作 yield # 执行一些清理工作 def test_example(setup): # 使用夹具进行测试 ``` 8. 插件扩展:pytest支持插件扩展,可以通过安装和配置插件来增强pytest的功能。例如,pytest-html插件可以生成漂亮的HTML测试报告。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值