Compilify Alpha阶段测试报告

已于 2023-06-03 15:19:22 修改
阅读量110 收藏
点赞数
文章标签： 软件工程
于 2023-04-27 03:18:12 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Dawning7777/article/details/130397964
版权
本文详细记录了Compilify编译课程平台的Alpha测试情况，包括前端和后端的bug列表、功能测试和压力测试结果。前端方面，访问资源的瓶颈在于带宽，后端API的压力测试显示服务器处理时间较短，能够应对并发请求。测试涵盖了用户管理、课程管理和作业管理等功能，同时提出了针对不同用户群体的优化需求。
摘要由CSDN通过智能技术生成

Compilify Alpha阶段测试报告

本文为Compilify编译课程平台Alpha阶段测试报告。

Bug列表

后端

bug现象bug原因
作业顺序不齐没有返回的保证作业顺序
管理员无法查看小测正确答案后端没有设置
管理员无法查看用户教师后端没有返回

前端

bug现象bug原因
错误地修改用户信息后前端没有报错前端直接刷新而非再次获取数据
下载图片和txt资源直接显示前端获得url直接下载
添加用户部分user_name为空提示user_name过长rules的逻辑错误
带有分页的表格在分页大小处点击ALL后无法获取到所有信息ALL在该组件中代表0，所以发送给后端时认为传输了无效的值，于是被替换为默认值
管理员部分按钮被公告等内容挡住组件的层次问题
md编辑器的语法提示弹窗会出现在编辑器下层组件的层次问题
在日期选择的弹窗中，不可以通过点击最上方的年份数字对年份进行更改该组件自身存在bug

其中后三行的bug未修复。

前端测试

前端功能测试

前端功能测试采用手动点击前端页面方式进行测试，测试结果见前端 bug 列表

前端压力测试

使用 apache bench 模拟 200 路并发获取前端较大资源，结果如下：Benchmarking 10.212.30.38 (be patient)

Benchmarking 10.212.30.38 (be patient)

Server Software:        
Server Hostname:        10.212.30.38
Server Port:            9201

Document Path:          /assets/index-3a4db1b6.css
Document Length:        203617 bytes

Concurrency Level:      200
Time taken for tests:   6.521 seconds
Complete requests:      200
Failed requests:        0
Total transferred:      40775000 bytes
HTML transferred:       40723400 bytes
Requests per second:    30.67 [#/sec] (mean)
Time per request:       6520.841 [ms] (mean)
//用户平均请求等待时间
Time per request:       32.604 [ms] (mean, across all concurrent requests)
//服务器平均处理时间，
Transfer rate:          6106.47 [Kbytes/sec] received

Connection Times (ms)
              min  mean[+/-sd] median   max
Connect:        6   18   1.4     18      20
Processing:  1032 5269 1091.3   5697    6487
Waiting:        9  563 537.8    576    2717
Total:       1049 5287 1092.0   5714    6504

Percentage of the requests served within a certain time (ms)
  50%   5714
  66%   5967
  75%   6176
  80%   6217
  90%   6392
  95%   6447
  98%   6474
  99%   6503
 100%   6504 (longest request)

根据测试报告可以看出，前端访问资源的瓶颈在于带宽速度，服务处理的时间很短

前端压测的url有

http://10.212.30.38:9201/assets/index-2b6ab67a.js
http://10.212.30.38:9201/assets/Home-8fb1e6d5.js
http://10.212.30.38:9201/assets/menu-62e33bbf.js
http://10.212.30.38:9201/assets/api-121a8453.js
http://10.212.30.38:9201/assets/index-3a4db1b6.css
http://10.212.30.38:9201/assets/flUhRq6tzZclQEJ-Vdg-IuiaDsNcIhQ8tQ-4a4dbc62.woff2#

后端测试

后端API单元测试

目前完成了用户、课程管理、作业管理的单元测试。覆盖率无法进一步提升是由于对数据库异常进行了一定的检测，部分无法覆盖。

  • 用户单元测试，行覆盖率84.1%
    • 对于AdminAddUser API，进行了功能测试400、401、403、500的错误处理测试
    • 对于AdminDeleteUser API，进行了功能测试400、401、403、404的错误处理测试
    • 对于AdminResetUserPassword API，进行了功能测试400、401、403、404的错误处理测试
    • 对于AdminChangeUserInfo API，进行了功能测试400、401、403、404的错误处理测试
    • 对于ChangePassword API，进行了功能测试400、401的错误处理测试
    • 对于ChangeEmail API，进行了功能测试400、401的错误处理测试
    • 对于ChangeCourse API，进行了功能测试400、401、403的错误处理测试
    • 对于Login API，进行了功能测试400、401、404的错误处理测试
    • 对于Logout API，进行了功能测试401的错误处理测试
    • 对于ChangePhoto API，进行了功能测试400、401的错误处理测试
    • 对于GetUserInfo API，进行了功能测试401的错误处理测试
    • 对于AdminGetAllUser API，进行了功能测试400、401、403的错误处理测试
  • 课程管理单元测试，行覆盖率92.5%
    • 对于AdminAddCourse API，进行了功能测试400、401、403、409的错误处理测试
    • 对于tAdminAddCourseUser API，进行了功能测试400、401、403、500的错误处理测试
    • 对于AdminDeleteCourseUser API，进行了功能测试400、401、403、409的错误处理测试
    • 对于AdminChangeCourseInfo API，进行了功能测试400、401、403、404的错误处理测试
    • 对于AdminDeleteCourse API，进行了功能测试400、401、403、404的错误处理测试
  • 作业管理单元测试，行覆盖率77.5%
    • 对于AdminCreateContent API，进行了功能测试400、401、403、404的错误处理测试
    • 对于AdminUpdateContent API，进行了功能测试400、401、403的错误处理测试
    • 对于AdminDelContent API，进行了功能测试400、401、403、404的错误处理测试
    • 对于AdminCreateQuiz API，进行了功能测试400、401、403、404的错误处理测试
    • 对于AdminUpdateQuiz API，进行了功能测试400、401、403、404的错误处理测试
    • 对于AdminDelQuiz API，进行了功能测试400、401、403、404的错误处理测试
    • 对于PostQuiz API，进行了功能测试401、404、409的错误处理测试
    • 对于ExtendedTime API，进行了功能测试400、401、403、404的错误处理测试

在这里插入图片描述

上图中file、forum、push、resource文件均非Alpha阶段文件，judge单元测试尚未完善。

后端API压力测试

使用 apache bench对涉及信息量最多的评测记录API（获取所有用户信息）进行测试，结果如下

全部
Server Software:
Server Hostname:        10.212.30.38
Server Port:            9200

Document Path:          /user/get_all_user?page_size=2000
Document Length:        245067 bytes

Concurrency Level:      100
Time taken for tests:   4.077 seconds
Complete requests:      100
Failed requests:        0
Total transferred:      24522200 bytes
HTML transferred:       24506700 bytes
Requests per second:    24.53 [#/sec] (mean)
Time per request:       4076.778 [ms] (mean)
Time per request:       40.768 [ms] (mean, across all concurrent requests)
Transfer rate:          5874.11 [Kbytes/sec] received

Connection Times (ms)
              min  mean[+/-sd] median   max
Connect:        6   12   1.9     11      17
Processing:    68 2952 1035.0   3288    4025
Waiting:       31  612 221.6    611    1483
Total:         74 2964 1035.2   3298    4037

Percentage of the requests served within a certain time (ms)
  50%   3298
  66%   3649
  75%   3818
  80%   3849
  90%   3949
  95%   3994
  98%   4003
  99%   4037
 100%   4037 (longest request)

单页 页面大小为10
Server Software:
Server Hostname:        0.0.0.0
Server Port:            9200

Document Path:          /user/get_all_user?page_size=50
Document Length:        6173 bytes

Concurrency Level:      100
Time taken for tests:   0.328 seconds
Complete requests:      100
Failed requests:        0
Total transferred:      632800 bytes
HTML transferred:       617300 bytes
Requests per second:    305.18 [#/sec] (mean)
Time per request:       327.677 [ms] (mean)
Time per request:       3.277 [ms] (mean, across all concurrent requests)
Transfer rate:          1885.91 [Kbytes/sec] received

Connection Times (ms)
              min  mean[+/-sd] median   max
Connect:        0    4   0.8      4       4
Processing:    45  162  25.0    159     280
Waiting:       43  161  25.1    159     280
Total:         45  165  25.2    163     284

Percentage of the requests served within a certain time (ms)
  50%    163
  66%    179
  75%    180
  80%    181
  90%    190
  95%    190
  98%    200
  99%    284
 100%    284 (longest request)

对于全部数据发现服务器平均处理时间为40.768ms，对单页数据的处理时间为3.277ms，能够保证助教和教师的查看

使用asyncio 和 aiohttp对后端使用次数多的API进行并发访问访问，其中登录2000路并发，管理员获取用户所有信息和用户查看历史提交200路并发

test_url: /user/get_all_user, number: 200, cost_time: 0.4110887050628662s
test_url: /user/get_all_user, number: 200, cost_time: 1.0943667888641357s
test_url: /user/get_all_user, number: 200, cost_time: 0.13801002502441406s
test_url: /user/get_all_user, number: 200, cost_time: 0.15606403350830078s
test_url: /user/get_all_user, number: 200, cost_time: 0.3288722038269043s
test_url: /user/login, number: 2000, cost_time: 3.7957608699798584s
test_url: /user/login, number: 2000, cost_time: 3.6607179641723633s
test_url: /user/login, number: 2000, cost_time: 3.694988965988159s
test_url: /user/login, number: 2000, cost_time: 3.7916181087493896s
test_url: /user/login, number: 2000, cost_time: 3.504262924194336s
test_url: /judge/history, number: 200, cost_time: 1.3025119304656982s
test_url: /judge/history, number: 200, cost_time: 1.1705520153045654s
test_url: /judge/history, number: 200, cost_time: 1.320146083831787s
test_url: /judge/history, number: 200, cost_time: 1.6104991436004639s
test_url: /judge/history, number: 200, cost_time: 1.5889379978179932s

时间如上所示，能够满足多位用户同时登录、访问资源的需求

评测端压力测试

场景测试

用户信息用户情况
姓名刘狗
用户身份计算机学院大三学生
用户情况学习编译知识或者预习编译比赛
用户痛点1.原版编译平台UI设计不合理 2.想要查看自己的历史测评信息 3.下载资源部分更便捷
软件对应功能学习编译相关知识
预期使用场景实现该用户需求的功能1.UI设计会更加简洁和美观 2.可以轻松查看历史测评信息 3.下载课程资源更便捷
用户信息用户情况
姓名王跌
用户身份计算机学院学生
用户情况编译课程平台助
用户痛点原版平台操作不舒服，缺乏便捷操作
软件对应功能管理编译课程平台
预期使用场景实现该用户需求的功能对用户管理更便捷，支持批量修改
用户信息用户情况
姓名rjd0
用户身份计算机学院教授
用户情况编译课程讲师
用户痛点原版平台设计不好，llvm版本过低
软件对应功能管理编译课程平台
预期使用场景实现该用户需求的功能优化了编译平台页面，提高了编译版本

测试矩阵

OSBrowser登录公告查看课程作业小测提交评测竞速排序课程资料个人中心课程管理用户管理评测记录
macOS 13.3.1Chrome 112.0.5615.137passpasspasspasspasspasspasspasspasspasspass
macOS 13.3.1Safari 18615.1.26.11.23passpasspasspasspasspasspasspasspasspasspass
macOS 13.3.1Firefox 112.0.1passpasspasspasspasspasspasspasspasspasspass
macOS 13.3.1Edge 112.0.1722.58passpasspasspasspasspasspasspasspasspasspass
Windows 10 19044.2846Chrome 105.0.5195.127passpasspasspasspasspasspasspasspasspasspass
Windows 10 19044.2846Edge 112.0.1722.58passpasspasspasspasspasspasspasspasspasspass
  • macOS火狐浏览器下保存用户名密码到浏览器后，点击修改密码自动填充相应字段
  • macOS火狐浏览器、safari下登陆界面字体过小

出口条件

功能条件

完成原定Alpha阶段的指定需求：

学生用户需求：

  • 个人相关
    • 登录登出（注册方式见下方安装使用方法）
    • 修改邮箱密码（其他信息不提供自由编辑，需联系助教/管理员修改）
  • 公告相关
    • 查看课程公告
  • 资料相关
    • 查看下载课程资料
  • 作业相关
    • 查看作业介绍、测验、评测
    • 提交小测、查看小测答案
    • 提交评测、获取评测结果、下载提交、查看详情

在学生用户的基础上，对管理员用户进一步提供用于管理的基本功能：

  • 用户管理
    • 添加删除用户
    • 修改用户信息、重置用户密码为默认值
  • 课程管理
    • 添加修改删除课程
    • 添加删除课程开放用户
  • 公告管理
    • 修改删除课程公告
  • 资源管理
    • 添加更新删除资源
  • 作业管理
    • 添加删除作业、修改作业题面
    • 创建更新删除小测
    • 延长作业时间
    • 评测管理
      • 添加更新删除评测
      • 添加更新删除数据点
      • 上传测试点文件

测试条件

编写并通过全部单元测试，尽可能提高测试覆盖率。

进行简单的后端压力测试、评测机压力测试。压测情况下系统稳定不崩溃。

数据条件

创建编译技术测试课程。

创建课程所需的题目、评测用例、评测脚本。

人杰De灵
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
【测试开发】【前端】软件测试报告模板
weixin_41900626的博客
01-23 931
前端项目地址：https://gitee.com/juanmaoli/test-report-demo.git。
web端功能测试的简单总结
zhangguangyi520的博客
11-14 281
web端功能测试的简单总结 做功能测试经常与前端打交道，做UI自动化也要抓元素属性，于是今天我把CSS常用的属性和一些常见的功能逻辑列在了下面，方便学习。 **一、静态页面** 1，文字： 类型（font-family）, 大小(font-size) , 颜色(color)， 风格(font-style)， 粗细(font-weight)， 2，段落： 首行缩进(text-indent)，水平对齐(text-align), 文本修饰（上中下划线text
前端测试报告1
08-03
1.3背景:1.4 定义与缩写1.5 参考资料二手商品买家、二手商品卖家、系统管理员记录所有测试用例测试的结果a.名称：二手交易平台（线上市场）b.本项目由啊对
前端测试总结
一人心上秋的博客
09-03 175
1.简述CSS盒子模型 边框盒子（IE盒子） border-box 实际的宽度=width + margin 内容盒子（w3c标准盒子） content-box 实际的宽度= width + margin + padding + border 2、css选择器的优先级 1）!importent 在修改第三方库样式是使用 2) 1000 在style标签样式中，行内样式 100 id选择器 10 类选择器，伪类选择器，属性选择器 1 元素选择器，伪元素选择器 3）特性值相同时，采用就近原则 3、简述css
网站前端性能测试报告
weixin_33928467的博客
06-09 1124
内下内容选自《小强软件测试疯狂讲义》一书1. 测试目的通过主要功能页面的前端性能测试，从前端分析引起页面响应缓慢的原因，并根据优化建议对其进行优化，提升前端性能，从而达到提升系统整体性能的目的。2. 测试范围主要对用户常用的页面进行测试，至少包括：首页、各分类页、搜索结果页等，此处我们只以首页为例进行测试和分析。3. 测试方法利用YSlow、PageSpeed等工具进行测试，因该网站是第三方的并不...
Compilify Beta阶段测试报告
Dawning7777的博客
06-03 99
本文为Compilify编译课程平台Beta阶段测试报告。
Compilify Alpha阶段项目展示
Dawning7777的博客
05-04 216
本部分是对亮点部分补充说明。
Compilify Alpha阶段软件发布声明
Dawning7777的博客
04-27 128
发布啦！本平台是一款用户友好的、用户管理一体化的课程平台，现行发布版本提供了课程公告、课程作业、小测、提交评测、 竞速排序、课程资料、个人中心、用户管理、课程管理等功能，期待您的使用反馈！
Compilify Alpha阶段事后分析
Dawning7777的博客
05-13 99
你觉得团队目前的状态属于 CMM/CMMI 中的哪个档次?应当处于可管理级。组织已经实现了基本的项目管理，如需求管理、计划与跟踪、配置管理等。过程有了一定的规范，组织能够重复成功的项目经验。但是，过程的改进和优化仍然有限。你觉得团队目前处于。
浅谈Alpha和Beta测试
10-22
大型通用软件，在正式发布前，通常需要执行Alpha和Beta测试，目的是从实际终端用户的使用角度，对软件的功能和性能进行测试，以发现可能只有最终用户才能发现的错误。 　Alpha 测试。一般来说 alphatest 测试是在...
Alpha和Beta测试简介
10-23
大型通用软件，在正式发布前，通常需要执行Alpha和Beta测试，目的是从实际终端用户的使用角度，对软件的功能和性能进行测试，以发现可能只有最终用户才能发现的错误。
Alpha测试和Beta测试区别
03-23
大型通用软件，在正式发布前，通常需要执行Alpha和Beta测试，目的是从实际终端用户的使用角度，对软件的功能和性能进行测试，以发现可能只有最终用户才能发现的错误。 　Alpha测试是由一个用户在开发环境下进行的...
用CSS制作Alpha滤镜测试板
12-07
标题中的“用CSS制作Alpha滤镜测试板”指的是利用CSS技术创建一个用于测试Alpha滤镜效果的工具。Alpha滤镜是CSS中一种重要的特效技术，主要用于实现元素的透明度控制，给网页设计带来丰富的视觉效果。然而，由于...
BattleEssentials:早期Alpha阶段
05-22
6. **单元测试**：JUnit等测试框架用于对各个模块进行功能验证，确保Alpha阶段的代码质量。 在"BattleEssentials-master"这个压缩包中，可能包含项目的源代码、资源文件、构建脚本（如build.gradle）等。开发者可以...
Compilify Beta阶段事后分析
Dawning7777的博客
06-14 105
编译技术》是计算机学院开设的一门核心专业课程。课程参与者为教师、助教和学生。我们的编译课程平台需要提供课程管理、用户管理、课程通知管理、课程资料管理、作业管理、评测作业等功能。除了这些基本功能之外，由于《编译技术》课程实验存在其特殊性，课程平台还需要更好的满足这些特殊需求，例如对同一作业，学生用户需要选择提交类型，再如竞速排序作业等。
实现 AI 辅助软件工程：团队如何量身打造 AI4SE 体系？
最新发布
Phodal's zenthink
08-08 853
PS：本文节选自开源电子书《AI 辅助软件工程：实践与案例解析》第一部分《AI4SE 体系设计》（https://aise.phodal.com/design-aise.html）受限于自身企业的规模与人员结构，AI 辅助软件工程（AI4SE）的设计与实施过程会有所差异。诸如于：研发外包型企业，对于 AI 辅助研发的需求并没有特别强烈？（待进一步调研）小型研发组织，生存是主要问题，因此对于数据敏...
【系统分析师】-综合知识-软件工程与项目管理
宣晨光
08-06 1419
(Software Configuration Management，SCM)是指通过执行版本控制、变更控制的规程，以及使用合适的配置管理工具，来保证所有配置项的完整性和可跟踪性。管理人员的工资、办公费、固定资产折旧费、员工培训费、广告费、员工培训费、技术开发经费、办公场地及机器设备的折旧费、房屋及设备租金、管理人员的工资等。抛弃式原型主要用在解决需求不确定性、二义性、不完整性、含糊性等。例如，水电费、电话费等、质量保证人员的工资、设备动力费等成本、加班工资与时间的长短便存在着正比例关系。
软件工程-系统架构师（四十一）
ke1ying的博客
08-04 1127
版本控制工具、文档分析工具、开发信息库工具、逆向工程工具、再工程工具。：项目管理工具、配置管理工具、软件评价工具、软件开发工具的评价与选择。：反映程序相互依赖关系的信息。：包括反映程序分量或程序领域概念对应关系的信息。正向工程：从现有系统恢复设计信息，使用该信息去改变现有系统。：需求分析工具、设计工具、编码与排错工具、测试工具等。的角色，过程模式，工作产品和实践。设计恢复：从已有的程序中抽象出有关数据设计。：需求分析、设计、实现和测试都是用例驱动。：包括抽象语法树、符号表、过程的设计表现。
Alpha测试报告：环境、问题与功能满足度
在"Alpha综合总结1"中，报告详细讨论了软件测试的关键方面。首先，关于测试环境，报告指出软件在多个浏览器平台上进行了测试，包括谷歌浏览器（A）、IE浏览器（B）、360浏览器（C）、搜狗浏览器（D）和火狐浏览器（E...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值