软件测试上线标准
一、编写目的
明确软件测试工作的开始和结束标准。
二、软件测试合格标准
A类错误 B类错误 C类错误 D类错误
无 无 无 ≦4%
以上比例为错误占总测试模块的比例。
三、缺陷修复率标准
1、A、B、C级错误修复率应达到100%(C类错误允许存在<5个)。
2、D级错误修复率应达到96%以上。
3、缺陷处理情况:缺陷等级非常重要、重要(P1、P2、P3)需全部关闭,一般建议性缺陷<5%。(这里非常重要:遗留的问题,一定要跟团队讨论,确定可遗留到下个版本,而且要在测试中注明已知问题 & 风险)
四、覆盖率标准
测试需求用例执行覆盖率应达到100%(业务测试用例均以执行)。
五、错误级别
A级:不能完全满足系统要求,基本功能未完全实现;或者危及人身安全。系统崩或挂起等导致系统不能继续运行。
包括以下各种错误:
1.由于程序所引起的死机,非法退出
2.死循环
3.数据库发生死锁
4.因错误操作导致的程序中断
5.功能错误
6.与数据库连接错误
7.功能不符
8.数据流错误
9.数据流转错误
10.严重的数值计算错误
B级:严重地影响系统要求或基本功能的实现,且没有更正办法(重新安或重新启动该软件不属于更正办法)。使系统不稳定、或破坏数据、或产生错误结果,或部分功能无法执行,而且是常规操作中经常发生或非常规操作中不可避免的主要问题。
包括以下各种错误:
1.程序接口错误
2.系统可被执行,但操作功能无法执行
3.在小功能项的某些项目(选项)使用无效(对系统非致命的)
4.功能实现不完整,如删除时没有考虑数据关联
5.功能的实现不正确,如在系统实现的界面上,一些可接受输入的控件点击后无作用;对数据库的操作不能正确实现
6.报表格式以及导出内容错误(行列不完整,数据显示不在所对应的行列等导致数据显示结果不正确的错误)
7.轻微的数值计算错误
8.界面错误(设计稿)
C级:严重地影响系统要求或基本功能的实现,但存在合理的更正办法(重新启动该软件不属于更正办法)。系统性能或响应时间变慢、产生错误的中间结果但不影响最终结果等影响有限的问题。
包括以下各种错误:
1.操作界面错误(包括数据窗口内列名定义、含义是否一致)
2.导出内容、格式错误(只影响报表的格式或外观,不影响数据显示结果的错误)
3.简单的输入限制未放在前台进行控制
4.增删改查操作未给出提示
5.虽然正确性不受影响,但系统性能和响应时间受到影响
6.功能不能重现,影响功能实现
7.显示格式不正确但输出正确
8.增删改功能,在本界面不能实现,但在另一界面可以补充实现。
D级:使操作者不方便或遇到麻烦,但它不影响执行工作功能或重要功能。界面拼写错误或用户使用不方便等小问题或需要完善的问题。
包括以下各种错误:
1.界面不规范
2.辅助说明描述不清楚
3.输入输出不规范
4.长时间操作未给用户提示
5.提示窗口文字未采用行业术语
6.可输入区域和只读区域没有明显的区分标志
7.必填项与非必填项应加以区别
8.滚动条无效
9.键盘支持不好,如在可输入多行的字段中,不支持回车换行;或对相同字段,在不同界面支持不同的快捷方式
10.界面不能及时刷新,影响功能实现
11.光标跳转设置不好,鼠标(光标)定位错误
12.一些建议性问题
13.系统处理未优化
六、测试环境
最终要在外网测试服环境测试通过,因为上线后用户是在外网进行的操作。(对软件需求规格说明书中的所有功能项进行测试。对软件项目的典型业务流程进行测试。)
七、压力测试
经过压力测试,要求项目在正式网上达到压力测试通过标准(对不同项目有不同的压力测试通过标准)。