嵌入式软件第三方自动化测试脚本接收标准

 

脚本验收测试接收标准如下：

一．               承包方提供的接收资料

1.            经过审核的脚本程序源代码编译的可运行的程序和代码评审通过的报告。

2.             脚本白盒测试的测试用例和脚本白盒单元测试通过的报告。

3.             必要的测试辅助文档，如：脚本测试需求、脚本数据库文件，脚本代码文档，脚本内部数据测试报告。

4.             标识本次测试脚本版本的相关配置管理描述文档。

5．      脚本编辑人员每日的工作进度报告。

6．      脚本设计框架文档及模块划分文档。

7．      经过审核过的概要和详细的设计文档、帮助文件。

8．           必要的测试数据库及测试环境文件。

二．            承包方提供的脚本程序界面

1.             脚本界面显示完整，界面风格一致，无错别字及歧义。

2.             各功能入口明确。

3．      各项菜单功能均已实现。

4．      脚本运行结果实时显示。

5．      脚本log记录文件界面实时显示。

6．      帮助项能明确导航。

三、              承包方提供的脚本功能实现

1.             本次提交的功能说明书中的功能均已实现。

2.             基本功能流程可以走通。

3.             各模块能被主模块调起或调起子模块。

4．      提示问题

                 a. 提示、警告、或错误说明应该清楚、明了、恰当。

                 b. 非法的输入或者操作应该有足够的提示说明。

                 c．误操作得到的反馈信息应该能够指导用户的下一步操作。

5.       测试数据库的增删问题

                 a.   增删功能可以实现。

                 b．  增删时间相应时间不超过2秒

6．      数据库的查询

                 a.   能够及时查询需要的数据

         

四.                     承包方提供的其他情况

1.             运行单元程序不能产生多个进程，运行关键程序不能导致系统crash。

2.             关键脚本程序不能有死循环和永远执行不到的语句，应有review报告。

3．      对于被测试模块的代码覆盖率应达到100%，应有覆盖率报告。

 

五．         发包方验收测试周期和验收测试报告

1．      发包方需准备大量测试数据和错误软件版本进行脚本验收测试，并向承包方提供测试验收报告，测试验收周期为10天，如果发现上述问题中存在的问题对于是否接收该脚本请参考表1。

                          接收标准评分表

标准1	标准2	标准3	标准4	标准5	标准6
1.5 2.1	1.2 2.6 3.4	1.1 1.4 2.4 3.3 3.6	1.6 2.2 2.3 3.5	1.3 1.7 1.8 2.5 3.1	4.1 4.2 4.3 3.2
1	2	3	4	5	reject

说明： 前5项总分为64分，必须达到70%-44.8分以上接收。

           第6项如果有一个出现就不接收。