【测试报告模板】xx系统android应用V1.1.0测试报告

AAA系统android应用V1.1.0测试报告

版次 V1.1.0 密级 内部公开
总页数 附录 5
编写人 张三 编写时间 2018-02-03

文件修改记录
修改日期 修改状态 修改页码及条款 修改人 审核人 批准人

目录

目录 1
1 测试总结 2
1.1结论 2
1.2建议 2
2 测试概要 2
2.1测试方案 2
2.2测试人力及时间安排 2
2.3测试环境 3
2.3.1硬件环境 3
2.3.2软件环境 4
2.4参考资料 4
3 测试执行分析 4
3.1测试执行概况 4
3.2用例执行统计 5
4 缺陷分析 6
4.1等级分布 7
4.2模块分布 7
4.3遗留问题 7
4.4结果分析 8
5 自动化测试 8
6 附件 9

1测试总结
1.1结论
计划测试开始时间 计划测试结束时间 实际测试开始时间 实际测试结束时间 有效工作量（小时） 测试缺陷总数（个）
20171228 20180202 20171228 20180202 136 78
质量评价 系统V1.1.0新增功能已实现并测试通过，上一版本遗留问题已修复并测试通过，基线高、中等级的用例测试通过，遗留1个一般问题。
测试结论 本轮测试通过，可以发布。

1.2建议
暂无。

2测试概要
2.1测试方案
本轮测试主要对新增的所有功能、原有功能（即基线功能）的主要功能点进行测试。使用手工执行测试用例的方法对新增功能及基线的部分功能进行测试，使用appium+python对基线的部分功能进行自动化测试。
此外，使用monkey工具的随机事件功能，对部分手机进行压力测试。测试命令为：monkey -p com.seebon.shabaomanager --pct-touch 10 -s 1 -v -v -v --throttle 50 60000 。测试手机为：华为畅享5s、三星 A3000、魅族 魅蓝3、oppo A53、vivo Y31A、vivo X7 。

2.2测试人力及时间安排

功能分解 测试类型 测试人员 开始时间 结束时间
热门城市排序 功能、兼容性 李四 20171228 20180105
首页配置 功能、兼容性 李四 20171228 20180105
第三方登录 功能、兼容性 李四 20171228 20180105
更换设备登录 功能、兼容性 李四 20171228 20180105
资料收集 功能、兼容性 李四、张三 20180124 20180202
入离职管理 功能、兼容性 李四、张三 20180124 20180202
商保理赔 功能、兼容性 李四、张三 20180124 20180202
基线功能 功能、兼容性 李四 20180130 20180202

2.3测试环境
2.3.1硬件环境
硬件配置项 配置信息
华为 mate8 系统版本：EMUI 5.0 （Android 7.0）
主屏尺寸：6英寸 ，主屏分辨率：1920×1080像素
RAM容量：3G ，ROM容量：32G
华为畅享5s 系统版本：EMUI 3.1 Lite （Android 5.1）
主屏尺寸：5英寸 ，主屏分辨率：1280×720像素
RAM容量：2G ，ROM容量：16G
三星 A3000 系统版本：Android 5.0.2
主屏尺寸：4.5英寸 ，主屏分辨率：960×540像素
RAM容量：1G ，ROM容量：8G
魅族 魅蓝3 系统版本：Flyme 6.1.0.0Y （YunOS 3.1.6）
主屏尺寸：5英寸 ，主屏分辨率：1280×720像素
RAM容量：2G ，ROM容量：16G
oppo A53 系统版本：Android 5.1
主屏尺寸：5.5英寸 ，主屏分辨率：1280×720像素
RAM容量：2G ，ROM容量：16G
vivo Y31A 系统版本：Android 5.1.1
主屏尺寸：4.7英寸 ，主屏分辨率：960×540像素
RAM容量：1G ，ROM容量：16G
vivo X7 系统版本：Android 5.1
主屏尺寸： 5.2英寸 ，主屏分辨率：1980×1080像素
RAM容量：4G ，ROM容量：64G
数据库服务器 DELL CPU：E5-2650 v2 @ 2.60GHz 内存：8G硬盘：500G
后台服务器 DELL CPU：E5-2650 v2 @ 2.60GHz 内存：8G硬盘：500G

2.3.2软件环境
软件配置项 配置信息
手机系统 android
数据库连接工具 Navicat for MySQL
后台系统 Linux access-db 3.10.0-514.21.1.el7.x86_64

2.4参考资料
1、《AAA系统V1.1.0_原型V3.3.0》
2、《AAA系统appV1.1.0_产品需求文档V3.3.0》
3、《入离职管理V1.0.0_产品原型V3.2.2》
4、《入离职管理V1.0.0_产品需求文档V2.2.3》
5、《入离职管理V1.0相关业务字段》
6、《消息汇总（整合入离职业务）》
7、《入离职-AAA系统APP用户状态关联表》
8、《问题列表-AAA系统android应用V1.0.2》

3测试执行分析
3.1测试执行概况
本轮测试执行情况：
新增功能的测试用例82条，执行82条，通过82条，通过率为100% ；
基线测试用例202条，执行优先级为高、中的用例174条，通过174条，通过率为100% ；
总计执行测试用例256条，通过256条，通过率为100% 。
测试用例参考附件：《基线测试用例-AAA系统V1.0.2》、《测试用例-AAA系统V1.1.0》 。

3.2用例执行统计
注：用例分为新增功能与原有功能，新增功能分模块详细列出，原有功能统一放在名为“基线功能”的模块中。
一级模块 二级模块 功能点 用例执行数量 通过数量 通过率
首页 城市选择 1、热门城市排序。 1 1 100%
消息中心 1、消息保存到服务器。
2、资料收集。
3、入离职管理。 9 9 100%
广告位 1、广告链接可配置。 1 1 100%
首页应用 1、首页应用可配置。 1 1 100%
首页活动 1、首页活动可配置。 1 1 100%
助理 商保理赔 1、商保理赔功能。 14 14 100%
社保查询 1、热门城市排序。 1 1 100%
公积金查询 1、热门城市排序。 1 1 100%
社保计算器 1、热门城市排序。 1 1 100%
我的 我的签署 1、入离职管理。 10 10 100%
注册登录 第三方登录 1、第三方登录：qq、微信、微博登录。 36 36 100%
更换设备登录 1、更换设备登录。 6 6 100%
安装卸载升级 / 1、安装、卸载、升级。 0 0 100%
其他 其他 1、不属于所列模块的功能，或流程相关。 0 0 100%
基线功能 基线功能 1、基线功能。 174 174 100%

4缺陷分析
注：本部分的缺陷数据为本轮测试阶段发现的所有问题。
缺陷统计
模块 致命 严重 一般 轻微 总计
首页 0 7 20 2 29
助理 0 3 17 3 23
我的 0 3 8 0 11
注册登录 0 3 6 3 12
安装卸载升级 0 0 0 0 0
其他 0 2 1 0 3
总计 0 18 52 8 78

4.1等级分布

4.2模块分布

4.3遗留问题
序号 系统版本 一级模块 测试平台 严重等级 问题描述 开发负责人 问题状态
1 AAA系统android_V1.1.0 首页 魅族 m3-
andriod 5.1.0 一般 操作步骤：
渠道后台创建APP消息，推送时选择C用户；

实际结果：
P用户收到消息通知，如图

预期结果：
推送给C用户的消息，p用户无法接收 王武 延期修改

4.4结果分析
本轮测试总计发现78个问题，已修复问题77个，遗留问题1个。其中严重、致命问题占比分别为：23% 、0% ，即严重及以上问题总占比为10% 。缺陷在模块分布中，占比最大的两个模块为首页、助理，分别占比：37%、30% 。
本次版本问题列表参照附件《问题列表-AAA系统V1.1.0》。

5自动化测试
appium版本：1.4.16.1
python版本：python3.6.2
测试设备：三星-Galaxy A3, SM-A3000, Android-5.0.2
自动化测试用例总共61条，已全部执行完毕，其中成功50条，失败11条，通过率为81.97% 。对失败用例进行手工测试，其中7条手工执行测试成功，经分析执行自动化失败是由于设计用例不合理。另外4条手工执行失败，经分析为数据配置错误，修改数据后执行成功。自动化测试用例及测试结果参考附件《自动化测试用例-AAA系统V1.1.0》、《自动化测试报告-AAA系统V1.1.0》 。

6附件
下列附件依次为《基线测试用例-AAA系统V1.0.2》、《测试用例-AAA系统V1.1.0》、《问题列表-AAA系统V1.1.0》、《自动化测试用例-AAA系统V1.1.0》、《自动化测试报告-AAA系统V1.1.0_20180203_16-40-30》。