NMS 性能测试方案 (五)

4.2 测试设计策略分析
4.2.1 测试重点和用例设计原则
网管管理能力是网管的整体处理能力，所以在测试用例（测试项目）的设计上需要包括典型的网管操作，包括：AC的管理，CPE的管理。这里需要考虑两部分内容：
 参考性能基线：《XXX性能基线(V0.1).XLS》
 参考产品规格说明书：《XXX产品规格说明书》
除了上面的测试内容外重点还需要考虑基于场景进行验证：
 批量注册设备场景：需要在原有数据基础上添加新的设备包括配置不同的业务数据。 多用户应用场景：多用户同时访问网管对终端操作的应用。
4.2.2 测试难点和解决方法
性能测试的难点在于对问题的界定以及定位。
1、网管性能受环境的影响比较大，性能问题必须是在环境稳定正常情况下能达到性能基线要求的，如果是由于环境问题导致的不能达到性能基线要求的问题，不能作为性能问题对待。这就要求在性能测试过程中必须同时关注操作系统和网络的状况，保证测试在操作系统或者网络不出现异常的情况下进行。
2、性能问题不像功能问题，可以确定操作错误的“点”进而修改这个问题点就能解决问题。性能问题更多的是某个程序段占用了比较多的时间，而这个信息是不能由测试人员能获取的，甚至开发人员也无法通过调试来获取这个信息（调试过程中，程序的执行时间会被改变），因此网管必须提供在操作过程中记录详细的日志功能，否则性能问题定位将是一个艰难的过程。
可以从下面角度评估：