CTS Android P测试与O测试变化及注意事项

：P版的CTS测试过程中，不要拔手机，否则最终结果无法完整测试出所有模块；

         例如，已测试到100个模块时拔掉了手机，最终生成的结果就只有100个模块；

 

 

一、Case数量增加（以Pgo项目为例，64bit项目double）

      a、CTS测试增加8万条，module增至320

      b、增加CTS-INSTANT测试项目，module 48，1.3万条（13338）、64bit 13338，以实际为准；

      c、VTS测试增加约2K条，module 107（64bit double）

      d、New Device项目CTS verifier 会增加CameraITS测试；

二、测试指令变化

      Test Item         Run Command             Retry Command            Run With Shard
       CTS                  run cts                        run retry -r                   --shard-count
       CTS-INSTANT    run cts-instant             run retry -r                   --shard-count
       CTS -ON-GSI     run cts -on-gsi             run cts-on-gsi-retry -r   --shard-count
       GTS                  run gts                        run retry -r                   --shard-count
       VTS                  run vts                        run vts -r                      --shards
       STS run sts-engbuild                            run retry -r       

       注意：STS retry时，下发retry指令时不能加-o这个参数；

   测试VTS前要执行adb root

   测试GSI前要执行adb unroot

 三、测试条件注意事项（以下是在保证O测试的条件基础上需要注意的地方）

       a、cts测试需要普通SIM卡，UICC卡（即常说的白卡）、香港SIM卡

           android.net.cts.ConnectivityManagerTest#testOpenConnection 

           该case测试需要：翻墙wifi+国外data的条件方能pass

       b、GTS需要普通SIM卡，增加了telephony的测项；

       c、CTS-ON-GSI需要UICC卡

       d、VTS测试需要插入双sim卡，如果不插SIM卡则可能会有900多条fail（32bit，64bit double）

       注意：插入白卡测试时，如果仍然fail，可以更换卡槽插入复测；