:P版的CTS测试过程中,不要拔手机,否则最终结果无法完整测试出所有模块;
例如,已测试到100个模块时拔掉了手机,最终生成的结果就只有100个模块;
一、Case数量增加(以Pgo项目为例,64bit项目double)
a、CTS测试增加8万条,module增至320
b、增加CTS-INSTANT测试项目,module 48,1.3万条(13338)、64bit 13338,以实际为准;
c、VTS测试增加约2K条,module 107(64bit double)
d、New Device项目CTS verifier 会增加CameraITS测试;
二、测试指令变化
Test Item Run Command Retry Command Run With Shard
CTS run cts run retry -r --shard-count
CTS-INSTANT run cts-instant run retry -r --shard-count
CTS -ON-GSI run cts -on-gsi run cts-on-gsi-retry -r --shard-count
GTS run gts run retry -r --shard-count
VTS run vts run vts -r --shards
STS run sts-engbuild run retry -r
注意:STS retry时,下发retry指令时不能加-o这个参数;
测试VTS前要执行adb root
测试GSI前要执行adb unroot
三、测试条件注意事项(以下是在保证O测试的条件基础上需要注意的地方)
a、cts测试需要普通SIM卡,UICC卡(即常说的白卡)、香港SIM卡
android.net.cts.ConnectivityManagerTest#testOpenConnection
该case测试需要:翻墙wifi+国外data的条件方能pass
b、GTS需要普通SIM卡,增加了telephony的测项;
c、CTS-ON-GSI需要UICC卡
d、VTS测试需要插入双sim卡,如果不插SIM卡则可能会有900多条fail(32bit,64bit double)
注意:插入白卡测试时,如果仍然fail,可以更换卡槽插入复测;