运行 CTS 测试命令

最新推荐文章于 2024-09-23 20:59:00 发布
最新推荐文章于 2024-09-23 20:59:00 发布
阅读量8.7k 收藏 39
点赞数 4
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wed110/article/details/100030685
版权

运行 CTS 测试

CTS tradefed 使用入门

您可以参阅 Trade Federation 概述，了解有关 Trade Federation（简称 tradefed 或 TF）持续测试框架的说明。

运行测试计划的操作如下：

  1. 至少连接一个设备。
  2. 在开始运行 CTS 时，按主屏幕按钮将设备设置为显示主屏幕。
  3. 当设备在运行测试时，不能执行任何其他任务，并且必须保持静止状态（以免触发传感器活动），同时要让相机指向某个可以聚焦的对象。
  4. 在运行 CTS 时，不要按设备上的任何键。按测试设备上的键或触摸其屏幕会干扰正在运行的测试，并且可能导致测试失败。
  5. 通过运行解压缩 CTS 包所得文件夹中的 cts-tradefed 脚本（例如 $ ./android-cts/tools/cts-tradefed）启动 CTS 控制台。
  6. 通过附加以下命令启动默认测试计划（包含所有测试包）：run cts --plan CTS。这将启动测试兼容性所需的所有 CTS 测试。
    • 对于 CTS v2（Android 7.0 及更高版本），您可以输入 list modules 来查看测试模块列表。
    • 对于 CTS v1（Android 6.0 及更低版本），您可以输入 list plans 来查看存储区中的测试计划列表，也可以输入 list package 来查看存储区中的测试包列表。
  7. 或者，您也可以使用以下命令，从命令行中运行所选的 CTS 计划：cts-tradefed run cts --plan

    注意：您可以通过使用 run cts-dev 命令（而非 run cts）来缩减在 Android 7.0 (Nougat) 及更高版本中的运行时间。此命令会跳过前提条件、设备信息收集和所有系统状态检查工具。它还仅在单个 ABI 上运行测试。对于设备验证，请忽略此优化操作并添加所有前提条件和检查。

  8. 查看控制台中报告的测试进度和结果。
  9. 如果您的设备搭载的是 Android 5.0 或更高版本，并且声明支持 ARM 和 x86 ABI，则 ARM 和 x86 CTS 包都应运行。
  10. （可选）利用套件重试功能重新运行测试的以前会话：
    1. 使用以下命令查看以前的会话： 
              cts-tf > l r

       

    2. 确定您需要的会话编号，并将其代入以下命令中： 
              cts-tradefed run retry --retry <session-number>

       

      若要详细了解如何实现重试功能，请参阅 Trade Federation 的套件重试页面。

使用 CTS v2 控制台

对于 Android 7.0 或更高版本，您将使用 CTS v2。

选择计划

您可以选择以下测试计划：

  • cts - 从预装的 CTS 套件运行 CTS。
  • cts-camera - 从预装的 CTS 套件运行 CTS-camera。
  • cts-java - 从预装的 CTS 套件运行核心 Java 测试。
  • cts-pdk - 运行有助于验证与 PDK 融合的产品的测试。
  • everything - 兼容性套件的通用配置。

其他可用配置如下：

  • basic-reporters - 基本 CTS 报告程序的配置。
  • collect-tests-only - 从预装的 CTS 套件运行 CTS。
  • common-compatibility-config - 兼容性套件的通用配置。
  • cts-filtered-sample - 兼容性套件的通用配置。
  • cts-known-failures - CTS 已知故障的配置。
  • cts-preconditions - CTS 前提条件配置。
  • host - 在现有设备上运行单个基于主机的测试。
  • instrument - 在现有设备上运行单个 Android 工具测试。
  • native-benchmark - 在现有设备上运行原生压力测试。
  • native-stress - 在现有设备上运行原生压力测试。
  • recharge - 等待设备的电量接近耗尽状态，然后让设备保持充电状态的虚设测试。
  • testdef - 在现有设备上运行包含在 test_def.xml 文件中的测试。
  • util/wifi - 用于在设备上配置 Wi-Fi 的实用程序配置。
  • util/wipe - 擦除设备上的用户数据。

所有这些计划和配置都可以使用 run cts 命令执行。

CTS v2 控制台命令参考

表 1. 该表总结了用于各种用途的 CTS V2 控制台命令。

主机说明
help显示最常用命令的摘要
help all显示可用命令的完整列表
version显示版本。
exit正常退出 CTS 控制台。所有当前正在运行的测试完成后，控制台将关闭。
运行说明
run cts

在 Android Q 中，一起运行默认的 CTS 计划和适用于免安装应用的 CTS 计划（即完整的 CTS 调用）。对于 Android 9 及更低版本，则仅运行默认的 CTS 计划。此综合性选项（包含前提条件）可用于进行设备验证。有关要包含的内容，请参阅 cts.xml。

在测试过程中，CTS 控制台可以接受其他命令。

如果没有连接任何设备，CTS 台式机（或主机）将等待连接设备后再开始测试。如果连接了多台设备，则 CTS 主机将自动选择一台设备。

run cts-instant

在 Android 9 及更低版本中，运行默认的适用于免安装应用的 CTS 计划。

run cts --module-parameter INSTANT_APP

在 Android Q 中，运行默认的适用于免安装应用的 CTS 计划。

run cts --module-parameter INSTANT_APP --module/-m

在 Android Q 中，运行一个或多个指定的适用于免安装应用的 CTS 测试模块。

run retry --retry

仅适用于 Android 9 及更高版本。重新尝试运行在以前的会话中失败或未执行的所有测试。例如，run retry --retry -s 或 run retry --retry -- shard-count（包含 TF 分片）。Android 9 及更高版本不允许运行 run cts --retry。

--device-token

适用于 Android 8.1 及更低版本。指定具有给定令牌的给定设备，例如，--device-token 1a2b3c4d:sim-card。

--enable-token-sharding

仅适用于 Android Q。自动匹配需要相应类型的 SIM 卡的测试。无需提供设备序列号即可 SIM 卡相关测试用例。支持的 SIM 卡：SIM_CARD、UICC_SIM_CARD 和 SECURE_ELEMENT_SIM_CARD。

run cts-dev

运行默认的 CTS 计划（即完整的 CTS 调用），但跳过前提条件以缩减运行时间，从而对新测试执行迭代开发。这会绕过对设备配置的验证和设置（例如推送媒体文件或检查 Wi-Fi 连接），就如同使用了 --skip-preconditions 选项。此命令还会跳过设备信息收集和所有系统状态检查工具。它还仅在单个 ABI 上运行测试。对于设备验证，请忽略此优化操作并添加所有前提条件和检查。有关要排除的内容，请参阅 cts-dev.xml。

在测试过程中，CTS 控制台可以接受其他命令。

如果没有连接任何设备，CTS 台式机（或主机）将等待连接设备后再开始测试。如果连接了多台设备，则 CTS 主机将自动选择一台设备。

run retry

对于 Android 9：重新尝试运行在以前的会话中失败或未执行的所有测试。例如，run retry --retry -s 或 run retry --retry --shard-count（包含 TF 分片）。

Android 9 不允许运行 run cts --retry。

--plan <test_plan_name>运行指定的测试计划。
--module/-m <test_module_name>  [--module/-m <test_module2>...]运行指定的测试模块。例如，run cts --module CtsGestureTestCases 会执行手势测试模块（该命令可以简化为 run cts -m Gesture）。
run cts -m Gesture --test android.gesture.cts.GestureTest#testGetStrokes会运行特定的包、类或测试。
--subplan <subplan_name>运行指定的子计划。
-- module/-m <test_module_name> -- test <test_name> 运行指定的模块和测试。例如，run cts -m Gesture --test android.gesture.cts.GestureTest#testGetStrokes 会运行特定的包、类或测试。
--retry重新尝试运行在以前的会话中失败或未执行的所有测试。使用 list results 获取会话 ID。
--retry-type not_executed仅重新尝试运行在以前的会话中未执行的测试。使用 list results 获取会话 ID。
--shards <number_of_shards>对于 Android 8.1 及更低版本：将 CTS 运行分为指定数量的独立块，以便在多台设备上并行运行。
--shard-count <number_of_shards>对于 Android 9：将 CTS 运行分为指定数量的独立块，以便在多台设备上并行运行。
--serial/-s <deviceID>在特定设备上运行 CTS。
--include-filter <module_name>  [--include-filter <module2>...]仅使用指定的模块运行。
--exclude-filter <module_name>  [--exclude-filter <module2>...]运行时排除指定的模块。
--log-level-display/-l <log_level>以显示给 STDOUT 的最小指定日志级别运行。有效值：[VERBOSE, DEBUG, INFO, WARN, ERROR, ASSERT]。
--abi <abi_name>强制要求测试在给定的 ABI（32 或 64）上运行。默认情况下，CTS 会为设备支持的每个 ABI 运行一次测试。
--logcat、--bugreport 和 --screenshoot-on-failure显示更详尽的故障信息并帮助进行诊断。
--device-token指定具有给定令牌的给定设备，例如 --device-token 1a2b3c4d:sim-card。
--skip-device-info跳过收集设备相关信息的步骤。注意：运行 CTS 以寻求批准时，请勿使用此选项。
--skip-preconditions跳过前提条件以缩减运行时间，从而对新测试执行迭代开发。这会绕过对设备配置的验证和设置（例如推送媒体文件或检查 Wi-Fi 连接）。
列表说明
list modules列出存储区中的所有可用测试模块。
list plans 或 list configs列出存储区中的所有可用测试计划（配置）。
list subplans列出存储区中的所有可用子计划。
list invocations列出设备上当前正在执行的“运行”命令。
list commands列出当前在队列中等待分配给设备的所有“运行”命令。
list results列出当前存储在存储区中的 CTS 结果。
list devices列出当前连接的设备及其状态。

 

“可用”设备是可正常运行的空闲设备，可用于运行测试。

 

“不可用”设备是可通过 adb 查看但不响应 adb 命令的设备，不会分配用于测试。

 

“已分配”设备是当前正在运行测试的设备。

转储说明
dump logs为所有正在运行的调用转储 tradefed 日志。
添加说明
add subplan --name/-n <subplan_name>
--result-type
[pass | fail | timeout |notExecuted]
[--session/-s <session_id>]		创建从上一会话衍生的子计划；此选项会生成可用于运行测试子集的子计划。

唯一的必选项是 --session。其他选项都是可选的，但如果选用这些选项，必须后跟一个值。--result-type 选项可重复使用；例如 add subplan --session 0 --result-type passed --result-type failed 是有效的。

使用 CTS v1 控制台

对于 Android 6.0 或更早版本，您将使用 CTS v1。

选择计划

您可以选择以下测试计划：

  • CTS - 测试兼容性所需的所有测试。
  • Signature - 所有公开 API 的签名验证
  • Android - 针对 Android API 的测试
  • Java - 针对 Java 核心库的测试
  • VM - 针对 ART 或 Dalvik 的测试
  • Performance - 针对实施的性能测试

您可以使用 run cts 命令执行这些测试。

CTS v1 控制台命令参考

表 1. 该表总结了用于各种用途的 CTS v1 控制台命令。

主机说明
help显示最常用命令的摘要
help all显示可用命令的完整列表
exit正常退出 CTS 控制台。所有当前正在运行的测试完成后，控制台将关闭
运行说明
run cts运行指定的测试并显示进度信息。需要指定 --plan、--package、--class或 --continue-session 中的一个。

在测试过程中，CTS 控制台可以接受其他命令

如果没有连接任何设备，CTS 台式机（或主机）将等待连接设备后再开始测试。

如果连接了多台设备，则 CTS 主机将自动选择一台设备

--plan <test_plan_name>运行指定的测试计划
--package/-p <test_package_name>  [--package/-p <test_package2>...]运行指定的测试包
--class/-c <class_name> [--method/-m <test_method_name>运行指定的测试类和/或方法
--continue-session运行上一个 CTS 会话中所有未执行的测试；会话 testResult.xml 将会更新成最新结果
--shards <number_of_shards>将 CTS 运行分为指定数量的独立块，以便在多台设备上并行运行
--serial/-s <deviceID>在特定设备上运行 CTS
-t <class_name>#<test_method_name>运行特定测试方法
--force-abi 32|64在 64 位设备上，仅对 32 位或 64 位 ABI 运行测试
--skip-preconditions跳过前提条件以缩减运行时间，从而对新测试执行迭代开发。这会绕过对设备配置的验证和设置（例如推送媒体文件或检查 Wi-Fi 连接）。
列表说明
list packages列出存储区中的所有可用测试包
list plans列出存储区中的所有可用测试计划
list invocations列出设备上当前正在执行的“运行”命令
list commands列出当前在队列中等待分配给设备的所有“运行”命令
list results列出当前存储在存储区中的 CTS 结果
list devices列出当前连接的设备及其状态

 

“可用”设备是指运行正常、可用来执行测试的空闲设备

 

“不可用”设备是指可通过 adb 看到但不响应 adb 命令的设备，不会分配用于测试

 

“已分配”设备是当前正在运行测试的设备

添加说明
add derivedplan --plan <plan_name>
--result/-r
[pass | fail | timeout | notExecuted]
[--session/-s <session_id>]		创建衍生自给定结果会话的计划；使用此选项可重新运行报告并验证测试问题

Was this page helpful?

Android修仙者
关注
CTS测试流程及注意事项
weixin_39814274的博客
10-17 5438
一、测试前的准备 1.测试环境：在Linux系统下测试 安装SDK,JDK,ADB,Python工具包。 2.下载媒体文件包：    下载网站：https://source.android.com/compatibility/cts/downloads （在网页的最下方） 3.下载需要测试的软件包 4.手机准备  （1）刷好需要测试的版本  （2）设置好基本的设置        1...
cts过滤retry
wangjicong_215的博客
07-10 2556
run retry --retry 127 --exclude-filter “CtsLocationTestCases” --exclude-filter “CtsLibcoreTestCases” --exclude-filter “CtsNNAPITestCases” --exclude-filter “CtsLibcoreOkHttpTestCases” --exclude-filter ...
手机大厂必备测试技能-CTS 兼容测试
最新发布
2401_83387413的博客
09-23 1141
通过CTS测试的device可以获得android的商标，并且享受android market的权限。由于Google的开放策略，越来越多的终端厂商以及互联网企业加入到手机终端商的领域，加剧了Android移动终端的碎片化，导致出现基于Android客户端的App产品因为兼容性差，不能在用户手机上正常安装、运行错误、强制退出等问题，严重影响用户的体验。所以Google为了这些定制的系统能够符合统一的规范、兼容Android底层的API，就引入了。手机，如小米、魅族、华为、但是这些手机其实都是搭载的。
CTS/GTS相关命令
测试0901-1
01-23 510
CTS常用命令： run cts --plan CTS 全部测试所有plan run cts --plan -c class_name(类名) -m method_name(具体方法名) run cts --plan -p package_name( 包名) -m method_name(具...
CTS命令
chengdupanda的博客
07-04 4018
运行'cts-tradefed'命令进入cts-tradefed控制台。如果你已经下载并且解压了CTS压缩包，你就能在这里找到这个脚本 android-cts/tools/cts-tradefed run cts --plan test_plan_name: 执行一个测试计划 run cts --package/-p : 执行一个CTS测试包 PS：-s后面是手机串口号，以防止多台手机
CTS测试命令
欢迎加入Android老司机学院 482266514（技术交流群）密码CSDN
06-11 1482
CTS测试命令：   首先进入android_cts的tools文件夹，执行：./ c t s ­ t r a d e f e d   1.      测试所有包： run tf –> run cts-–plan     2.      测试某个包： run tf –> run cts–p  [packagename]   3.      测试某个类： run tf –
android cts 测试命令,CTS常用命令
weixin_33926755的博客
05-26 2281
8种机械键盘轴体对比本人程序员，要买一个写代码的键盘，请问红轴和茶轴怎么选？总结一下CTS中常用的命令:进入cts tools目录:1cd android-cts/tools进入交互模式:1./cts-tradefed如下所示:(我事先已经连接了设备,所以他探测到了Android设备)123Android CTS 5.1_r3cts-tf >10-20 11:51:09 I/DeviceM...
GMS CTS测试命令汇总
风和先行的专栏
11-17 853
CTS是的英文简写，意为兼容性测试。CTS测试主要是测试OEM厂商设计的Android平台是不是符合Android的API接口定义。通过CTS测试不仅可以保证Android设备上正常运行，同时，也能够让所有的开发者放心地制作高质量的应用程序，因此只有通过CTS认证的设备才能合法的安装使用等Google应用。先 ./cts-tradefedrun cts 测试全部。
自动重复运行CTS,GTS命令
03-21
标题中的“自动重复运行CTS，GTS命令”指的是在Android系统测试中，使用Continuous Testing Suite (CTS) 和Google Test Suite (GTS) 进行自动化测试的实践。这两个工具是Android兼容性测试的重要组成部分，确保应用...
android GMS认证之CTS 常用命令
Android framework
09-16 425
android GMS认证之CTS 常用命令
CTS测试框架 -- 命令解析
人生如逆旅
12-16 2050
前面已经说过，console线程负责从控制台读取输入，从Command RegexTrie中取出命令去执行，而其中最重要的就是run命令，需要要运行的命令装载并解析并添加到CommandScheduler的命令调度队列中。1.命令命令解析，简单的说，就是解析其中的配置文件生成配置configuration，然后装载成一个command对象。比如：run cts.xml这个命令，在解析的时候就是去查找
Android CTS使用
阿xin*的嵌入式AI
08-19 193
Android CTS测试过程。
Google CTS（学习笔记）五：CTS运行和常用命令
虫无涯的博客
12-09 1131
1 运行Google CTS cd ~/cts/android-cts/tools/ ./cts-tradefed run cts --plan CTS(这条命令是运行所有的测试用例) 2 Google CTS常用命令 例如：l p查看测试包（或测试计划），如下： ...
CTS测试框架 -- 命令执行
人生如逆旅
12-16 1467
1.命令执行经过了前面对于命令的调度，开启真正命令的执行，在TestInvocation中把configuration中的所有组件都取出来执行。 入口：TestInvocation.invokepublic void invoke( IInvocationContext context, IConfiguration config, IRescheduler rescheduler
CTS 测试
Abusihhh的博客
06-22 3922
Camera CTS 测试
cts测试linux指令skip,CTS测试命令详细
weixin_29061465的博客
05-12 1507
help:help命令的截图Available commands and optionsHost:help:show this message这是我们现在使用的方式，主要是为显示帮助信息help all:show the complete tradefed help显示更多的帮助信息exit:gracefully exit the cts console, waiting till all inv...
GMS测试命令总结—Android13（CTS/GTS/VTS/ITS/STS/GSI）
李予浙的博客
05-05 3187
GMS测试命令总结—Android13（CTS/GTS/VTS/ITS/STS）
android cts 命令的说明
沈纵情
02-01 6612
Host help showthis message 帮助文档 exit exitcts command line 退出CTS Plan ls --plan list
docker run --hostname
04-26
docker run --hostname 是用于在Docker容器中设置主机名的命令。主机名是用于标识计算机或容器的名称。通过设置主机名，可以方便地区分不同的容器或主机。 在使用 docker run --hostname 命令时，可以指定一个自定义的主机名，也可以使用默认的主机名。如果没有指定主机名，则默认使用容器的ID作为主机名。 以下是使用 docker run --hostname 命令的示例： docker run --hostname my-container my-image 上述命令将创建一个名为my-container的容器，并将其主机名设置为my-container。
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值