sunwengang blog

because it's there

  1. 1. Overview
  2. 2. Achieve CTS Package
  3. 3. 环境配置
  4. 4. 测试命令
  5. 5. 测试结果

Overview

CTS就是兼容性测试为了确保Android应用能够在所有兼容Android的设备上正确运行,并且保持相似的用户体验,在每个版本发布之时,Android提供了一套兼容性测试用例集合(Compatibility Test Suite, CTS)来认证运行Android系统的设备是否完全兼容Android规范,并附带有相关的兼容性标准文档(Compatibility Definition Document, CDD)。

http://source.android.com/compatibility/downloads.html( 网络需要能进google)处下载最新的兼容性测试用例集合,并解压。大部分是基于Junit和仪表盘技术编写的。还扩展了自动化测试过程,可以自动执行用例,自动收集和汇总测试结果。CTS采用XML配置文件的方式将这些测试用例分组成多个测试计划(plan),第三方也可以创建自己的plan。

Achieve CTS Package

  1. google官方下载
    Link: http://source.android.com/compatibility/downloads.html
  2. 编译源码
    1
    2
    3
    4
    CTS的代码在Android源码CTS目录下。  
    make cts -j4
    编译好cts后生成的文件位置: /out/host/linux-x86/
    在该目录下包含tools和rtestcases两个目录。

环境配置

  1. Android 调试桥 (adb)
  2. 手机不能休眠
    1
    2
    3
    设置->开发人员选项:
    打开Settings->Accessibility->Developer options->USB debugging(USB 调试)
    打开Settings->Accessibility->Developer options->Stay Awake(保持唤醒)
  3. 系统语言最好保证英语
    1
    设置手机语言为英语:Setting->Language&input->language->English(United States)。

测试命令

  1. 在CTS/tools目录下执行

    ./cts-tradefed 进入cts-tf,进入的打印信息会提示连接到手机设备!

    1
    2
    3
    run  cts   --help   查看帮助
    help list
    help run
  2. 测试模块

    run cts -s DeviceID -m CtsMediaTestCases (在testcases目录下找apk)
    测试模块下的一小模块: cts-tf > run cts -m CtsMediaTestCases -a armeabi-v7a

  3. 测试模块某个testcase

    run cts -s DeviceID -m <模块名> -t <具体fail项>

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    run  cts   -
    兼容性(compatibility)选项:
    --include-filter 请求包含的模块过滤器

    --exclude-filter 请求排出的模块过滤器(默认一大堆)

    --subplan 运行子计划

    --serial/-s <deviceID> 在特定设备上运行 CTS

    -d/--device <devicedID> 设备

    -r /--retry 重新尝试当前的session

    --skip-system-status-check + ...Check 跳过系统状态检查

    -–skip-preconditions/-o 跳过一些预置条件的检查,可以减少测试的时间

    –-skip-device-info 跳过手机信息的收集,可以减少测试的时间

    --continue-session <sessionId> 继续被中断的任务
  4. 查看测试结果

    l r

  5. 查看等待执行的任务

    l c

  6. 查看所有执行的任务

    l i

    1
    2
    3
    4
    5
    6
    7
    8
    l  -
    d 设备
    r 结果
    c 当前被等待执行的命令
    p 所有可获得的plan
    m 所有可获得的module
    i 所有调用的线程(查看任务是否结束)
    config 所有可知的配置
  7. 全局测试

    run cts –plan CTS

  8. 继续被中断的测试

    l r
    run cts –continue-session sessionID

  9. 重新跑测某个任务的失败项(节约时间)

    l r
    run cts retry -s DeviceID –retry sessionID

测试结果

测试结束后在/results文件夹中,会看到以日期和时间命名的文件夹用于保存执行过的测试结果。还有一个同名的zip文件保存同样的内容。

测试过程中的自动录log,测试结束后log自动保存在/logs里边以日期和时间命名的文件夹中。

在测试结果文件夹中,所有的测试结果是以XML的形式保存的。
通常测试结果网页分成“Device Information”、“Test Summary”、“Test Summary by Package”、“Test Failures(xx)”和“Detailed Test Report”等四个区域。

本文作者 : sunwengang
本文使用 署名-非商业性使用-相同方式共享 4.0 国际 (CC BY-NC-SA 4.0) 协议
本文链接 : http://wizzie.top/2019/07/15/2019/190715_debug_CTS/

本文最后更新于 天前,文中所描述的信息可能已发生改变