当前位置：搜档网 › Android CTS测试研究

Android CTS测试研究

Android CTS 测试研究之一

Android CTS 测试研究

前言?

从各种渠道了解到Android CTS 测试，是一种类似于Windows Mobile LTK 的测试。大体Google 一下, 发现关于CTS 的信息非常至少，只说它有两万多个测试用例。

然后它只对OHA 成员开发。

本着不抛弃，不放弃的原则，继续Google...

终于发现了参考1：Cezary Statkiewicz's blog。

搞笑的是该Blog 的前言部分还写着CTS 不开放。后面又纠正了Google 刚刚开放CTS 信息（见参考2）。

大喜！

先学习?

原来Google 定义了一个兼容性规范（Compatibility Definition），而CTS 就是用于确保某个测试符合该规范。

从而基于Android 的应用程序能够在基于同一API 版本的各种设备上运行。

由于我们使用Android 2.1 (Eclair), 所以从参考2下载到Android 2.1 的

Compatibility Definition, 大体阅读一下，它定义了一些需求：

数据：必须实现一种无线连接，速率达到200Kbit/Sec

Camera: 至少2M pixels

重力加速: 必须有，3维，>50Hz

指南针：必须有，3纬，>10Hz

GPS: 必须有

内存：至少92M （不包括专用内容）

Nand: /data 分区至少290M

性能：启动时间：浏览器< 1300ms

MMS/SMS < 700ms

AlarmClock < 650ms

第二次启动一个应用的时间不能超过第一次启动时间。

CTS 测试：必须通过最新的CTS

升级：必须有一种办法可以升级全系统。可以为：

OTA

USB

SD 卡

看来Android 是在不断往高端方向走。不过想想也正常，今天的高端就是明天的低端！

Quick Start?

参考2 的User Manual 似乎是针对1.6 的，其中提到CTS 是单独下载的一个包。而参考1 则说从source code 中编译而来。

先按照参考1简单运行一下。

1）获取2.1 代码，并先做一个基本的编译（不知是否需要）

2）编译cts:

cd ~/mydroid

. build/evnsetup.sh

make cts

3) 启动emulator (或者device, 不过可能需要按照User Manual 设置一下）

4）将~/mydroid/out/host/linux-x86/bin 加到路径

5) adb start-server

6）cts

进入cts 交互环境，可以敲入help 看各种命令：cts_host > help

这里是quick start,所以不详解。

7）在shell 下直接以非交互模式运行一下：

$ cts start --plan Signature

该测试用例比较少，发现两分钟可以运行通过。像Android 测试方案就比较耗时间了。

参考?

1. 某大牛的Blog 文章

https://www.sodocs.net/doc/5112297885.html,/blog/44/using-androids-compatibility-test-suite

2. Android 官方论坛:

https://www.sodocs.net/doc/5112297885.html,/compatibility/downloads.html

Android CTS 测试研究之二

前言

继续较深入了解CTS 的细节

先研究一下具体用法

命令行下敲cts 进入命令行,

先看一下帮助

Help 一下

cts_host > help

Usage: command options

Avaiable commands and options:

Host:

help: show this message

exit: exit cts command line

Plan:

ls --plan: list available plans

ls --plan plan_name: list contents of the plan with specified name

add --plan plan_name: add a new plan with specified name

add --derivedplan plan_name -s/--session session_id -r/--result result_type: derive a plan from the given session

rm --plan plan_name/all: remove a plan or all plans from repository

start --plan test_plan_name: run a test plan

start --plan test_plan_name -d/--device device_ID: run a test plan using the specified device start --plan test_plan_name -t/--test test_name: run a specific test

start --plan test_plan_name -p/--package java_package_name: run a specific java package start --plan test_plan_name -t/--test test_name -d/--device device_ID: run a specific test using the specified device

start --plan test_plan_name -p/--package java_package_name -d/--device device_ID: run a specific java package using the specified device

Package:

ls -p/--package: list available packages

ls -p/--package package_name: list contents of the package with specified name

add -p/--package root: add packages from root to repository

rm -p/--package package_name/all: remove a package or all packages from repository Result:

ls -r/--result: list all result of sessions

ls -r/--result -s/--session session_id: list detail case result of a specified session

ls -r/--result [pass/fail/notExecuted/timeout] -s/--session session_id: list detail cases of a specified session by the specified result.

History:

history/h: list all commands in command history

history/h count: list the latest count records in command history

history/h -e num: run the command designated by 'num' in command history

Device:

ls -d/--device: list available devices

列出所有的plan

cts_host > ls --plan

List of plans (8 in total):

CTS

Signature

AppSecurity

Performance

RefApp

Java

Android

查看某plan的内容

cts_host > ls --plan Android

Packages of plan Android (29 in total):

================================= android.apidemos.cts

android.accessibilityservice

android.accounts

android.app

android.bluetooth

android.content

android.database

android.dpi

android.dpi2

android.example

android.gesture

android.graphics

android.hardware

android.jni

android.location

android.media

https://www.sodocs.net/doc/5112297885.html,

android.os

android.permission2

android.permission

android.provider

android.speech

android.telephony

android.text

android.util

android.view

android.webkit

android.widget

android.tests.appsecurity

添加一个新的plan

cts_host > add --plan marvell

[Choose package] SignatureTest: select[Y], reject[n], or choose suite in it[m]? [Y/n/m] Y Invalid input. Please chose 'y', 'n', or 'm' (default is 'y')

[Choose package] SignatureTest: select[Y], reject[n], or choose suite in it[m]? [Y/n/m] y [Choose package] android.accessibilityservice: select[Y], reject[n], or choose suite in it[m]? [Y/n/m] y

[Choose package] android.accounts: select[Y], reject[n], or choose suite in it[m]? [Y/n/m] y [Choose package] android.apidemos.cts: select[Y], reject[n], or choose suite in it[m]? [Y/n/m] [Choose package] android.app: select[Y], reject[n], or choose suite in it[m]? [Y/n/m] y

。。。。

[Choose package] android.widget: select[Y], reject[n], or choose suite in it[m]? [Y/n/m]

cts_host > ls --plan marvell

The following package(s) contained in plan marvell have been removed:

SignatureTest

Packages of plan marvell (55 in total):

=================================

android.accessibilityservice

android.accounts

android.apidemos.cts

android.app

。。。

android.widget

删除一个plan

cts_host > rm --plan marvell

执行一个plan

cts_host > start --plan Performance

start test plan Performance

==============================================================

Test package: android.performance2

android.performance2.cts.AppStartup#testStartup.............................................................................. ..........................................................................(timeout)

==============================================================

CTS_INFO >>> Max ADB operations reached. Restarting ADB...

CTS_INFO >>> Restarting device ...

CTS_INFO >>> Restart complete.

==============================================================

Test package: android.performance3

android.performance3.cts.AppStartup#testStartup..............(pass)

CTS_INFO >>> Max ADB operations reached. Restarting ADB...

CTS_INFO >>> Restarting device ...

CTS_INFO >>> Restart complete.

==============================================================

Test package: android.performance4

android.performance4.cts.AppStartup#testStartup.......(pass)

CTS_INFO >>> Max ADB operations reached. Restarting ADB...

CTS_INFO >>> Restarting device ...

CTS_INFO >>> Restart complete.

==============================================================

Test package: android.performance5

android.performance5.cts.AppStartup#testStartup........(fail)

junit.framework.AssertionFailedError: App Took too long to startup: 715 650 at android.performance5.cts.AppStartup.testStartup(AppStartup.java:67)

at android.performance5.cts.AppStartup.testStartup(AppStartup.java:67)

at https://www.sodocs.net/doc/5112297885.html,ng.reflect.Method.invokeNative(Native Method)

at android.test.InstrumentationTestCase.runMethod(InstrumentationTestCase.java:205)

at android.test.InstrumentationTestCase.runTest(InstrumentationTestCase.java:195)

at android.test.AndroidTestRunner.runTest(AndroidTestRunner.java:169)

at android.test.AndroidTestRunner.runTest(AndroidTestRunner.java:154)

at android.test.InstrumentationTestRunner.onStart(InstrumentationTestRunner.java:430)

at android.app.Instrumentation$InstrumentationThread.run(Instrumentation.java:1447)