CTS4.1测试步骤 V1.0
2013-12-19 20:55
225 查看
CTS4.1测试步骤 V1.0 (更新到CTS4.1 R1)
前言:其实CTS4.1 R1的测试方法和CTS4.0 R2&R3一样,只是测试环境需要新的SDK
r20.0.1,SDK下载链接:http://developer.android.com/sdk/index.html
所以这篇文章有点偷懒了,呵呵。
第一:平台准备工作
第二:新建CTS测试任务
第三:关于CTS4.1测试报告
第四:继续测试未完成的计划
第五:单独对fail/notExecuted/timeout的测试项进行测试
第六:单独测试某个Case
第七:注意事项
[b]----------------------------------------------
[/b]
第一部分:平台准备工作
[b]----------------------------------------------
[/b]
1.进入Settings > SD Card & phone storage
> Factory data reset,对平台进行reset一次
2.平台插入一张空的TF卡
3.平台安装两个APK:CtsDelegatingAccessibilityService.apk,CtsDeviceAdmin.apk
4. 进入settings打开Wi-Fi并连接AP (AP需要连外网)
5.进入settings->Security->Screenlock设为None
6.进入settings->Security->EnableUnknown sources
7.进入settings->Security->Deviceadministrators->Enable两个选项
8.进入Language&input->language设为English(UnitedStates)
9.进入settings->Display->Sleep设为30minutes或None
10.进入settings->Accessibility->EnableDelegating Accessibility
Service
11.进入settings->Developeroptions->Enable USB debugging、Stay
awake、Allowmock locations
12. 进入settings->Date&time->Select time zone设为Pacific
Time
13.PC上copy“android-cts-media-1.0”,在android-cts-media-1.0文件下输入source ./copy_media.sh
all
(因为发现原来的./copy_media.sh脚本不能复制所有文件)运行脚本,将media文件copy进平台。成功后会在平台的内存中看到test文件夹。Media
file下载链接:CTS Media
1.0 (下载后需要解压)
----------------------------------------------
第二部分:新建CTS测试任务(每次输入后加回车)
----------------------------------------------
1.平台用USB线连接LinuxPC (连通后平台左上方会显示usb和debug icon)
2.打开终端
3.输入sudosu -
输入root密码
4.输入cd ../..
输入 cd
/home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools
(这个是cts-tradefed文件所在路径,各位需要输入实际路径)
输入 ./cts-tradefed
终端显示 01-16 15:44:05
I/DeviceManager: Detected newdevice
0123456789ABCDEF(如果没有这行,说明设备没有和PC联通)
Android CTS 4.1_r1
cts-tf >
5.输入run cts --plan CTS
终端显示 cts-tf > run cts --plan CTS
cts-tf> 01-16 15:45:34 I/TestInvocation: Starting invocation for
'cts' on build'4.1_r1' on device 0123456789ABCDEF
01-16 15:45:35I/0123456789ABCDEF: Created result dir
2012.01.16_15.45.34
开始测试CTS
----------------------------------------------
第三部分:关于CTS4.1测试报告
[b]----------------------------------------------
[/b]
1.CTS测试报告是自动生成一个xml报表,并自动填写的,不需要测试人员干预
2.当一个CTS测试任务开始时,会在android-cts-4.1_r1-linux_x86-arm/android-cts/repository/results中,为这个任务建立一个存放测试报告的文件夹,文件名以任务开始的日期和时间命名。
例如:2012.01.12_13.00.03
3.CTS4.1生成测试报告的速度比CTS2.3/2.2要慢不少,特别是在测试过程中中断测试,CTS4.1需要70秒才会开始生成报告。如果你在此过程中按ctrl+c终止CTS进程,测试报告就无法生成,以后也无法继续测试未完成的计划。
下方是中途断开后生成报告的例子:
01-1813:50:19I/0123456789ABCDEF:
android.accounts.cts.AccountManagerTest#testHasFeature FAIL
Testfailed to run to completion. Reason: 'Test run failed to
complete. Expected 1tests, received 0'. Check device logcat for
details
01-1813:51:29I/0123456789ABCDEF: android.accounts
package complete: Passed 20, Failed 2, NotExecuted 6
01-1813:51:29 I/0123456789ABCDEF:
-----------------------------------------
01-1813:51:29 I/0123456789ABCDEF: Test package android.admin
started
01-1813:51:29 I/0123456789ABCDEF:
-----------------------------------------
……
01-1813:51:30 I/0123456789ABCDEF:
-----------------------------------------
01-1813:51:30 I/0123456789ABCDEF: Test package android.widget
started
01-1813:51:30 I/0123456789ABCDEF:
-----------------------------------------
01-1813:51:30 I/0123456789ABCDEF: Saved log
device_logcat_8558243668624894128.zip
01-1813:51:30 I/0123456789ABCDEF: Saved log
host_log_6087775957743010530.zip
01-1813:51:30 I/0123456789ABCDEF: android.widget package complete:
Passed 0, Failed0, Not Executed 988
01-1813:51:30 I/0123456789ABCDEF: Created xml report file at
file:///home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools/./../../android-cts/repository/results/2012.01.18_13.43.56/testResult.xml
01-1813:51:31 I/0123456789ABCDEF: XML test result file generated
at2012.01.18_13.43.56. Passed 28, Failed 20, Not Executed 17110
01-1813:51:31 I/0123456789ABCDEF: Time: 2m 45s
01-1813:51:33 W/DeviceManager: Freed device 0123456789ABCDEF is
unavailable.Removing from use.
01-1813:52:38 E/BackgroundDeviceAction: Device 0123456789ABCDEF not
online
3.CTS测试任务完成后,会生成testResult.xml和2012.01.12.zip打开这个文件夹中的testResult.xml(用firefox或IE浏览器打开),查看报表是否完全。
4.确认报表后,将整个文件夹复制出来,然后压缩后发给相关人员
----------------------------------------------
第四部分:继续测试未完成的计划
[b]----------------------------------------------
[/b]
CTS4.1对未完成的测试计划不会生成xml报告,这个和CTS2.3/2.2不同。但是,这并不意味测试中断后无法继续未完成的测试。
1. 前提条件是有未完成的测试计划
2. 平台用USB线连接LinuxPC
(连通后平台右下方会显示usb和debugicon)
3. 打开终端
4. 输入sudo su –
输入root密码
5. 输入cd ../..
输入cd
/home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools(这个是startcts文件所在路径,各位需要输入实际路径)
输入 ./cts-tradefed
终端显示 01-16 15:44:05
I/DeviceManager: Detected newdevice
0123456789ABCDEF(如果没有这行,说明设备没有和PC联通)
Android CTS 4.1_r1
cts-tf >
6.输入l r
终端显示
Session
Pass Fail Not
Executed Start time
Planname
0
7
0
0
2012.01.16_16.09.19
NA
1
13
0
0
2012.01.16_16.13.01
NA
2
19
19
17120
2012.01.18_13.43.56
CTS
(根据start time时间,确定你要的任务的session编号)
7. 输入 run cts –continue-session session_id (session编号)
终端显示
cts-tf> 01-18 13:48:45 I/TestInvocation: Starting invocation for
'cts' on build'4.1_r1' on device 0123456789ABCDEF
01-1813:49:59 I/0123456789ABCDEF: Collecting device info
01-1813:50:00 I/0123456789ABCDEF:
-----------------------------------------
01-1813:50:00 I/0123456789ABCDEF: Test package android.accounts
started
01-1813:50:00 I/0123456789ABCDEF:
-----------------------------------------
[b]----------------------------------------------
[/b]
第五部分:单独对fail/notExecuted/timeout的测试项进行测试
[b]----------------------------------------------
[/b]
1.前提条件是已经有完成的测试结果testResult.xml文件 add derivedplan --plan plane_name
--session/-s session_id-r [pass/fail/notExecuted/timeout]
2.平台用USB线连接LinuxPC
(连通后平台左上方会显示usb和debugicon)
3.打开终端
4.输入sudosu -
输入root密码
5.输入cd ../..
输入 cd
/home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools
(这个是startcts文件所在路径,各位需要输入实际路径)
输入 ./cts-tradefed
终端显示 01-16 15:44:05
I/DeviceManager: Detected newdevice
0123456789ABCDEF(如果没有这行,说明设备没有和PC联通)
Android CTS 4.1_r1
cts-tf >
6.输入l r
终端显示
Session Pass
Fail Not Executed
Start time
Plan
name
0
7
0
0
2012.01.16_16.09.19
NA
1
13
0
0
2012.01.16_16.13.01
NA
(根据start
time时间,确定你要的任务的session编号)
7.输入addderivedplan --plan plane_name(新建一个测试计划) --session/-s
session_id -r[pass/fail/notExecuted/timeout]
(只能选择其中一项)
8.输入run cts –plan plane_name(新建的测试计划名称) 开始测试
9.测试完成后,CTS会自动生成一个新测试报表文件夹
----------------------------------------------
第六:单独测试某个Case
----------------------------------------------
1.目前对单个Case每单独测试一次,就会生成一个Session(和测试报告xml)。所以,一般在有需求的情况下才会进行测试。
2.平台用USB线连接LinuxPC
(连通后平台左上方会显示usb和debugicon)
3.打开终端
4.输入sudosu -
输入root密码
5.输入cd ../..
输入 cd
/home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools
(这个是startcts文件所在路径,各位需要输入实际路径)
输入 ./cts-tradefed
终端显示 01-16 15:44:05
I/DeviceManager: Detected newdevice
0123456789ABCDEF(如果没有这行,说明设备没有和PC联通)
Android CTS 4.1_r1
cts-tf >
6.从CTS测试报告XML文件中查找需要测试的Case的packagename 和 method name
例如:
V1.0" />
按上方的例子:android.acceleration.cts.HardwareAccelerationTest是package
name,testIsHardwareAccelerated是method name
7.输入runcts -c android.acceleration.cts.HardwareAccelerationTest
--m testIsHardwareAccelerated开始测试这个Case
8.
测试完成后,CTS会自动生成一个新测试报告文件夹
----------------------------------------------
第七部分:注意事项:
[b]----------------------------------------------
[/b]
1.CTS4.1的命令和CTS2.3/2.3完全不同,所以在进入CTS后,先输入help看看命令的格式和意思。
2.CTS要求测试平台的硬件和Android内置APK功能完好
3.正常测试一次CTS4.1,需要6小时。所以,测试时请接上电源,并尽量在晚上测试,不会影响平台的使用
4.CTS是自动化测试,测试过程中不需要人的干预。如果在上班时间,每1-2小时观察下即可
5.CTS4.1在测试过程中断开、终止都不会生成测试报告,所以,测试前要保证USB连接稳定和平台设置
6.CTS每次执行run cts –plan
CTS时,CTS会搜索android-cts-4.1_r#-linux_x86-arm/android-cts/repository/results中的历史报表文件夹。如果文件有很多,启动速度会非常慢。所以,请定期清理results文件夹中的历史报表(直接删除报表文件夹即可)
前言:其实CTS4.1 R1的测试方法和CTS4.0 R2&R3一样,只是测试环境需要新的SDK
r20.0.1,SDK下载链接:http://developer.android.com/sdk/index.html
所以这篇文章有点偷懒了,呵呵。
第一:平台准备工作
第二:新建CTS测试任务
第三:关于CTS4.1测试报告
第四:继续测试未完成的计划
第五:单独对fail/notExecuted/timeout的测试项进行测试
第六:单独测试某个Case
第七:注意事项
[b]----------------------------------------------
[/b]
第一部分:平台准备工作
[b]----------------------------------------------
[/b]
1.进入Settings > SD Card & phone storage
> Factory data reset,对平台进行reset一次
2.平台插入一张空的TF卡
3.平台安装两个APK:CtsDelegatingAccessibilityService.apk,CtsDeviceAdmin.apk
4. 进入settings打开Wi-Fi并连接AP (AP需要连外网)
5.进入settings->Security->Screenlock设为None
6.进入settings->Security->EnableUnknown sources
7.进入settings->Security->Deviceadministrators->Enable两个选项
8.进入Language&input->language设为English(UnitedStates)
9.进入settings->Display->Sleep设为30minutes或None
10.进入settings->Accessibility->EnableDelegating Accessibility
Service
11.进入settings->Developeroptions->Enable USB debugging、Stay
awake、Allowmock locations
12. 进入settings->Date&time->Select time zone设为Pacific
Time
13.PC上copy“android-cts-media-1.0”,在android-cts-media-1.0文件下输入source ./copy_media.sh
all
(因为发现原来的./copy_media.sh脚本不能复制所有文件)运行脚本,将media文件copy进平台。成功后会在平台的内存中看到test文件夹。Media
file下载链接:CTS Media
1.0 (下载后需要解压)
----------------------------------------------
第二部分:新建CTS测试任务(每次输入后加回车)
----------------------------------------------
1.平台用USB线连接LinuxPC (连通后平台左上方会显示usb和debug icon)
2.打开终端
3.输入sudosu -
输入root密码
4.输入cd ../..
输入 cd
/home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools
(这个是cts-tradefed文件所在路径,各位需要输入实际路径)
输入 ./cts-tradefed
终端显示 01-16 15:44:05
I/DeviceManager: Detected newdevice
0123456789ABCDEF(如果没有这行,说明设备没有和PC联通)
Android CTS 4.1_r1
cts-tf >
5.输入run cts --plan CTS
终端显示 cts-tf > run cts --plan CTS
cts-tf> 01-16 15:45:34 I/TestInvocation: Starting invocation for
'cts' on build'4.1_r1' on device 0123456789ABCDEF
01-16 15:45:35I/0123456789ABCDEF: Created result dir
2012.01.16_15.45.34
开始测试CTS
----------------------------------------------
第三部分:关于CTS4.1测试报告
[b]----------------------------------------------
[/b]
1.CTS测试报告是自动生成一个xml报表,并自动填写的,不需要测试人员干预
2.当一个CTS测试任务开始时,会在android-cts-4.1_r1-linux_x86-arm/android-cts/repository/results中,为这个任务建立一个存放测试报告的文件夹,文件名以任务开始的日期和时间命名。
例如:2012.01.12_13.00.03
3.CTS4.1生成测试报告的速度比CTS2.3/2.2要慢不少,特别是在测试过程中中断测试,CTS4.1需要70秒才会开始生成报告。如果你在此过程中按ctrl+c终止CTS进程,测试报告就无法生成,以后也无法继续测试未完成的计划。
下方是中途断开后生成报告的例子:
01-1813:50:19I/0123456789ABCDEF:
android.accounts.cts.AccountManagerTest#testHasFeature FAIL
Testfailed to run to completion. Reason: 'Test run failed to
complete. Expected 1tests, received 0'. Check device logcat for
details
01-1813:51:29I/0123456789ABCDEF: android.accounts
package complete: Passed 20, Failed 2, NotExecuted 6
01-1813:51:29 I/0123456789ABCDEF:
-----------------------------------------
01-1813:51:29 I/0123456789ABCDEF: Test package android.admin
started
01-1813:51:29 I/0123456789ABCDEF:
-----------------------------------------
……
01-1813:51:30 I/0123456789ABCDEF:
-----------------------------------------
01-1813:51:30 I/0123456789ABCDEF: Test package android.widget
started
01-1813:51:30 I/0123456789ABCDEF:
-----------------------------------------
01-1813:51:30 I/0123456789ABCDEF: Saved log
device_logcat_8558243668624894128.zip
01-1813:51:30 I/0123456789ABCDEF: Saved log
host_log_6087775957743010530.zip
01-1813:51:30 I/0123456789ABCDEF: android.widget package complete:
Passed 0, Failed0, Not Executed 988
01-1813:51:30 I/0123456789ABCDEF: Created xml report file at
file:///home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools/./../../android-cts/repository/results/2012.01.18_13.43.56/testResult.xml
01-1813:51:31 I/0123456789ABCDEF: XML test result file generated
at2012.01.18_13.43.56. Passed 28, Failed 20, Not Executed 17110
01-1813:51:31 I/0123456789ABCDEF: Time: 2m 45s
01-1813:51:33 W/DeviceManager: Freed device 0123456789ABCDEF is
unavailable.Removing from use.
01-1813:52:38 E/BackgroundDeviceAction: Device 0123456789ABCDEF not
online
3.CTS测试任务完成后,会生成testResult.xml和2012.01.12.zip打开这个文件夹中的testResult.xml(用firefox或IE浏览器打开),查看报表是否完全。
4.确认报表后,将整个文件夹复制出来,然后压缩后发给相关人员
----------------------------------------------
第四部分:继续测试未完成的计划
[b]----------------------------------------------
[/b]
CTS4.1对未完成的测试计划不会生成xml报告,这个和CTS2.3/2.2不同。但是,这并不意味测试中断后无法继续未完成的测试。
1. 前提条件是有未完成的测试计划
2. 平台用USB线连接LinuxPC
(连通后平台右下方会显示usb和debugicon)
3. 打开终端
4. 输入sudo su –
输入root密码
5. 输入cd ../..
输入cd
/home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools(这个是startcts文件所在路径,各位需要输入实际路径)
输入 ./cts-tradefed
终端显示 01-16 15:44:05
I/DeviceManager: Detected newdevice
0123456789ABCDEF(如果没有这行,说明设备没有和PC联通)
Android CTS 4.1_r1
cts-tf >
6.输入l r
终端显示
Session
Pass Fail Not
Executed Start time
Planname
0
7
0
0
2012.01.16_16.09.19
NA
1
13
0
0
2012.01.16_16.13.01
NA
2
19
19
17120
2012.01.18_13.43.56
CTS
(根据start time时间,确定你要的任务的session编号)
7. 输入 run cts –continue-session session_id (session编号)
终端显示
cts-tf> 01-18 13:48:45 I/TestInvocation: Starting invocation for
'cts' on build'4.1_r1' on device 0123456789ABCDEF
01-1813:49:59 I/0123456789ABCDEF: Collecting device info
01-1813:50:00 I/0123456789ABCDEF:
-----------------------------------------
01-1813:50:00 I/0123456789ABCDEF: Test package android.accounts
started
01-1813:50:00 I/0123456789ABCDEF:
-----------------------------------------
[b]----------------------------------------------
[/b]
第五部分:单独对fail/notExecuted/timeout的测试项进行测试
[b]----------------------------------------------
[/b]
1.前提条件是已经有完成的测试结果testResult.xml文件 add derivedplan --plan plane_name
--session/-s session_id-r [pass/fail/notExecuted/timeout]
2.平台用USB线连接LinuxPC
(连通后平台左上方会显示usb和debugicon)
3.打开终端
4.输入sudosu -
输入root密码
5.输入cd ../..
输入 cd
/home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools
(这个是startcts文件所在路径,各位需要输入实际路径)
输入 ./cts-tradefed
终端显示 01-16 15:44:05
I/DeviceManager: Detected newdevice
0123456789ABCDEF(如果没有这行,说明设备没有和PC联通)
Android CTS 4.1_r1
cts-tf >
6.输入l r
终端显示
Session Pass
Fail Not Executed
Start time
Plan
name
0
7
0
0
2012.01.16_16.09.19
NA
1
13
0
0
2012.01.16_16.13.01
NA
(根据start
time时间,确定你要的任务的session编号)
7.输入addderivedplan --plan plane_name(新建一个测试计划) --session/-s
session_id -r[pass/fail/notExecuted/timeout]
(只能选择其中一项)
8.输入run cts –plan plane_name(新建的测试计划名称) 开始测试
9.测试完成后,CTS会自动生成一个新测试报表文件夹
----------------------------------------------
第六:单独测试某个Case
----------------------------------------------
1.目前对单个Case每单独测试一次,就会生成一个Session(和测试报告xml)。所以,一般在有需求的情况下才会进行测试。
2.平台用USB线连接LinuxPC
(连通后平台左上方会显示usb和debugicon)
3.打开终端
4.输入sudosu -
输入root密码
5.输入cd ../..
输入 cd
/home/linux/cts/android-cts-4.1_r1-linux_x86-arm/android-cts/tools
(这个是startcts文件所在路径,各位需要输入实际路径)
输入 ./cts-tradefed
终端显示 01-16 15:44:05
I/DeviceManager: Detected newdevice
0123456789ABCDEF(如果没有这行,说明设备没有和PC联通)
Android CTS 4.1_r1
cts-tf >
6.从CTS测试报告XML文件中查找需要测试的Case的packagename 和 method name
例如:
V1.0" />
按上方的例子:android.acceleration.cts.HardwareAccelerationTest是package
name,testIsHardwareAccelerated是method name
7.输入runcts -c android.acceleration.cts.HardwareAccelerationTest
--m testIsHardwareAccelerated开始测试这个Case
8.
测试完成后,CTS会自动生成一个新测试报告文件夹
----------------------------------------------
第七部分:注意事项:
[b]----------------------------------------------
[/b]
1.CTS4.1的命令和CTS2.3/2.3完全不同,所以在进入CTS后,先输入help看看命令的格式和意思。
2.CTS要求测试平台的硬件和Android内置APK功能完好
3.正常测试一次CTS4.1,需要6小时。所以,测试时请接上电源,并尽量在晚上测试,不会影响平台的使用
4.CTS是自动化测试,测试过程中不需要人的干预。如果在上班时间,每1-2小时观察下即可
5.CTS4.1在测试过程中断开、终止都不会生成测试报告,所以,测试前要保证USB连接稳定和平台设置
6.CTS每次执行run cts –plan
CTS时,CTS会搜索android-cts-4.1_r#-linux_x86-arm/android-cts/repository/results中的历史报表文件夹。如果文件有很多,启动速度会非常慢。所以,请定期清理results文件夹中的历史报表(直接删除报表文件夹即可)
相关文章推荐
- CTS4.1测试步骤 V1.0
- CTS4.0测试步骤 V1.2
- CTS4.0测试步骤 V1.2
- CTS4.1测试步骤 V1.0 (更新到CTS4.1 R1)
- IOS APP 真机测试步骤
- java 窗体,未测试
- 概括描述Ubuntu PHP安装测试(转)
- iOS程序发布测试3-生成ad ho…
- 石破天惊 iPhone全功能硬件破解详细步骤
- Ubuntu 安装Chrome步骤
- 使用QTP 11批量修改QC10测试…
- STAF 自动化测试框架学习积累
- ssh整合步骤 只是大体介绍一下
- [怪物猎人原创小说]猎人的进化 1.0
- platform 总线下驱动的开发步骤是
- [转] 如何学习自动化测试工具QTP
- QTP 映射用户定义测试对象类,解决…
- eclipse svn 提交步骤
- UNIX入侵经典步骤详解(part 3.4) ― IT技术
- Rman 0级和2级增量备份的恢复测试(…