压力测试-Monkey学习
Monkey测试特点
- 什么是Monkey test? 如其名,像猴子一样,虽然什么都不懂,但是可以乱点一通,可以理解为压力测试。在规定的时间或次数范围内做任何随机的操作,随即操作包括点击、滑动......
- Monkey测试目标:通过模拟用户随机操作时间,暴露应用内Crash,降低Crash率
- Monkey Test范围预期:除了一些系统设置,我们希望范围维持在待测试应用内,另外可以补充一些中断测试
- 只能发现Crash,单复现和解决Crash还是需要靠开发人员
- 暴露所有的Crash不太现实,只能在一定程度上降低Crash
一、什么是Monkey
Monkey是Android SDK提供的一个命令行工具(Android平台下一个命令行自动化测试工具),可以运行在模拟器里或实际设备中。 它向系统发送伪随机的用户事件流(如按键输入、触摸屏输入、手势输入等),实现对正在开发的应用程序进行压力测试。Monkey包括许多选项,它们大致分为四大类:
- 基本配置选项,如设置尝试的事件数量
- 运行约束选项,如设置只对单独的一个包进行测试
- 事件类型和频率
- 调试选项
在Monkey运行的时候,它生成事件,并把它们发给系统。同时,Monkey还对测试中的系统进行监测,对下列三种情况进行特殊处理(自动停止):
- 如果限定了Monkey运行在一个或几个特定的包上,那么它会监测试图转到其它包的操作,并对其进行阻止。
- 如果应用程序崩溃或接收到任何失控异常,Monkey将停止并报错。
- 如果应用程序产生了应用程序不响应(ANR:application not responding)的错误,Monkey将会停止并报错。
按照选定的不同级别的反馈信息,在Monkey中还可以看到其执行过程报告和生成的事件
二、测试准备
- Android官网下载android-sdk-windows包,解压至一个目录下,无需安装,如D:\android-sdk-windows;
- 环境变量配置:Path目录下添加D:\android-sdk-windows\platform-tools;D:\android-sdk-windows\tools(分号隔开,确定platform-tools和tools文件已下载,确认路径正确)
- Monkey test前必须先进入android设备的adb shell(Android SDK环境配置不在此描述,网上有很多)步骤如下:
1. 开始—>运行—>cmd
2. usb连接手机,输入 adb shell 命令
3. 进入手机后,输入相应的monkey命令即可测试
三、Monkey的基本命令格式
基本语法如下:
1、$ adb shell monkey [options]
adb shell monkey –p 程序包 –v 测试次数
如果不指定options,Monkey将以无反馈模式启动,并把事件任意发送到安装在目标环境中的全部包。
下面是一个更为典型的命令行示例,它启动com.dianping.XXX程序包,并向其发送500个伪随机事件:$ adb shell monkey -p com.dianping.XXX -v 500
2、执行单一apk:
monkey –p <options> -c <options> -s <seed> <限制语句> --throttle <milliseconds> -v 执行次数> C:\monkey_test.txt
3、执行apk集合:
monkey –pkg-blacklist-file /data/blacklist.txt -c <options> -s <seed> <限制语句> --throttle <milliseconds> -v 执行次数> C:\blacklist_test.txt //执行黑名单以外的应用
或
monkey –pkg-whitelist-file /data/whitelist.txt -c <options> -s <seed> <限制语句> --throttle <milliseconds> -v 执行次数 > C:\whitelist_test.txt //执行白名单的应用
四、测试Log获取
用Monkey test测试,为了方便分析问题,可以在命令monkey命令后面加上 “|logcat -v time”,这样就能边测试边打印Log(记得用终端保存Log文本)例如:
adb shell monkey –p com.dianping.XXX –v 20000|logcat -v time
但是这个组合在monkey测试完成后,logcat仍然在执行,测试时需要注意
如果测试monkey碰到crash或者anr(程序强制性退出或不响应)现象时,在抓取log的同时需要提供traces.txt,
步骤如下:{ adb pull /data/anr/traces.txt .}
1. 测试版本需要具备root权限
2. 进入data/anr目录下面
3. 将traces.txt文件拷贝到TF卡中,然后拷贝出来发给软件分析即可 eg. trace view
五、保存monkey log以及手机log到sdcard
一、首先在cmd或终端中输入adb shell
二、再执行monkey,比如
monkey -p com.dianping.XXX --throttle 500 --ignore-crashes --ignore-timeouts --ignore-security-exceptions --ignore-native-crashes --monitor-native-crashes -v -v -v 100 >/mnt/sdcard/monkey.txt & logcat -v time >/mnt/sdcard/logcat.txt
NOTE:如果不想生成logcat文件,删除红色标记(& logcat -v time >/mnt/sdcard/logcat.txt)中即可
三、终端内打开存放日志地址,比如
cd /Users/wengyb/Documents
四、拖日志到电脑上,比如
adb pull /mnt/sdcard/monkey.txt
六、手动停止Monkey
adb shell ps(查找进程PID)
adb shell kill pid (杀掉进程)
七、Monkey命令参数介绍
分类 |
参数 |
含义 |
备注 |
基本 |
--help |
帮助信息 |
|
-v |
命令行的每一个-v将增加反馈信息的级别 |
|
|
事件 |
-s |
|
两次测试的效果是相同的,因为模拟的用户操作序列(每次操作按照一定的先后顺序所组成的一系列操作,即一个序列)是一样的。 操作序列虽然是随机生成的,但是只要我们指定了相同的Seed值,就可以保证两次测试产生的随机操作序列是完全相同的,所以这个操作序列伪随机的 |
--throttle |
|
adb shell monkey -p com.dianping.XXX –throttle 3000 100 |
|
调整百分比 —pct+{-事件名} |
--pct-touch |
调整触摸事件的百分比 |
触摸事件是一个down-up事件,它发生在屏幕上的某单一位置 |
--pct-motion |
调整动作事件的百分比 |
动作事件由屏幕上某处的一个down事件、一系列的伪随机事件和一个up事件组成 |
|
--pct-trackball |
调整轨迹事件的百分比 |
轨迹事件由一个或几个随机的移动组成,有时还伴随有点击 |
|
--pct-nav |
调整“基本”导航事件的百分比 |
导航事件由来自方向输入设备的up/down/left/right组成 |
|
--pct-majornav |
调整“主要”导航事件的百分比 |
这些导航事件通常引发图形界面中的动作,如:5-way键盘的中间按键、回退按键、菜单按键 |
|
--pct-syskeys |
调整“系统”按键事件的百分比 |
这些按键通常被保留,由系统使用,如Home、Back、Start Call、End Call及音量控制键 |
|
--pct-appswitch |
调整启动Activity的百分比 |
在随机间隔里,Monkey将执行一个startActivity()调用,作为最大程度覆盖包中全部Activity的一种方法 |
|
--pct-anyevent |
调整其它类型事件的百分比 |
它包罗了所有其它类型的事件,如:按键、其它不常用的设备按钮等等 |
|
约束限制 |
-p |
|
|
-c |
|
要指定多个类别,需要使用多个-c选项,每个-c选 项只能用于一个类别 |
|
调试 |
--dbg-no-events |
设置此选项,Monkey将执行初始启动,进入到一个测试Activity,然后不会再进一步生成事件 |
为了得到最佳结果,把它与-v、一个或几个包约束、以及一个保持Monkey运行30秒或更长时间的非零值联合起来,从而提供一个环境,可以监视应用程序所调用的包之间的转换 |
--hprof |
设置此选项,将在Monkey事件序列之前和之后立即生成profiling报告 |
这将会在data/misc中生成大文件(~5Mb),所以要小心使用它 |
|
--ignore-crashes |
|
||
--ignore-timeouts |
|
||
--ignore-security-exceptions |
|
||
--kill-process-after-error |
|
正常的(成功的)结束,并没有停止启动的进程,设备只是在结束事件之后,简单地保持在最后的状态 |
|
--monitor-native-crashes |
|
||
--wait-dbg |
停止执行中的Monkey,直到有调试器和它相连接 |
八、Monkey实例测试
Mac下:
1、 通过eclipse启动一个Android的emulator或者连接真机
2、 在命令行中输入:adb devices查看设备连接情况
3、 在有设备连接的前提下,在命令行中输入:adb shell 进入shell界面。如果有多个device的时候,加-s参数指定:adb -s devicename shell
4、在其中找到我们需要测试的包名com.dianping.XXX
5、 查看data/data文件夹下的应用程序包(可测试的应用程序包都在这个目录下面)
ls data/data
如果出现opendir failed,Permission denied 则可用root解决
键入 su root
然后键入 ls data/data 查看包
6、 以com.dianping.XXX 作为对象进行MonkeyTest 命令行》》monkey -p com.dianping.XXX -v 500 其中-p表示对象包 –v 表示事件数量
运行过程中,Emulator/真机中的应用程序在不断地切换画面。
按照选定的不同级别的反馈信息,在Monkey中还可以看到其执行过程报告和生成的事件。
九、测试用例
monkey -p com.dianping.XXX --throttle 500 --ignore-crashes --ignore-timeouts --ignore-security-exceptions --ignore-native-crashes --monitor-native-crashes -v -v -v 100 >/mnt/sdcard/monkey.txt
cd /Users/wengyb/Documents
adb pull /mnt/sdcard/monkey.txt