电信CMET VS 搬动RTS(深度PK)评测 (非常有营养的帖子)
文章转自 http://bbs.189works.com/thread-47818-1-1.html
Samaryer的评测报告
用户名:samaryer 网络测试环境:电信ADSL 4M带宽
电脑操作系统:Windows XP 测试手机机型:三星I909
评测报告主要内容:
1.测试平台网站首页,首先上图,再细细道来(上边:RTS截图,下边:CMET截图;后面都是这样):
RTS网站首页界面布局简单大气,让人一眼就可以看出我们可以干啥子
CMET网站首页界面布局复杂,主题不突出,小气,第一次到网站不看帮助是不知道要干啥子的
2.终端配备大pk:
RTS号称有300台终端,但我从他们门户网站上统计的数据是实际可用的手机只有143台;CMET号称上百台手机(没有指明具体的数量),我从门户网站上统计得到是实际可用的手机有192台;在实际可用的终端数量上CMET占有优势。
在从终端的分布情况来分析,RTS一般一种机型只配一台手机,而CMET一种机型一般会配多台手机;RTS上的机型要丰富些,CMET的总数量多些,通过分析他们上线设备的特点应该还要添加终端,最近他们发帖子说不久将布设iPhone4s,值得期待。
从终端的装配上来看,RTS只有5台手机是联网的,而且他这5台联网的手机是否配置有手机卡我就不得而知了,因为要使用联网的手机还需要特殊认证,RTS真有点小气,呵呵。CMET上所有手机都已经联网,还想有70%左右的手机都安装有手机卡,手机卡是有钱的,可以拨打电话(这个我试过)呵呵。这方面CMET的确做得非常好,支持下
3.核心工具第一印象PK,测试平台的测试工具才是我们pk的重点,下面就主要对测试工具进行对比
RTS:可直接从网页上使用测试工具,估计是用flash开发的,可以支持ie,chrome等
CMET:可直接从网页上使用测试工具(需要安装浏览器插件,且只支持ie),也提供测试客户端;CMET测试客户端是做得非常专业的,从上面的截图可以看到RTS就显得有点业余了,依我看更像个玩具,自己玩玩可以,呵呵。CMET则做得非常专业了,不管是布局,还是功能的设计上面,一眼就能分出高下。另外CMET的画质非常清晰,想必视频图像处理技术比较先进,RTS看起来有点模糊
4.核心测试工具功能设计pk:
RTS:主要功能有清理手机,调整手机大小,屏幕截图,屏幕旋转,更多日志,装载应用,适配测试
CMET:主要功能有调整手机大小,屏幕截图,屏幕旋转,装载应用,输出声音,输入声音,视频帧数调节,刷新屏幕,录制视频,批量导出图片,制作操作记录,编写脚本,回放脚本
功能的数量上CMET占绝对优势,CMET功能设计比较多,但RTS有个别实用的功能CMET却没有;那么在这些功能的实现上到底谁更胜一筹呢,我们试目以待......
下面我们对每个具体的功能进行大PK:
5.调整手机大小功能大PK,先上图:
RTS提供的调整大小按钮点一下到最大,再一下就到最小,自己不能设置大小的比率
CMET提供的调整大小是一个滑块,自己可以根据需要选择放大缩小的比率,这点CMET做得智能些;但是目前在放大到最大的情况下有些按钮会挡住屏幕,这些处理下就非常完美了。
6.屏幕截图大PK:
截取屏幕的按钮放置,RTS放到比较醒目的地方,而CMET所放的位置就不那么醒目了,刚开始我还以为CMET没有截取屏幕的功能,后面寻找了一番在发现在那么一个不起眼的角落里面,还好终于找到了,呵呵
RTS当用户点截取屏幕时,弹出窗口显示要截取的屏幕的图像,是否保存由用户而定;CMET当用户点截取屏幕时,直接让用户保存图片,我觉得RTS的做法更胜一筹,也许我看了一下图片不行,我就不保存呢
7.旋转屏幕大PK:
RTS的屏幕旋转只有一个按钮,我们操作只能进行横屏,竖屏切换;CMET在竖屏时,可以让屏幕往左边横,也可以往右边横;这2种方式仁者见仁,智者见智,个人觉得无高下之分
RTS切换到横屏后界面布局就显得有点难看了,没得CMET横屏的界面看起来舒服(个人感觉)
8.操作日志大pk:
RTS与CMET都提供了操作日志功能,从截图一眼就能分出高下了,RTS的操作日志我看得一头雾水,不知所云;CMET的操作日志就显得非常亲民了,一看便知道自己做了啥子,这样的操作日志才是我们需要的东西塞。
9.应用装载大PK:
RTS与CMET都可以在这个界面上传应用,将应用装载到手机上去。
重点来了,RTS上的手机没有安装手机卡的手机也能装载应用,CMET上的手机没有手机卡的手机装载不了应用,这方面CMET还需要改进哦;RTS装载完应用后,自动就安装应用,然后就可以启动测试应用了,CMET装载应用比较折腾,要先发短信到手机上,然后自己到短信中去下载应用,下载完了安装应用,然后才能进行测试,非常折腾;强烈建议CMET在这方面多学学RTS的应用装载,呵呵
10 RTS独门武器之一:清理手机
RTS的独有武器清理手机,可以一键清除你在该手机上所做的所有操作;个人觉得这个功能不错。
11 RTS独门武器之二:更多日志
点击RTS的更多日志,会显示上面的界面,个人觉得这个东西实用价值不大,因为这些操作日志对于我们来说简直就是天书,看不懂,对我们没有帮助,所以个人觉得这个功能不要也罢,摆到这里到觉得画蛇添足
12 RTS独门武器之三:适配测试
RTS的适配测试创建页面
用户可以选择自己要适配的机型
RTS自动执行适配测试,完成后自动生成的适配测试总体报告
RTS适配测试详细信息,针对某款具体的机型的详细情况
RTS适配测试详细信息,针对某款具体的机型的详细情况
RTS适配测试详细信息,针对某款具体的机型的详细情况
RTS的这个独门武器还是比较厉害,你只需上传要进行适配测试的应用,指定要适配的机型。RTS会自动完成该应用在指定机型上的安装,运行,卸载测试,并根据测试的情况生成整体的测试报告和详细的测试报告。
整体报告会告诉你有哪些机型通过了测试,哪些机型没有通过,哪些机型运行有风险等;详细报告会详细说明在某个机型上的具体适配情况,安装是否成功,运行是否成功,协助是否成功;如果运行不成功的话还会截图显示给你。
个人觉得这个功能非常使用,思想非常不错;目前还处于测试版本,我随便上传一个应用试了下,我适配22款机型,整体报告说有15款机型执行了测试,7款没有执行;执行的15款中有2款通过,11款有风险,2款没有通过;而我自己通过查看详细的适配情况是15款机型执行了适配测试,没有任何一款机型适配成功,更奇怪的是说的成功的2款,我进去看了我的应用根本就没有启动运行,目前来看这个独门武器还的确只是beta版本,基本不可用,但思想是好的,值得期待。
13 CMET独门武器之一:声音输出
CMET的独门武器声音输出可以开启声音,也可以关闭声音,对于有些应用必须要发生声音,而且要对发出的声音测试是否正确的话就很有用,比如音频播放工具,视频播放工具,带有音视频功能的应用,要测试游戏中的音乐,音效等,这点CMET考虑非常到位,支持一下。
14 CMET独门武器之二:声音输入
CMET的独门武器声音输入可以开启声音,也可以关闭声音输入,这个功能对于需要测试语音输入的应用非常有用,比如iPhone的Siri智能语音交互 ,基于语音交互的应用 测试工具一定要提供这个工具才能进行测试,这个功能也要支持一下。
15 CMET独门武器之三:设置视频帧数
CMET的设置视频帧数,据说是可以设置每秒从手机传输多少帧图像到客户端,可以根据自己的需要设置视频传输的帧数,具体用途尚不清楚,不妄加评论。
16 CMET独门武器之四:刷新屏幕
CMET的刷新屏幕,我也试了下,点击了不觉得有啥子用途,此功能不加评论。
17 CMET独门武器之五:录制视频
CMET的视频录制功能可谓真真的独门武功,这个功能很多评测已经说的很详细了,我就不多说了,可以参考CshBBrain这位网友的评测报告。我只想说一句,视频录制功能的确非常有用,这个不支持都不行。
18 CMET独门武器之六:录制操作记录
CMET的操作记录录制功能也算得上真真的独门武功,这个功能很多评测已经说的很详细了,我就不多说了,可以参考CshBBrain这位网友的评测报告。这个功能必须支持一下。
19 CMET独门武器之七:编写脚本
脚本编写可谓CMET的独家秘笈了,可以编写脚本,让脚本替测试人员对应用进行回归测试依此提高测试效率,减少测试成本。想在手机上通过脚本进行自动化测试,这个想法很不错,估计也是借鉴了HP的自动化测试工具的一些思想吧。
对于CMET的这个独家秘笈,我倒是很有兴趣倒腾倒腾,呵呵
20.脚本编写:
脚本就写个简单点的嘛,教你拨打119电话,呵呵。逻辑很简单,拨打119电话,打通后挂断即可。
直接上图了,脚本编写的过程我就不写了,有人比我写得更专业,直接上图,上脚本,呵呵
感觉脚本录制还不错,思想不错,但还要进一步改进,此处省去1000字........
最近看到baidu也推出了类似的平台,有时间去看看;应用测试平台真是狼烟四起,诸侯争霸中原,要想知道最后鹿死谁手请持续关注 深度PK,呵呵
版权申明:
以上观点纯属个人观点,如果雷同,纯属巧合!
走过,路过的各位【亲戚,朋友,同学,同事,老师,专家,网友.......】读完该贴后请顺手点击下 下面的[支持,分享,收藏] 按钮吧,谢谢,万分感谢!