解读TB手游测试报告:来自客户,服务客户
近日,成都美萌科技在TestBird手游自动化云测试平台对其新品手游《HI·ELLEN》进行了测试。TestBird为其反馈了详尽的评测报告,报告中清晰地定位和展现了该款手游目前在测试中发现的问题,引起了美萌科技的高度重视,CEO尹训宇携开发人员亲自登门造访TestBird。

双方沟通中,美萌详细记录和分析了TestBird评测报告中的每一条结果,TestBird凭借丰富的测试经验,逐条为其提供专业的修改意见。美萌科技CEO尹训宇向TestBird表示:“通过测试报告,TestBird手游测试平台的专业度一目了然,快速的反馈和专业意见,为我们下一步改进产品提供了很好的帮助,确实对CP的帮助很大。”
TestBird手游自动化云测试平台已经针对1300多位客户和2600多款产品进行了测试,为了让测试更精准专业,测试报告更能贴合客户需求,TestBird一直秉持着“一切以客户为中心”的原则,每次测试后都会积极询问客户的意见,正所谓“来自客户,服务客户”。如今,能令以美萌科技为代表的诸多CP们感到专业、满意和惊叹的TestBird手游评测报告,正是TestBird汲取客户意见,不断改进优化而来。那么,TestBird手游测试报告到底是如何不断优化自身,并更好地帮助CP的?今天,我们就来揭开其“庐山真面目”。
TestBird手游兼容性测试报告的评分方式兼容性评分和性能评分两部分,通过加权计算出总分,第一页是测试报告的概要信息。可以看到本款游戏在平台上的整体表现,测试调用的机型数量,覆盖人数的具体情况。同时使用者还能看到整体行业指标与自身产品的对比,这里面包括启动、安装、新手引导等情况。
值得注意的是,TestBird工程师在与合作CP的工程师进行沟通后,发现他们很关注行业最优指标和行业平均指标,因此我们在测试报告中加入了这一参考项。

以下可以看到TestBird能够针对游戏进行深入到内部的流量、启动时延、CPU占用率、内存占用、IO等待率、温度等监控,同时还有兼容性测试过程中各个兼容性问题的分布情况。通过这里可以看出,新手引导阶段出现大量游戏闪退,那么作为CP就要优先解决这个问题。
另外,在新的测试报告里我们还根据CP的需求增加了游戏连接异常和程序异常等兼容性异常报告项内容,可以更好地结合其他内容进行分析。

以下这里可以看到游戏整体在终端上的流量、启动时延、CPU占用率的整体情况。右侧这个TOP5的排行也是TestBird工程师与CP工程师们长期沟通完善出来的,需要注意到本款游戏在索尼s55u上启动时延很长,因此CP可以关注这款设备的适配。而在华为C8650上的CPU占用率则很高,这款设备的优化就显得更重要了。

内存占用也是CP最关注的一个问题,IO等待率和温度控制也是不少厂商关注的。有时CP会关注测试游戏在各品牌、各价格档位终端上的表现情况,我们提供了各种手机品牌、屏幕、系统和CPU等分类板块,适合CP结合自身靶向目标进行选择性优化。
测试报告还有诸如:不兼容终端、待优化终端和通过终端的汇总。点击对应终端可以跳转链接至对应终端日志页面。对应页面中有整个测试过程的截图与完整的逻辑日志,透过这样图文并貌的方式帮助CP定位问题。

最后,TestBird期望有更多的客户向其提供反馈建议,这些反馈信息将会被记录下来形成行业经验,同时TestBird也将不断优化报告,未来将能够手游行业同仁提供更精准的手游测试服务。