测试2万多个APP后，一群创业前华为人看穿了你的手机

11月18日，第五届全球游戏开发者大会将在成都举行，除了说严肃的业界话题，据说期间400多位手游圈精英还将在九眼桥一起喝酒唠嗑撸烤串，这么好玩的事儿，正是成都的TestBird在推动。

可以说，TestBird是前华为员工创业帮中非常引人注目的一个项目。从最初2名员工、50部测试手机、2间小办公室开始踏上艰辛的创业之路，如今走过3年，TestBird已占据国内手游测试市场百分之七十的份额；TestBird在全国推行手游自动化测试，把该领域从空白市场做到行业普及。

在位于成都天府软件园C区TestBird的测试机房内，你会看到这样的场景：数百部不同型号的智能手机正在对一款即将上线的新手游进行兼容性测试。不需要人工操作，这些手机会按照预先设定好的脚本，自动运行游戏，并对中途出现的闪退、黑屏、卡机等问题进行自动记录，以帮助开发商提高游戏的流畅度。

从华为前GSM研发总裁走向自主创业的TestBirdCEO李伟说，“当下国内手游企业已经普及了测试业务，手游上线前基本都会做这项测试，国内做过这项测试的手游，超过两万款。”

目前国内的测试人员虽然多，群体却比较混杂，没有清晰的体系。从去年6月开始，TestBird逐步在全国组织起4万多测试人员，让他们在全国各地接单，按要求完成测试任务。下一步TestBird将根据工作经验和质量，对这些测试人员分级、归类。就好比‘滴滴打车’先把司机培养起来。这些准备工作，正是考虑到未来的众包测试平台，要成为让普通人也能登录操作的平台。

天府软件园新锐创业企业CEO专访——TestBirdCEO李伟

种子用户如何获取？

不过，在3年前测试对于中国的手游企业还是个很陌生的概念。

2013年，在华为工作了14年，李伟决定离职创业，他与同是华为出身有14年测试经验的邓飞,一起从上海回到了成都,在成都天府软件园成立了TestBird，推出手游自动化测试服务。这两人曾一起打了10余年乒乓球,彼此风格都很熟悉。

彼时正值中国的手游“元年”，各类手游呈现井喷态势。2013年上半年中国移动游戏市场达到50.13亿元规模，增长率达66.1%，创历史新高，当年底国内的手游企业已达近2万家。可在李伟看来，一片红火的手游市场里，手游自动化测试基本还属于“盲区”。

“那时的测试都是人工操作，要花费很长时间，还需要购买大量机型，一般的企业根本是有心无力，往往都是让员工自己拿十几二十部手机，人工‘跑’一遍了事。”李伟回忆。

因为业内对手游测试的普遍不重视，TestBird推出自动化测试业务前半年，一共只接到十几家客户，每次业务推广都相当于一次启蒙宣传。“我们带着企业深入到测试现场，观摩真实的自动化测试场面，一步一步把兼容性测试的重要性和必要性宣导出来，让大家认识到手游测试是产品上线前必不可少的一环。”

培养市场这件事一直做到2014年下半年，效应凸显，手游领域对测试的需求如排山倒海般扑来。

手游自动化测试变成刚需了吗？

根据TestBird统计，一款手游因早期兼容性等问题导致的用户流失率高达30%，这对游戏公司意味着几十万甚至几百万的损失。提前做测试，其实就是帮助手游公司减少用户流失，降低损失。

越来越多的手游企业认识到测试的意义所在。李伟说，“国内手游竞争激烈，玩家的忠诚度比较低，一款游戏如果运行不流畅老出问题，玩家很快就会把注意力转向其他游戏。”

以TestBird为例，一款手游在上线前可以在这里做的测试业务，可以涵盖兼容性测试、功能测试、压力测试、BUG探索等等。

国内一些手游发行公司已经对开发商提出硬性要求：新手游必须要做过兼容性测试达到80分、甚至90分以上，才能获准发行。这意味着，开发商要想让手游顺利上线，就必须先通过测试。

此外，一些渠道商也会在游戏评级中，将兼容性测试分数作为重要参考，测试数据在某种程度上扮演了行业标准的角色，

在李伟看来，“以前国内对于新推出的手游，没有一个硬性的质量门槛，现在测试数据则能够相对客观的体现游戏的质量。”

如今，TestBird在国内手游测试市场的份额占到百分之七十，合作的游戏公司达到1万多家，测试过的手游已有2万多款。其背后，正是国内手游测试行业的快速成熟，3年的时间里，手游测试已经从市场空白区变成了行业刚需。

APP功能测试领域发现了哪些问题？

2015年6月，TestBird宣布向APP功能测试领域拓展。转型后的感觉就像从一间小屋子突然走进了广阔的天地。

近年国内诞生了数以百万计的APP应用，对比较为成熟的手游自动化测试市场，APP在功能自动化测试这块仍很弱，大部分公司并不具备较强测试的能力，“现在的情况，跟3年前的手游自动化测试市场非常像，我们要做的事也一样。”李伟说。

与手游测试不同，APP测试主要集中在功能方面，因为涉及的领域五花八门，所以每款APP可能都会有些特殊的测试要求。比如有的可能要求测试地图导航功能，有的则要求测试不同信号环境下的运行状况。

为了满足这些个性化需求，今年4月，TestBird推出了自动化测试云手机平台，“客户公司的测试人员可以自己登录这个平台，借助上面的工具自主做测试。”李伟说，如今这个平台已经吸引了几百家APP企业用户，未来的规模还会进一步扩大。

根据《2016年上半年APP测试白皮书》，TestBird测试了20806款APP，涵盖了“系统工具、通讯社交、影音视听、新闻阅读、生活休闲、办公商务、摄影摄像、购物优惠、地图旅游、教育学习、金融理财、健康医疗、游戏娱乐以及其他”14类应用。

其中，总共发现864578个问题，在14类应用中，地图旅游、游戏娱乐两种类型的APP平均问题检出数量最多。

在各类兼容性问题分析中，白皮书统计显示闪退、UI异常、程序异常是兼容性问题占比最高的3大类问题，其中闪退问题占比最高，达到51.65%。

在功能性问题的研发上，白皮书的分析显示，有1/4的问题都发生在注册登录模块，重点体现为第三方账号登录失败。从问题的严重程度上来看，大量的Bug中，会影响到用户正常操作的A、B、C级问题合计将近80%，所以功能测试问题需要引起开发者的高度重视。

李伟判断，APP正在成为国内很多企业新的业务重心和收入来源，未来企业在APP上的投入会越来越大，特别是银行、证券业以及大型国有企业对APP自动化测试的需求非常大。

探索智能硬件测试和众包测试

李伟认为，未来的移动应用测试将是一个开放的、双向选择的市场，分工也会更加规范、细化。

众包测试将是今后的主要趋势，与国外需要测试人员具备编程能力不同，李伟认为国内的众包测试平台可以适当降低门槛，让更多的不懂编程的人也能借助自动化工具操作测试，以进一步降低人力成本，提高生产效率。“未来人们可以自己去平台上发布测试任务，测试人员就在平台上自由接单。就跟‘滴滴打车’一样。目前国外已经有公司做的比较成熟，国内还在起步阶段。”

目前，智能硬件市场也开始成为测试领域的新用户。TestBird已经向多家智能硬件企业提供了测试服务，涉及运动手环、健康检查仪器、VR设备等等，目前主要在基础功能、稳定性和兼容性测试阶段。

《2016年上半年APP测试白皮书》白皮书总结了TestBird上半年测试过151款智能硬件的经验，专门就智能硬件测试进行了系统的分析。白皮书将智能硬件分为智能穿戴设备，智能家居，健康医疗，车联网，人工智能，运动休闲，影音娱乐和其他8个类别，其中智能家居市场占比最多，达到22.15%。

智能硬件的质量问题也比较突出，上半年TestBird在智能硬件上一共发现了15925个问题，平均每款智能硬件问题数量达到105个以上，其中还发现，硬件本身问题占比是最少的，反而软硬件链接问题最多，这无疑需要引起广大智能硬件厂商的注意和重视。

李伟称：“使用体验测试将是下一阶段，预计到明年下半年，就会有产品开展这方面的测试。”

天虎科技 罗曙驰

您也可以关注我们的官方微信公众号（ID：ctoutiao），给您更多好看的内容。