APP下载

App测试也众包

2016-11-21张睿

第一财经 2016年43期
关键词:测试者测试用户

张睿

白天上班的时候给公司的产品做测试,晚上下班回家之后给其他公司的产品做测试,这是王子涛过去一年的主要工作内容。

他所在公司测试的产品是数据安全相关的应用,而他在工作之余测试过的产品则涉及电商、医疗、视频等多个领域,超过50个,它们来自云测试服务提供商Testin旗下的Testin众测平台。

王子涛平均每周会在该平台上花费30个小时左右,这为他带来了额外的1000到3000元的收入。“这种比在公司上班自由轻松。”王子涛接受《第一财经周刊》采访时说。

Testin众测提供了这样一种方式—企业发布测试任务,测试者在线上领取任务、执行测试、返回结果,企业评价结果并支付酬劳。

将有测试需求的企业和有测试能力的测试者连接起来,好比滴滴打车既服务了有出行需求的乘客,也提高了私家车司机的收入。Testin众测让企业节约测试成本的同时,让测试者的能力得到了更大的发 挥。

成立于2011年的Testin是国内第一个App云测试平台,它存储在机房中的数量众多的终端设备可以为大大小小的公司提供App远程自动测试服务。这个云端测试主意来自Testin创始人王军。

2006年,王军在即时通讯软件公司Pica为飞信做测试,30多人的团队持续加班三个多月只为确保让飞信能够在不同的机型、不同的网络环境下顺利运行。后来,他和朋友一起研发自动测试技术的模型,获得了三十多项专利。这些技术最终成为Testin业务的基础。

在成立的第二年,Testin拥有1400台各种型号的设备,累计测试了3万个应用。而现在,Testin的终端设备已经超过5万款,覆盖超过4500款机型,分布在北京、广州、香港和旧金山的机房实验室中,已经为国内外200万个App提供了超过1.5亿次测试,其拥有的测试专利技术也已经超过100多项。

在这期间,Testin获得了B轮和C轮融资,其中C轮融资金额超过8490万美元,两轮的投资方包括海银资本、高榕资本以及A轮的投资方IDG资本。

最重要的变化是,Testin将业务从最早的兼容测试扩展至功能测试、远程真机测试、安全测试、崩溃分析、缺陷管理、内测分发等多个环节。其中,功能测试由测试专家以众包的方式参与,这就是Testin在2015年推出的Testin众测平台。目前,Testin众测平台上已经聚集了16万测试者。

“因为移动开发的需求变化快、迭代速度快,自动化的方式是无法完全满足的,这就需要人的参与。”Testin总裁徐琨对《第一财经周刊》说。

在Testin推出众测平台之前,企业的产品测试需求变大的时候,通常有两种解决方式:第一招人,第二找外包公司,但是两种方式的共同问题是无法短时间内找到能力技能匹配的测试者,以及时间和资金成本较 高。

“企业判断测试者的能力判断没有那么准,但我们能筛选合适行业的专业的测试者,跟企业精准匹配,并且短时间内大量招募。”徐琨说。

Testin的优势是先期已经积累了大量测试用户,这些人为其所在的公司以免费或者付费的方式使用Testin的测试工具及服务,当Testin推出众测平台之后,第一步是说服这些人将空余时间贡献出来,为其他公司的产品提供测试。

“测试从业人员在绝大多数公司地位不高,一部分原因是公司对测试不重视,另一部分原因是测试没法考核。”徐琨说,“产品做得好,公司领导的第一反应是开发做得好,产品做的不好,第一反应是测试没做 好。”

第三方招聘网站的数据也能印证这一情况,看准网的数据显示,北京测试工程师的平均月薪为7987元,而iOS和Android开发工程师的平均月薪分别为9251元和1.0103万元。

在徐琨看来,在Testin众测平台上,测试者能够得到更多的尊重和认可。每个测试者做过哪些测试,得到什么样的评价,都会在平台上呈现出来,工作越勤奋、能力越强的测试者能够被分配越多的任务,相应也能获得更多的收入。

对测试者来说另外一个诱人之处是,Testin众测提供了更自由的工作方式,既可以一边上班一边做外部测试,也可以辞职做不受雇于任何公司的自由职业者—只要你在这里的收入能够养活自己。

比如王子涛,他确实考虑过辞职完全为Testin众测工作。但他的担心在于,能够得到的任务量不够多,收入并不稳定。

并不是所有测试者都能加入,他们需要提交简历并且接受考核,测试经验更丰富的会被任命为测试专家。测试专家有各自擅长的行业或领域,如金融、游戏、电商等,他们负责对接用户需求,制定测试计划,招募测试人员,审核测试结果等。

“某社交软件只给了很粗糙的原型图,说明文字都不全就让写5000条用例,并且在很短的时间内交付。”拥有7年测试经验的杨风说,他在Testin众测上测试过大约40个应用。为外部应用测试也并非完全轻松,王子涛也经历过用户测试要求全天配合,晚上上线,他必须通宵配合用户线上测试。

然而说服企业接受众包测试的方式需要花费一些时间和精力。“他们担心测试者不是足够了解他们的产品,不在眼前能不能测好。”徐琨说,“这是一个逐步接受的过程。”用户量还不够大,这是Testin众测上的测试者大都尚以兼职方式参与的原因之一。

毕竟测试与打车还是不一样,企业的决策链更长,对结果要求更高。对此,Testin众测接到企业的测试需求时,会派专人负责对接,了解企业需求,匹配相应专家,并且成立专门负责交付的小组,同测试专家和企业一起确认需求及细节。在服务的初期,Testin会为企业提供免费试用,反复沟通测试计划,最终按照测试效果付费。

“这就是为什么要有销售。”徐琨说,Testin在2014年年底才组建了销售团队,因为公司成立的前三年,测试服务基本都是免费的。2015年开始为企业提供更高级的、定制的测试服务,其中就包括众测平台形式的功能测试。

Testin获得付费用户的方式并不同于传统的销售,因为Testin已经积累了80万的用户,其更多地是通过运营的方式挖掘这些用户的潜在需求。徐琨表示,他们看重的不是免费用户到付费用户的转化比例,而是销售跟进有需求的用户后,最终完成购买的比例。

据徐琨提供的数据,目前Testin用户的平均年付费金额为10万元,如果是由Testin众测平台完成的,80%的收入会支付给测试者。

过去几年间,Testin已经在北京、上海、广州、深圳、杭州、成都、武汉、南京、济南、合肥、香港及硅谷等多地设有服务分支机构。

在众测之外,Testin也开发了多种测试工具,实际上一方面为企业内部测试者使用,另一方面也方便了Testin众测平台上的测试者。比如一个bug提交工具,测试者只需要摇一摇手机就可以自动截图,然后标注、提交后台;还有缺陷管理的平台,可以记录不同版本不同渠道发现的bug,在产品开发者和测试者之间互相反 馈。

在徐琨看来,Testin的目标是做与“测试”相关的产品和服务。从最初真机兼容测试开始,Testin的服务已经能够覆盖App从开发到上线的整个流程。“只要对App的质量有帮助,我们会持续投入,用自动化和工具化解决效率低下的重复劳动;如果另外需要通过人的参与,我们就以众包的方式协调整个社会的测试专业者的资源。”

幸运的是,Testin的成长是伴随着企业服务市场的发展的。IDC发布的一份报告称,中国企业移动服务市场2014年的市场空间为6.85亿美元,其中移动专业服务市场空间为5.45亿美元,移动管理服务市场空间为1.4亿美元,这两个子市场较2013年分别增长25.4%及33.7%。而到2019年,企业移动服务市场规模将达到21.9亿美元。

就像企业不再自己租服务器而是使用亚马逊AWS、阿里云等云服务一样,对很多开发App的企业来说,使用云端测试而不是自己雇人,成为更高效且更省钱的选择—甚至一个测试人员都不需要保留,仅保留一个接口人即可。

“从2013年之后,Testin进入高速增长的过程,这跟移动互联网创业人群增加是分不开的。”徐琨说。在他看来,随着越来越多新产品诞生,相应的测试需求也越来越多,更重要的是,在用户获取成本攀高的情况下,如果因为产品体验差而让好不容易获取的新用户流失掉,对任何企业来说都是难以挽回的损失。

Testin几乎见证了移动互联网每一个热点的兴衰,2011年成立初期,Testin的用户有墨迹天气、唱吧等移动互联网应用;2012年大批移动游戏开始使用Testin做测试;2014年大部分的O2O公司、2015年大部分的互联网金融公司,都曾使用Testin的服务,虽然其中有的现在已经死掉了。

“现在对Testin来说是特别好的机遇。”徐琨对《第一财经周刊》说,因为传统企业正在向互联网转型,“它们对质量要求很高,更愿意把测试交给Testin这样的专业公司来做。”比如麦当劳、可口可乐、永辉超市、兴业银行、梅赛德斯-奔驰等零售、金融、汽车行业的公司都已经成为Testin的用户。

此外,Testin还与ARM、Intel、Google、IBM、微软、阿里巴巴、百度、腾讯、360、乐视、小米以及全球众多的移动互联网生态企业建立了合作沟通关系。

但这些和大公司的合作也存在着不稳定因素。一些国内的互联网巨头也开始进入测试行业,百度、腾讯、阿里巴巴、中国移动相继推出了自己的云测试平台,提供包括兼容测试、功能测试、稳定性测试等在内的测试服务。

徐琨认为公司拥有先发优势,已经占据了市场的领先位置。这可以让Testin在竞争中处在更佳的位置。Testin提供的数据显示,截至2016年8月,根据安卓市场Top10及App Store的统计数据,中国约有220多万款App应用,其中有180万款App曾经或者正在使用Testin的测试服务,涵盖的企业包括互联网企业、金融资本、智能硬件、在线教育、快消商贸、电力能源和传统行业的企业,Testin市场覆盖率超过了80%。

而在移动游戏领域,Testin的市场占有率已经超过90%,主要用户包括:网易游戏、完美世界、蓝港互动、触控科技、龙图游戏、昆仑游戏、乐元素、中国手游 等。

时间和数量上的领先,让Testin能够比竞争对手积累更多的数据,而这些数据反过来能够进一步优化Testin的测试效果。

“更重要的是跟自己赛跑。”徐琨说。围绕测试,这家公司做了一些不一样的事情。但是智能设备越来越多,用户获取互联网服务的方式越来越多,它需要不断突破自己的业务边界。

猜你喜欢

测试者测试用户
幽默大测试
“摄问”测试
搜救犬幼犬挑选测试
“摄问”测试
“摄问”测试
关注用户
关注用户
关注用户
如何获取一亿海外用户
很多英国人不会拼常用词