涂蘭敬
這是一個真實的場景。2014年圣誕節(jié)前夜,某位男士在晚上11點多準備約一輛專車回家。他一只手抱著一個大箱子,另一只手艱難地掏出iPhone 6 Plus點擊某專車的APP,結(jié)果一打開就崩潰了,連續(xù)多次都是如此之后,他不得不選擇其他方式打車。最后,余怒未消的這位男士忍不住在微信朋友圈里吐槽了這款A(yù)PP。
這是Testin云測CEO王軍在微信朋友圈里看到的真實一幕,這也更加堅定了他的信念——打造一個專注于移動APP的專業(yè)測試平臺——Testin眾測(Crowdsourced testing,眾包測試)。
事實上,早在2006 年 6 月,《連線》主編杰夫·豪在《眾包的崛起》一文中創(chuàng)造了“眾包”這個術(shù)語之后,眾包就被業(yè)界應(yīng)用在各個領(lǐng)域。
初創(chuàng)企業(yè)更需要眾測
事實上,文章開篇那位男士吐槽的問題在很多移動APP上都出現(xiàn)過。Testin云測CTO徐琨表示,移動APP開發(fā)的一個特點就是周期短,一般情況下是兩周一個新版本,只要主要功能沒有問題就會選擇上線。兩周一個迭代周期,開發(fā)者僅在開發(fā)上就要用掉五六天,根本沒有時間做較為全面的測試。
微微拼車CTO張鵬表示,移動APP對使用場景的條件要求都很高,特別是當這款A(yù)PP涉及支付環(huán)節(jié)時。簡單的內(nèi)部測試環(huán)境無法過濾掉全部問題。當用戶在較為復(fù)雜的網(wǎng)絡(luò)環(huán)境中打開APP時,往往會遭遇APP崩潰的尷尬。為了解決這個問題,微微拼車的做法是實時監(jiān)控每個APP,一旦用戶在支付環(huán)節(jié)出現(xiàn)問題,客服中心將第一時間得到通知。隨后,客服將致電用戶幫助其解決問題,造成損失的甚至?xí)o予補償。
王軍表示,移動APP的用戶體驗出問題時,不一定是APP本身的問題,有可能因為不同地區(qū)的CDN或網(wǎng)絡(luò)和服務(wù)等問題。特別是當一個知名品牌的新機型或移動APP的新版發(fā)布時,其中潛伏的問題就更多。
對用戶來說,微微拼車從用戶體驗角度出發(fā)的做法非常值得推崇。但是,如果一款用戶數(shù)達百萬甚至千萬級的移動APP發(fā)生系統(tǒng)崩潰時,客服中心還能應(yīng)付得了嗎?因此,可以說,客服中心只能作為解決用戶問題的最后一道防線,而最好的解決方案是把問題消滅在事故發(fā)生前。
對于初創(chuàng)企業(yè)來說,如何在無需太高成本的前提下,還能發(fā)動位于不同地區(qū)、不同網(wǎng)絡(luò)環(huán)境的測試高手為自己的移動APP做一次較為全面的測試呢?現(xiàn)在來看,只有這種眾包的測試平臺才能保證測試場景的豐富性,才能充分兼顧不同設(shè)備型號、不同無線信號、不同地理環(huán)境等差異較大的應(yīng)用場景。
2015年初,Testin云測憑借4年來匯集的中國頂尖的測試專家和測試經(jīng)驗推出了Testin眾測平臺。
Testin云測有三大核心業(yè)務(wù):APP的自動化真機云測試、專家眾測和應(yīng)用崩潰分析。Testin云測能夠為移動APP和游戲的開發(fā)者提供不可或缺的移動APP質(zhì)量保證,解決移動終端碎片化的問題,確保APP的超高兼容性、性能和穩(wěn)定性等。
以往,Testin云測所做的一系列安全和質(zhì)量測試大都基于一些大中型企業(yè)的需求,因為這些企業(yè)有足夠的資金為測試服務(wù)付費。不過,正如王軍在文章開篇中那個真實場景中發(fā)現(xiàn)的,一些初創(chuàng)企業(yè)對于APP測試服務(wù)的需求反而更為迫切。原因很簡單,大多數(shù)初創(chuàng)企業(yè)沒有足夠的人力和財力組建測試團隊,即便擁有測試人員也無法獲得如Testin云測這樣專業(yè)的測試環(huán)境和這么多的測試專家。
因此,Testin眾測平臺希望解決兩個方面的問題:一方面消除初創(chuàng)企業(yè)缺少專業(yè)APP測試團隊的痛點,另一方面可以更加高效地利用Testin云測平臺上一些閑散的測試專家資源。
與Testin眾測平臺同時上線的還有一項活動——面向移動APP的質(zhì)量挑戰(zhàn)賽。該挑戰(zhàn)賽對開發(fā)者提交的APP進行為期一個月、馬拉松式的Bug探索。Testin眾測預(yù)設(shè)上百萬元的獎金,最終沒有被搜索出Bug的APP開發(fā)者,將獲得雙倍于測試費用的獎勵。
Testin專注于移動APP的眾測
以眾測方式提供測試服務(wù)的平臺,Testin眾測并非第一家。繼烏云眾測推出之后,2014年初露鋒芒的漏洞盒子和Sobug兩個安全眾測平臺,一經(jīng)發(fā)布就吸引了眾多測試專家注冊和VC的關(guān)注,也迎來了國內(nèi)一些知名互聯(lián)網(wǎng)公司的戰(zhàn)略合作。
而與Testin有類似業(yè)務(wù)的一家國外眾測公司UTest,目前已經(jīng)在全球200多個國家擁有15萬個測試專家,并在2014年初獲得了4300萬美元的第5輪融資。而2011年成立的Testin云測,綜合這幾年的表現(xiàn)來看已經(jīng)有趕超UTest的趨勢。
記者從Testin云測的官方了解到,三年的時間內(nèi),Testin云測分別在北京、上海、深圳、廣州、成都、香港和紐約等國內(nèi)外的大都市設(shè)立了服務(wù)機構(gòu),先后獲得了兩輪IDG和高榕數(shù)千萬美元的投資。
在業(yè)務(wù)層面上,Testin云測匯聚了超過10萬名國內(nèi)移動互聯(lián)網(wǎng)頂尖的測試和QA專家,持續(xù)服務(wù)的客戶包括騰訊、阿里、百度,幾乎全部手游上市公司和一線開發(fā)、發(fā)行商,以及眾多移動電商、移動金融和O2O 等超過33萬開發(fā)者,為超過75萬個APP進行了超過7800萬次的測試。在戰(zhàn)略層面上,Testin云測同時與ARM、英特爾、微軟、谷歌、IBM等全球生態(tài)鏈巨頭建立了密切的戰(zhàn)略合作關(guān)系。
相比較UTest公司上下游的眾測業(yè)務(wù)都做,王軍表示,Testin眾測目前只想專注于移動APP的眾測?!秾W⒌牧α俊芬粫性赋觯狈W⑹侨藗冊馐苁〉淖畲笤?。因此,記者認為Testin眾測的這個抉擇還是非常明智的,因為只有專注在APP才能匯聚Testin眾測的所有優(yōu)勢資源,才更容易在眾測行業(yè)里做到出類拔萃。
王軍對APP的未來也有自己的認識。他認為,APP一方面是一種營銷沉淀的互補,另一方面未來將成為一個平臺。王軍的理由是,平臺大了就有垂直的機會,垂直做深了以后又會成為一個平臺。因此,APP的機會很大,而這也是移動互聯(lián)網(wǎng)創(chuàng)業(yè)的魅力所在。
Testin怎樣玩轉(zhuǎn)眾測
一段時間來,業(yè)界對眾測到底是該注重“質(zhì)”還是該注重“量”存在一些爭論,但是顯然,Testin眾測認為,眾測最核心的問題是保證項目的質(zhì)量。那么,Testin眾測將怎么玩轉(zhuǎn)眾測呢?
在Testin眾測平臺上,客戶發(fā)起眾測請求和需求,測試員在規(guī)定時間內(nèi)完成測試任務(wù)并提交測試報告,同時,Testin眾測在客戶和測試員之間設(shè)置了一個測試項目經(jīng)理的崗位來監(jiān)控測試結(jié)果。
徐琨認為,測試項目經(jīng)理是Testin眾測的核心。在客戶提交了一個眾測項目需求之后,測試項目經(jīng)理要對項目做出判斷:這是一個什么類型的測試項目、怎么測試、哪些測試員適合做測試、是否需要升級測試等。因此,Testin眾測在很大程度上解決了一些企業(yè)不同階段面臨的不同測試需求。
在接到測試員的測試報告之后,測試項目經(jīng)理要驗證其中的Bug是否真實存在、是否正確、是否漏報Bug、是否超時等,而且如果有多個測試員共同發(fā)現(xiàn)一個Bug時,要確定誰是最先的發(fā)現(xiàn)者。因此,徐琨認為,測試項目經(jīng)理的職位將一直存在,因為最后只有他才能確保測試的質(zhì)量。
對于測試員來說,Testin眾測會給出明確的測試規(guī)則和透明的評判標準,還會將測試員劃分為高中低不同檔次,并且公開發(fā)布每位測試員的成績排名。徐琨表示,這就好像淘寶上的搜索排名,排名越高,測試員接到的測試項目越多,收益也越高。排名經(jīng)常靠后的測試員不僅掙不到錢,甚至還有被淘汰的危機。
很明顯,不同技術(shù)和業(yè)務(wù)背景的測試員,他們測試同一項目的熟練程度和所需時間肯定是不同的。因此,為更好地服務(wù)于不同行業(yè)客戶的測試項目,Testin眾測還會按照測試員的背景和擅長的業(yè)務(wù),為測試項目量體裁衣地選派相關(guān)背景的測試員。
在王軍看來,Testin眾測平臺已經(jīng)運行3年時間,斥資3000萬元,只不過這些服務(wù)以往僅面向高端企業(yè)開發(fā)者提供。王軍表示,2015年,Testin眾測將再補貼3000萬元幫開發(fā)者發(fā)現(xiàn)更多的APP質(zhì)量缺陷,為APP創(chuàng)業(yè)者建立更完善的質(zhì)量體系。