手機(jī)終端測(cè)試團(tuán)隊(duì)管理改進(jìn)和組織轉(zhuǎn)型

1、手機(jī)終端測(cè)試團(tuán)隊(duì)管理改進(jìn)和組織轉(zhuǎn)型摘要案例簡(jiǎn)述及目標(biāo)案例實(shí)踐待改進(jìn)方面經(jīng)驗(yàn)總結(jié)注：本文中的測(cè)試指的是系統(tǒng)測(cè)試，不包括開(kāi)發(fā)部門(mén)內(nèi)的自測(cè)和集成測(cè)試。注：本文中的測(cè)試指的是系統(tǒng)測(cè)試，不包括開(kāi)發(fā)部門(mén)內(nèi)的自測(cè)和集成測(cè)試。 手機(jī)終端測(cè)試團(tuán)隊(duì)管理改進(jìn)和組織轉(zhuǎn)型a) 案例簡(jiǎn)述： 幾百人的軟件測(cè)試團(tuán)隊(duì)，每年承擔(dān)五十款以上手機(jī)項(xiàng)目的測(cè)試工作，同時(shí)對(duì)接多個(gè)研發(fā)中心，有國(guó)內(nèi)和海外產(chǎn)品，有自研和ODM項(xiàng)目，人員流動(dòng)性大，需持續(xù)提高專業(yè)化測(cè)試能力，同時(shí)面臨向互聯(lián)網(wǎng)模式轉(zhuǎn)型的壓力，種種情況下，如何從管理的角度來(lái)保證成功轉(zhuǎn)型和組織高效運(yùn)行？ 本案例介紹了在測(cè)試團(tuán)隊(duì)組織轉(zhuǎn)型和管理改進(jìn)方面的一些實(shí)踐，包括擁抱互聯(lián)網(wǎng)，變產(chǎn)品經(jīng)營(yíng)為

2、用戶經(jīng)營(yíng)，建立人員發(fā)展“三通道”，留住關(guān)鍵人才，按照領(lǐng)域進(jìn)行專業(yè)化建設(shè)，與各研發(fā)中心合作組建當(dāng)?shù)販y(cè)試團(tuán)隊(duì)及對(duì)其進(jìn)行統(tǒng)一要求，與公司內(nèi)外組織合作保障軟件質(zhì)量等。b)當(dāng)初啟動(dòng)此案例時(shí)（或?qū)嵤┖螅┻_(dá)到的目標(biāo)：建立吸引力強(qiáng)的測(cè)試人員發(fā)展通道，留住關(guān)鍵人員，打造規(guī)模伸縮靈活的團(tuán)隊(duì)；有一套機(jī)制來(lái)保證持續(xù)提升測(cè)試專業(yè)化水平；結(jié)合各研發(fā)中心的項(xiàng)目，優(yōu)化配置測(cè)試資源；積極探索互聯(lián)網(wǎng)模式下的測(cè)試團(tuán)隊(duì)發(fā)展之路。實(shí)踐理念l 保持開(kāi)放協(xié)作的精神，積極用互聯(lián)網(wǎng)思維引導(dǎo)和改造測(cè)試團(tuán)隊(duì)，與內(nèi)外部組織合作共同保證軟件質(zhì)量；l 建立機(jī)制保證持續(xù)提升測(cè)試專業(yè)化水平，著力進(jìn)行實(shí)驗(yàn)室和自動(dòng)化測(cè)試建設(shè)；l 給測(cè)試人員清晰的職業(yè)發(fā)展通道；

3、l 堅(jiān)持精細(xì)化運(yùn)營(yíng)，量化管理。實(shí)踐1.1 產(chǎn)品經(jīng)營(yíng)轉(zhuǎn)為用戶經(jīng)營(yíng)，測(cè)試團(tuán)隊(duì)需要扮演急先鋒l 傳統(tǒng)企業(yè)互聯(lián)網(wǎng)轉(zhuǎn)型，特別是傳統(tǒng)手機(jī)制造企業(yè)，已迫在眉睫，但過(guò)程結(jié)果充滿變數(shù)和不確定。l 互聯(lián)網(wǎng)思維的本質(zhì)是服務(wù)，手機(jī)廠家過(guò)去是研發(fā)銷售硬件產(chǎn)品，多講參數(shù)，互聯(lián)網(wǎng)化就是把產(chǎn)品經(jīng)營(yíng)轉(zhuǎn)為用戶經(jīng)營(yíng)，多講用戶喜歡的事情。（請(qǐng)注意，這里是“用戶”而不是“客戶”）。以前把手機(jī)賣(mài)給用戶基本就是運(yùn)營(yíng)的結(jié)束，現(xiàn)在必須轉(zhuǎn)化為這才剛剛開(kāi)始，價(jià)值鏈延后和拉長(zhǎng)。l 研發(fā)人員全員服務(wù)，全員營(yíng)銷，能不能不花錢(qián)拉來(lái)大量（鐵桿）用戶？l 測(cè)試團(tuán)隊(duì)在這一轉(zhuǎn)型中具有優(yōu)勢(shì)，因?yàn)橄到y(tǒng)測(cè)試就是從最終用戶的角度來(lái)進(jìn)行，多數(shù)都是User Scenario

4、。在與用戶的互動(dòng)（應(yīng)答，線上線下溝通，反饋等方面）要做急先鋒。l “其實(shí)只有很少的用戶知道你的新功能”，測(cè)試團(tuán)隊(duì)承擔(dān)對(duì)新功能宣傳的責(zé)任。實(shí)踐1.2 把傾聽(tīng)用戶聲音變成一種機(jī)制，把用戶滿意度變成測(cè)試人員KPI之一 l 現(xiàn)在時(shí)髦的說(shuō)法是不要KPI，但應(yīng)該不是不要，而是要調(diào)整。l “先進(jìn)用戶引導(dǎo)型創(chuàng)新”是對(duì)開(kāi)發(fā)測(cè)試模式的一種重大改變，把與“先進(jìn)用戶”的互動(dòng)（應(yīng)答率，解決率，測(cè)試用例轉(zhuǎn)化率等）作為部分測(cè)試人員的考核。l “精品”與“機(jī)海”，對(duì)于“機(jī)?！睉?zhàn)略的企業(yè)，產(chǎn)品很多，用戶分類也很多，創(chuàng)建一個(gè)機(jī)制收集用戶反饋，激勵(lì)用戶發(fā)言，增強(qiáng)“黏性”。測(cè)試團(tuán)隊(duì)承擔(dān)著篩選和分類的重要前端職責(zé)。l 前期必須參與用戶

5、互動(dòng)的主要是測(cè)試代表和各領(lǐng)域測(cè)試專員，同時(shí)鼓勵(lì)其他人員，后期就是要求測(cè)試團(tuán)隊(duì)全員加入，全員考核。l 可以考慮將“人均發(fā)展和維護(hù)多少有效用戶”類似指標(biāo)作為測(cè)試團(tuán)隊(duì)的考核項(xiàng)。實(shí)踐1.3 一個(gè)星期升級(jí)一次版本，測(cè)試如何滿足要求 l 手機(jī)終端的一輪全面測(cè)試要幾千條用例+幾十個(gè)專項(xiàng)報(bào)告+探索型測(cè)試。l 軟件版本分為正式和體驗(yàn)版本，正式版本要充分保證質(zhì)量，體驗(yàn)版本主要針對(duì)修改點(diǎn)，要求Release Notes一定要準(zhǔn)確清楚（針對(duì)性測(cè)試對(duì)開(kāi)發(fā)人員質(zhì)量控制的能力要求很高，F(xiàn)ix一個(gè)Bug如何控制不引入一個(gè)新的，特別是看起來(lái)與之無(wú)關(guān)模塊的問(wèn)題？）。l 自動(dòng)化測(cè)試保證質(zhì)量，測(cè)試永不停。自動(dòng)化冒煙測(cè)試基本功能自動(dòng)化

6、測(cè)試專項(xiàng)自動(dòng)化測(cè)試（幾十個(gè)專項(xiàng)）第三方APK兼容測(cè)試壓力測(cè)試MTBF&MTTF，老化測(cè)試功耗自動(dòng)化測(cè)試實(shí)踐1.4 用戶體驗(yàn)的問(wèn)題如何能被開(kāi)發(fā)接受并Fixl 測(cè)試團(tuán)隊(duì)的追求目標(biāo)：質(zhì)量0事故+超高用戶體驗(yàn)。l 多數(shù)手機(jī)廠家存在的共同問(wèn)題，測(cè)試團(tuán)隊(duì)有用戶體驗(yàn)的測(cè)試，提了幾十個(gè)Bug，能被開(kāi)發(fā)接受并修改的區(qū)區(qū)幾個(gè)，需求沒(méi)有寫(xiě)明就不會(huì)改“work as design”。l 坦率的說(shuō)，測(cè)試人員在私下與開(kāi)發(fā)人員溝通體驗(yàn)問(wèn)題，能被接受的只是少數(shù)，短期內(nèi)解決此問(wèn)題要靠升級(jí)，我們建立了一個(gè)會(huì)議，測(cè)試和開(kāi)發(fā)的各部門(mén)領(lǐng)導(dǎo)都在，第一個(gè)議題就是過(guò)本周測(cè)試提的體驗(yàn)性問(wèn)題，會(huì)議上決定了開(kāi)發(fā)人員就必須修改，但半年也就解

7、決了100個(gè)左右體驗(yàn)性Bug。l 中長(zhǎng)期看，如果能從產(chǎn)品經(jīng)營(yíng)轉(zhuǎn)變?yōu)橛脩艚?jīng)營(yíng)，開(kāi)發(fā)和測(cè)試都將建立很強(qiáng)的用戶體驗(yàn)意識(shí)，此問(wèn)題將迎刃而解。實(shí)踐1.5 測(cè)試人員發(fā)展三通道l測(cè)試團(tuán)隊(duì)人數(shù)眾多，流失率高，出于成本的控制，會(huì)招聘較多學(xué)歷低，工作經(jīng)驗(yàn)少的同事或者是實(shí)習(xí)生，所以手機(jī)終端測(cè)試團(tuán)隊(duì)必須要形成核心團(tuán)隊(duì)+執(zhí)行者的模式。l如何留住關(guān)鍵人員，給大家一個(gè)看得見(jiàn)摸得著的方向？建立測(cè)試人員的發(fā)展三通道，在技術(shù)，項(xiàng)目管理和職能管理各個(gè)方向都有上升空間。l在技術(shù)和項(xiàng)目管理方向，可以做到和測(cè)試總監(jiān)同樣的級(jí)別，我們需要更多的技術(shù)尖子和優(yōu)秀的測(cè)試代表，不鼓勵(lì)大家都往職能管理方向發(fā)展，相對(duì)來(lái)說(shuō)，職能管理是一個(gè)“風(fēng)險(xiǎn)更高”的職

8、業(yè)。實(shí)踐1.6 專業(yè)化軟件測(cè)試必然需要大力發(fā)展實(shí)驗(yàn)室軟件測(cè)試實(shí)驗(yàn)室CTS實(shí)驗(yàn)室實(shí)驗(yàn)室名稱實(shí)驗(yàn)室功能自動(dòng)化實(shí)驗(yàn)室IOT實(shí)驗(yàn)室功耗測(cè)試實(shí)驗(yàn)室性能測(cè)試實(shí)驗(yàn)室應(yīng)用測(cè)試中心ATC信號(hào)控制實(shí)驗(yàn)室SIM卡、SD卡、藍(lán)牙、NFC、手環(huán)、刷卡器等兼容測(cè)試各項(xiàng)目的功耗測(cè)試版本冒煙、整機(jī)性能、壓力等自動(dòng)化測(cè)試響應(yīng)時(shí)間測(cè)試WIFI兼容測(cè)試照相機(jī)效果評(píng)測(cè)針對(duì)APK的自動(dòng)化測(cè)試（基本功能）模擬外場(chǎng)各種信號(hào)下測(cè)試Google認(rèn)證測(cè)試照相機(jī)、LCD、媒體播放、流媒體評(píng)測(cè)WIFI兼容實(shí)驗(yàn)室多媒體評(píng)測(cè)實(shí)驗(yàn)室光學(xué)實(shí)驗(yàn)室實(shí)踐1.7 優(yōu)化測(cè)試資源配置l 手機(jī)終端測(cè)試團(tuán)隊(duì)一般有兩種組織方式，按照項(xiàng)目（一個(gè)項(xiàng)目的所有領(lǐng)域都由一個(gè)團(tuán)隊(duì)從頭到

9、尾負(fù)責(zé)）或領(lǐng)域（所有項(xiàng)目的該領(lǐng)域都由一個(gè)固定團(tuán)隊(duì)完成），各有優(yōu)缺點(diǎn)。個(gè)人體會(huì)應(yīng)該是混合式但以按項(xiàng)目組織為主，即抽出實(shí)驗(yàn)室部分和其他少量平臺(tái)測(cè)試，剩下的主要由項(xiàng)目團(tuán)隊(duì)完成，這樣總體效率較高。l 研發(fā)體系一般都包括幾個(gè)外地研發(fā)中心甚至海外研究所，在當(dāng)?shù)赝ǔ６加袦y(cè)試部門(mén)，歸屬于總部測(cè)試和當(dāng)?shù)匮芯克木仃囀焦芾恚瑐€(gè)人體會(huì)總部測(cè)試要發(fā)揮更強(qiáng)的管理作用，測(cè)試用例、專項(xiàng)報(bào)告的調(diào)整，測(cè)試環(huán)境，技術(shù)和設(shè)備的變化等都可以無(wú)延遲的推廣到各地測(cè)試部門(mén)，在測(cè)試覆蓋等方面始終保持整體一致，從而減少質(zhì)量事故的發(fā)生同時(shí)能發(fā)揮靠近當(dāng)?shù)亻_(kāi)發(fā)團(tuán)隊(duì)的優(yōu)勢(shì)。l 對(duì)于“機(jī)?！辈呗缘氖謾C(jī)廠家，測(cè)試對(duì)于推動(dòng)平臺(tái)問(wèn)題（即多產(chǎn)品都具有的Bug）

10、的解決具有優(yōu)勢(shì)，但前提是測(cè)試也要有自己的平臺(tái)人員（領(lǐng)域測(cè)試專員），一個(gè)產(chǎn)品出現(xiàn)有一定典型性的問(wèn)題，馬上推到所有項(xiàng)目上復(fù)現(xiàn)，匯總后反向推動(dòng)開(kāi)發(fā)，可使此類Bug迅速得到平臺(tái)化解決。實(shí)踐 1.8 合作共贏l IOS和Android為何生態(tài)系統(tǒng)良好？前提是他們對(duì)外開(kāi)放接口，測(cè)試團(tuán)隊(duì)要把自己“Open”出去，對(duì)外透明，大家清楚你在做什么，對(duì)他們形成吸引的時(shí)候自然會(huì)依附過(guò)來(lái)?！癘pen”還意味著要有一個(gè)開(kāi)放的心態(tài)，不能相關(guān)方反饋你一些負(fù)面的東西或者要求你做出一些不舒服的改變時(shí)，就先蜷縮起來(lái)，盡力維護(hù)短期對(duì)己有利但向前看無(wú)法維護(hù)的框架。與生態(tài)系統(tǒng)之間主要是合作，斗爭(zhēng)和規(guī)范也是為了更好的合作。雙方都可以不做的

11、時(shí)候，主動(dòng)多做一步。l 在公司內(nèi)部，生態(tài)系統(tǒng)就是和你有關(guān)的上下游部門(mén)，對(duì)測(cè)試來(lái)說(shuō)，開(kāi)發(fā)、NPI、項(xiàng)目部、SQA、PQA、客服、產(chǎn)品線，質(zhì)量檢測(cè)中心等等構(gòu)成了我們的生態(tài)系統(tǒng)。l 任何一個(gè)手機(jī)廠家，憑一己之力，都遠(yuǎn)遠(yuǎn)不能滿足用戶的需求，必須要開(kāi)放協(xié)作。比如，我們與若干SIM卡廠家簽訂合作協(xié)議，共同保證機(jī)卡兼容；與其他公司合作，在第三方應(yīng)用的兼容方面共贏等等。實(shí)踐1.9 量化管理與獎(jiǎng)優(yōu)罰劣l 量化管理似乎有些不時(shí)髦了，但個(gè)人認(rèn)為對(duì)于測(cè)試團(tuán)隊(duì)非常重要，這樣才能做到精細(xì)化運(yùn)營(yíng)，同時(shí)量化管理的內(nèi)容確實(shí)要持續(xù)更新，揀重要的考核。l 我們對(duì)測(cè)試代表，領(lǐng)域?qū)T，測(cè)試人員等都實(shí)行量化管理，輸出數(shù)據(jù)，進(jìn)而獎(jiǎng)勵(lì)和處罰

12、，量化管理數(shù)據(jù)對(duì)考核結(jié)果起到主要的參照作用。比如對(duì)測(cè)試代表，就分別從與用戶互動(dòng)，版本接收，用例Bug占比，項(xiàng)目返修率，Bug提前度等方面加權(quán)平均。l 對(duì)職能管理者的考核我們主要從五個(gè)維度衡量：提供方向（Provide D Direction）：15%提升績(jī)效（Drive P Performance）：40%為本組織創(chuàng)建良好的生態(tài)系統(tǒng)（Build E Ecosystem）：10%執(zhí)行力（E Execution Force）：20%發(fā)展自己和別人（Develop Yourself and Others：P People）：15%待改進(jìn)：l 軟件測(cè)試需要有一個(gè)非常強(qiáng)大的工具開(kāi)發(fā)部門(mén)，負(fù)責(zé)自動(dòng)化以及測(cè)試中需用到的工具開(kāi)發(fā)以及維護(hù)，并且盡可能利用儀器設(shè)備代替人工。我們現(xiàn)在只有一個(gè)6人左右的小團(tuán)隊(duì)，稍大型的工具開(kāi)發(fā)都得委托給開(kāi)發(fā)人員，進(jìn)度和質(zhì)量都無(wú)法嚴(yán)格控制。l 個(gè)人理想中的系統(tǒng)測(cè)試，測(cè)試人員比現(xiàn)在少得多，輔之以強(qiáng)大的自動(dòng)收集工具。除了自動(dòng)化測(cè)試外，項(xiàng)目人員和試用用戶日常使用手機(jī)就基本囊括了主要用戶場(chǎng)景，結(jié)果都可以通過(guò)系統(tǒng)工具自動(dòng)記錄下來(lái)并得到分析（現(xiàn)在有些功能已實(shí)現(xiàn)，可以在后臺(tái)監(jiān)測(cè)），我們稱之為智能探測(cè)（Smart Probe）。案例啟示l 與