模型化的質(zhì)量度量

模型化的思維與數(shù)據(jù)度量數(shù)據(jù)度量之認(rèn)知金字塔數(shù)據(jù)度量之WhyWhat

HowWhy|目的How|方法What|現(xiàn)象發(fā)現(xiàn)質(zhì)量問題分析問題背后原因可視化

透明數(shù)據(jù)度量模型驅(qū)動(dòng)決策質(zhì)量和效率的對(duì)立思考目標(biāo)導(dǎo)向型思維方式“停止依靠大批量的檢驗(yàn)來達(dá)到質(zhì)量標(biāo)準(zhǔn)；檢驗(yàn)其實(shí)是等于準(zhǔn)備有次品，檢驗(yàn)出來已經(jīng)是太遲，且成本高而效益低。正確的做法，是改良生產(chǎn)過程。”世界級(jí)質(zhì)量管理大師戴明（WilliamEdwards

Deming）讓質(zhì)量可量化、可分析通過數(shù)據(jù)驅(qū)動(dòng)的方式進(jìn)行理性地評(píng)估、改善、提高確保在整個(gè)開發(fā)過程中的活動(dòng)都符合適當(dāng)?shù)馁|(zhì)量標(biāo)準(zhǔn) 缺陷越晚發(fā)現(xiàn)，解決的成本越高，交付效率也越低PDCA過程在數(shù)據(jù)度量中的應(yīng)用8Plan規(guī)劃度量方針和目標(biāo)制定執(zhí)行規(guī)劃Do根據(jù)已知信息，設(shè)計(jì)具體方法、方案和布局根據(jù)計(jì)劃具體運(yùn)作，實(shí)現(xiàn)Check總結(jié)執(zhí)行結(jié)果，指標(biāo)有效性找出問題，修改，調(diào)整Action總結(jié)和分析結(jié)果，獲取經(jīng)驗(yàn)對(duì)成功的經(jīng)驗(yàn)保留，對(duì)失敗的經(jīng)驗(yàn)改進(jìn)PDCA是一種普適的方法論.研發(fā)所有過程都可以采用PDCA過程進(jìn)行管理和改進(jìn).目錄1. 金融科技的度量特點(diǎn)金融科技的度量問題可視化度量落地與實(shí)踐度量平臺(tái)的演進(jìn)與收益思考與展望金融科技的度量特點(diǎn)金融科技研發(fā)的特點(diǎn)互聯(lián)網(wǎng)和金融科技在開發(fā)運(yùn)維一體化、工程能力建設(shè)、研發(fā)性能建設(shè)方面越走越近是一個(gè)趨勢(shì)：業(yè)務(wù)和產(chǎn)品遇到的挑戰(zhàn)越來越相似；產(chǎn)品所使用的技術(shù)相近，如AI預(yù)測交易、數(shù)據(jù)中臺(tái)、云原生；研發(fā)管理、工程效能遇到的問題和挑戰(zhàn)相近；產(chǎn)品高度同質(zhì)化時(shí)代，對(duì)質(zhì)量的要求都是越來越高?；ヂ?lián)網(wǎng)研發(fā)金融科技研發(fā)效能和項(xiàng)目管理方面不同金融科技有監(jiān)管的約束，有很多對(duì)接要求，風(fēng)險(xiǎn)與合規(guī)在研發(fā)中占比較大。質(zhì)量度量方向：金融科技則是為了做目標(biāo)管理、外包團(tuán)隊(duì)管理互聯(lián)網(wǎng)專注在“快”，追求最高效率，認(rèn)為比別人快就贏了。質(zhì)量度量方向：互聯(lián)網(wǎng)做度量的目的是以效能改進(jìn)為最終目標(biāo)更高效率風(fēng)險(xiǎn)管理金融科技的度量問題需要解決的問題敏捷與瀑布模型混合的研發(fā)形態(tài)質(zhì)量度量復(fù)雜性項(xiàng)目類型自研與外購Problems華泰金融科技的質(zhì)量度量度量-發(fā)現(xiàn)問題，解決問題，長線觀察推動(dòng)問題得到改善看到背后根本原因可視化

透明度量模型刻畫華泰質(zhì)量度量的特色實(shí)踐交付版本作為主維度將交付版本月度替換常規(guī)自然月的度量維度，可以兼顧敏捷和瀑布的混合研發(fā)模式項(xiàng)目度量為元度量實(shí)體華泰更多的采用項(xiàng)目制，通過弱矩陣的結(jié)構(gòu)把各個(gè)部門臨時(shí)組織到一起，串聯(lián)其中的各項(xiàng)流程全生命周期質(zhì)量度量覆蓋從需求，研發(fā)，測試，上線，運(yùn)維各個(gè)階段，完整的從軟件生命周期呈現(xiàn)質(zhì)量情況；做到軟件全Th命周期的有效度量，才能真正為軟件研發(fā)過程降本增效，事半功倍模型化的質(zhì)量刻畫中長期采用采用模型化的方法對(duì)質(zhì)量進(jìn)行刻畫，讓管理者看的清，看的遠(yuǎn)度量下探到人的維度結(jié)合組合級(jí)，團(tuán)隊(duì)級(jí)的數(shù)據(jù)度量，部分指標(biāo)下探到個(gè)人級(jí)別，加強(qiáng)人員的度量和驅(qū)動(dòng)成長注重質(zhì)量風(fēng)險(xiǎn)評(píng)估質(zhì)量風(fēng)險(xiǎn)無處不在，金融科技的風(fēng)險(xiǎn)意識(shí)需要在質(zhì)量度量繼續(xù)體現(xiàn)，把握質(zhì)量風(fēng)險(xiǎn)才能利于不敗地位全生命周期質(zhì)量度量易操作指標(biāo)數(shù)量合適，容易理解，易收集需求有效性單元測試千行代碼缺陷率發(fā)布次數(shù) ? 缺陷逃逸率需求變更率編碼引入缺陷缺陷數(shù)量/趨勢(shì)發(fā)布成功率需求交付吞吐缺陷及時(shí)解決率自動(dòng)化測試覆蓋率需求前置時(shí)間靜態(tài)代碼掃描測試產(chǎn)能需求引入缺陷冒煙通過率缺陷重開率開發(fā)產(chǎn)能需求 開發(fā)測試上線發(fā)布運(yùn)維生產(chǎn)認(rèn)同感指標(biāo)得到項(xiàng)目和團(tuán)隊(duì)的認(rèn)可平衡感指標(biāo)注重結(jié)果（成效）也不忽視過程安全感指標(biāo)面向項(xiàng)目而非個(gè)人有價(jià)值指標(biāo)對(duì)團(tuán)隊(duì)的能力提升有幫助無害性指標(biāo)對(duì)團(tuán)隊(duì)沒有負(fù)向牽引作用模型化的刻畫--

頂層模型和中層模型交付質(zhì)量穩(wěn)定性及時(shí)性測試質(zhì)量研發(fā)質(zhì)量需求質(zhì)量交付質(zhì)量過程質(zhì)量質(zhì)量風(fēng)控質(zhì)量刻畫內(nèi)外穩(wěn)定及時(shí)質(zhì)量評(píng)級(jí)元指標(biāo)選取穩(wěn)定性保障遺留缺陷管理缺陷解決率及時(shí)性保障自動(dòng)化測試性能測試缺陷逃逸率需求引入缺陷KLOC一次冒煙通過率缺陷一次修復(fù)率需求 開發(fā)測試發(fā)布成功率發(fā)布生產(chǎn)模型刻畫之質(zhì)量評(píng)級(jí)展示模型刻畫的特點(diǎn)全生命周期的質(zhì)量刻畫，項(xiàng)目質(zhì)量一眼覽盡增加了質(zhì)量保障的維度刻畫，項(xiàng)目質(zhì)量風(fēng)控，測試能力建設(shè)有效呈現(xiàn)多層次質(zhì)量刻畫，質(zhì)量和交付攜手共進(jìn)特點(diǎn)應(yīng)用場景項(xiàng)目質(zhì)量的穿透管理，讓管理者看得見，看得清，打造提質(zhì)增效的質(zhì)量跟蹤和改進(jìn)體系交付質(zhì)量評(píng)估過程質(zhì)量與效率掛鉤分析過程質(zhì)量結(jié)合交付效率進(jìn)行綜合刻畫增加質(zhì)量標(biāo)簽的功能，讓問題可以清晰展示下探到個(gè)人維度的度量基礎(chǔ)能力：測試設(shè)計(jì)、執(zhí)行、完成測試任務(wù)，是測試人員最基本的能力要求進(jìn)階能力：自動(dòng)化測試，性能測試是測試人員的進(jìn)階能力高階能力：mock、數(shù)據(jù)構(gòu)造、環(huán)境治理、代碼染色等平臺(tái)，要比中級(jí)有更高的要求， 就是需要測試人員把這些工具都能熟練地使用起來效率領(lǐng)域：從測試人員測試Stroy交付，bug驗(yàn)證來評(píng)估效率情況質(zhì)量領(lǐng)域：從發(fā)現(xiàn)bug的有效性，對(duì)被測功能的測試深度方面評(píng)估測試質(zhì)量數(shù)據(jù)呈現(xiàn)特色：劃分人員評(píng)級(jí)時(shí)間可以選月度，季度做數(shù)據(jù)觀測人員數(shù)據(jù)和組內(nèi)平均水平做橫向?qū)Ρ冉M成員內(nèi)部平行觀察金融科技的度量的重點(diǎn)之一是：外包團(tuán)隊(duì)管理人員能力分解：基礎(chǔ)能力，進(jìn)階能力，高階能力，效率和質(zhì)量豐富的人員數(shù)據(jù)和直觀的人員能力展示開發(fā)和測試的質(zhì)量和效率數(shù)據(jù)協(xié)助進(jìn)行過程問題分析應(yīng)用場景人員培養(yǎng)，促進(jìn)發(fā)展的好幫手質(zhì)量與效率領(lǐng)域的個(gè)人維度模型指標(biāo)選取與衡量質(zhì)量領(lǐng)域效率領(lǐng)域組內(nèi)情況核定目標(biāo)值測試人員維度的kloc項(xiàng)目定義目標(biāo)缺陷驗(yàn)證時(shí)長缺陷數(shù)量測試交付效率回歸測試耗時(shí)比業(yè)界通用目標(biāo)衡量項(xiàng)目定義目標(biāo)部門根據(jù)產(chǎn)品線統(tǒng)一目標(biāo)多層次的數(shù)據(jù)分析測試深度？開發(fā)質(zhì)量？千行代碼缺陷率開發(fā)組/人

kloc測試組/人

kloc測試交付率開發(fā)產(chǎn)能度量與OKR的有機(jī)結(jié)合O是Objectives，KR是KeyResults，OKR就是Objectives

andKeyResults，即目標(biāo)與關(guān)鍵結(jié)果法。關(guān)鍵成果（kr）用于衡量實(shí)現(xiàn)目標(biāo)的進(jìn)展情況。它們是定量的，可量化的?？珊饬颗c可查看進(jìn)展：kr需要具體和可測量。雅虎首席執(zhí)行官瑪麗莎?梅耶爾指出：“除非有數(shù)字，否則這不是關(guān)鍵結(jié)果。”度量的指標(biāo)可以作為KR的可衡量與可查看的支撐OKR的O即目標(biāo)，可以作為評(píng)分的標(biāo)準(zhǔn)，比如

KLOC 測試效率等度量OKR目標(biāo)有野心結(jié)果要明確數(shù)字量化完成有難度適合度量與OKR的結(jié)合的指標(biāo)場景指標(biāo)沒有業(yè)界或者部門內(nèi)的公允標(biāo)準(zhǔn)指標(biāo)和項(xiàng)目的運(yùn)作方式和具體階段目標(biāo)強(qiáng)相關(guān)自動(dòng)化測試和性能測試能力建設(shè)：由各個(gè)項(xiàng)目經(jīng)理和測試經(jīng)理制定每個(gè)季度的目標(biāo)值，包括總數(shù)，通過率，性能達(dá)到指標(biāo)等等，這些和整個(gè)項(xiàng)目的OKR以及人員OKR掛鉤。場景一千行代碼缺陷率的目標(biāo)建立：該指標(biāo)對(duì)于不同技術(shù)棧差距較大，同時(shí)對(duì)于KLOC，要處于合理的范疇，既不能太大也不能太小。

所以把指標(biāo)的目標(biāo)制定下放到項(xiàng)目維度，由項(xiàng)目制定對(duì)應(yīng)的目標(biāo)，并且用OKR來對(duì)開發(fā)經(jīng)理和測試經(jīng)理進(jìn)行驅(qū)動(dòng)改進(jìn)，既要提測質(zhì)量也要測試質(zhì)量。場景二數(shù)據(jù)即服務(wù)IM公眾號(hào)門限預(yù)警郵件數(shù)據(jù)平臺(tái)演進(jìn)與收益華泰的質(zhì)量管理數(shù)字化平臺(tái)1.02.03.04.0零星數(shù)據(jù)采集和加工發(fā)現(xiàn)問題，拉取數(shù)據(jù)過程質(zhì)量&效率過程質(zhì)量指標(biāo)與效率的監(jiān)控全生命周期質(zhì)量度量模型化刻畫，持續(xù)觀察質(zhì)量評(píng)級(jí)的榜樣作用外購產(chǎn)品的質(zhì)量管理可視化能力提升OKR結(jié)合度量與評(píng)分前端組件化管理動(dòng)態(tài)指標(biāo)的組合和展示質(zhì)量預(yù)測.0質(zhì)量管理低代碼平臺(tái)實(shí)施前后對(duì)比提升15%抓住項(xiàng)目的痛點(diǎn)進(jìn)行問題分析與度量指標(biāo)落地需要按照準(zhǔn)備、評(píng)估、設(shè)計(jì)、部署、反饋的循環(huán)步驟通過改進(jìn)方法進(jìn)一步持續(xù)的觀測指標(biāo)和模型通過小范圍試點(diǎn)推廣到產(chǎn)品線和整個(gè)部門無論模型還是指標(biāo)，包括評(píng)分，評(píng)級(jí)標(biāo)準(zhǔn)均可以動(dòng)態(tài)調(diào)整，部分要到項(xiàng)目級(jí)別進(jìn)行單獨(dú)定制形式不重要，數(shù)據(jù)準(zhǔn)確性能反應(yīng)問題最重要對(duì)質(zhì)量好的項(xiàng)目進(jìn)行宣傳，并梳理榜樣的作用通過透明化的研發(fā)過程，研發(fā)數(shù)據(jù)可視化，驅(qū)動(dòng)高質(zhì)量和快速交付價(jià)值+實(shí)施要點(diǎn)提升40%提升35%效能缺陷修時(shí)間交付周期降低總體收益缺陷逃逸率