軟件測(cè)試流程分享.pptx

軟件測(cè)試流程分享 目錄 整體流程各階段質(zhì)量評(píng)審方式和標(biāo)準(zhǔn)Bug分布CodeReview單元測(cè)試測(cè)試用例設(shè)計(jì)功能測(cè)試性能測(cè)試異常測(cè)試 1 整體流程 測(cè)試溝通 溝通紀(jì)要 測(cè)試設(shè)計(jì) 測(cè)試設(shè)計(jì)文檔 測(cè)試執(zhí)行 測(cè)試報(bào)告 時(shí)間軸 測(cè)試介入 線上檢查 2 各階段質(zhì)量評(píng)審方式和標(biāo)準(zhǔn) 邏輯BUG代碼做了錯(cuò)誤的事情 例如條件語(yǔ)句寫錯(cuò) 變量未賦值等銜接BUG對(duì)象之間銜接時(shí)候出現(xiàn)錯(cuò)誤 例如接口之間傳遞參數(shù)出錯(cuò)等渲染BUG能夠用眼睛看出來(lái)的錯(cuò)誤 出現(xiàn)在UI例如頁(yè)面布局與MRD不一致 3 Bug分布 DAO DataService PageService Action 模板 ST 針對(duì)渲染和銜接BUG http請(qǐng)求 http應(yīng)答 3 Bug分布 并非所有的類都要做UT 4 CodeReview 何時(shí)進(jìn)行開發(fā)人員每次提交代碼前 都應(yīng)通過(guò)本地單測(cè)并將代碼提交team間及測(cè)試人員Review Reveiw通過(guò)后才能入庫(kù) 優(yōu)點(diǎn)保持項(xiàng)目整體代碼風(fēng)格一致團(tuán)隊(duì)間互相熟悉代碼提前發(fā)現(xiàn)錯(cuò)誤CodeReview要點(diǎn)遵守代碼規(guī)范 保持項(xiàng)目整體代碼風(fēng)格一致邏輯錯(cuò)誤異常條件考慮不足 5 單元測(cè)試 單元測(cè)試開發(fā)原則短 一般在10行以內(nèi)平 基本上都是順序執(zhí)行 沒有分支語(yǔ)句 沒有循環(huán)語(yǔ)句快 一個(gè)用例執(zhí)行時(shí)間在毫秒級(jí)別一致性 測(cè)試用例多次執(zhí)行 結(jié)果一致原子性 測(cè)試用例的執(zhí)行結(jié)果 要么是PASS 要么是FAIL獨(dú)立性 測(cè)試用例之間獨(dú)立 即測(cè)試用例的執(zhí)行順序不影響結(jié)果單元測(cè)試架構(gòu)工具c 單測(cè)框架 Gtestc 覆蓋率分析 Lcovpython單測(cè)框架 unittest nosejava單測(cè)框架 Junitjava覆蓋率分析 cobertura 6 測(cè)試用例設(shè)計(jì) 輸入細(xì)化的測(cè)試需求測(cè)試的方法相關(guān)的資源輸出完成測(cè)試需求的數(shù)據(jù)設(shè)計(jì)完成測(cè)試步驟完成測(cè)試預(yù)期可選 標(biāo)識(shí)別用例的優(yōu)先級(jí)可選 和測(cè)試需求綁定用例間的執(zhí)行順序 測(cè)試分類 功能測(cè)試性能測(cè)試異常測(cè)試 6 1功能測(cè)試 對(duì)產(chǎn)品的各功能進(jìn)行驗(yàn)證 檢查產(chǎn)品是否達(dá)到用戶要求的功能 構(gòu)造輸入 正常 異常 測(cè)試數(shù)據(jù) 正常數(shù)據(jù) 配置文件 正常配置 測(cè)試環(huán)境 正常環(huán)境 測(cè)試步驟針對(duì)系統(tǒng)功能進(jìn)行驗(yàn)證檢查輸出數(shù)據(jù) 正確性 新舊diff功能 正確性 針對(duì)namespace database的增刪改查功能的系統(tǒng)測(cè)試 測(cè)試輸入測(cè)試數(shù)據(jù) 系統(tǒng)對(duì)外部數(shù)據(jù)沒有強(qiáng)依賴 測(cè)試使用數(shù)據(jù)可以進(jìn)行構(gòu)造測(cè)試環(huán)境 單點(diǎn)server 后臺(tái)數(shù)據(jù)庫(kù)系統(tǒng)配置 使用線上配置測(cè)試步驟針對(duì)namespace database的增刪改查 及交叉功能應(yīng)用常用測(cè)試設(shè)計(jì)方法進(jìn)行測(cè)試設(shè)計(jì) 測(cè)試輸出檢查增刪改查的功能是否實(shí)現(xiàn) 數(shù)據(jù)是否正確 6 1功能測(cè)試 舉例 6 2性能測(cè)試 基本概念 CPU IO 內(nèi)存 帶寬 成功率 超時(shí)率 響應(yīng)時(shí)間 并發(fā)用戶數(shù) 資源指標(biāo) 產(chǎn)品指標(biāo) 資源指標(biāo)與硬件消耗直接相關(guān) 本質(zhì)反映的是成本問(wèn)題 產(chǎn)品指標(biāo)與場(chǎng)景需求直接相關(guān) 本質(zhì)反映的是效果問(wèn)題 6 2性能測(cè)試 關(guān)鍵指標(biāo) 14 step1 分析對(duì)象設(shè)計(jì)原理確認(rèn)資源消耗類型確認(rèn)具體關(guān)注指標(biāo) 性能測(cè)試場(chǎng)景設(shè)計(jì)架構(gòu)部署方案設(shè)計(jì)性能預(yù)期設(shè)計(jì) 穩(wěn)定 極限 壓力方案設(shè)計(jì) step2 step3 step4 step5 環(huán)境 數(shù)據(jù)與工具選擇環(huán)境 超時(shí) 線程 日志 硬件資源等 數(shù)據(jù) 大小 讀寫方式 cache機(jī)制 工具選擇 線程池 連接方式 通信方式 壓力增加方式 執(zhí)行方案執(zhí)行輪次優(yōu)化 對(duì)比方案 結(jié)果指標(biāo)分析指標(biāo)組合判斷性能指標(biāo)評(píng)估瓶頸判斷優(yōu)化方案設(shè)計(jì) 6 2性能測(cè)試 測(cè)試方案設(shè)計(jì) 6 2性能測(cè)試 舉例 消息發(fā)送平臺(tái)接口測(cè)試測(cè)試目的 測(cè)試線上單臺(tái)機(jī)器消息發(fā)送接口的發(fā)送能力 系統(tǒng)入口接受外部請(qǐng)求的能力 期望值 系統(tǒng)入口 2000QPS 單機(jī)500QPS 線上共四臺(tái)機(jī)器 CUP IDLE 30以上 性能測(cè)試過(guò)程 1 搭建性能測(cè)試環(huán)境 準(zhǔn)備線上測(cè)試機(jī)器并構(gòu)造壓測(cè)數(shù)據(jù) 2 起壓線程 從10 300 依次增加 遇到瓶頸后 尋找臨界屆值的點(diǎn) 3 發(fā)送請(qǐng)求數(shù) 隨著線程的增加 請(qǐng)求數(shù)略有增加 保證壓測(cè)時(shí)間不低于200s 6 2性能測(cè)試 舉例 性能測(cè)試結(jié)果分析 構(gòu)造系統(tǒng)的異常場(chǎng)景 檢查系統(tǒng)的穩(wěn)定性 正確性構(gòu)造輸入測(cè)試數(shù)據(jù) 異常數(shù)據(jù) 配置文件 異常配置 測(cè)試環(huán)境 異常環(huán)境 CPU 內(nèi)存 磁盤 網(wǎng)絡(luò) 依賴系統(tǒng)異常 測(cè)試步驟構(gòu)造各種異常場(chǎng)景檢查輸出數(shù)據(jù) 是否正常 是