Week08-軟件測(cè)試工具剖析課件

1、2022/8/20581軟件測(cè)試工具Software Testing Tool任課老師：黃武第1頁(yè)，共58頁(yè)。2022/8/20582提綱軟件測(cè)試概述軟件測(cè)試工具分類軟件測(cè)試工具選擇單元測(cè)試工具cppUnit介紹第2頁(yè)，共58頁(yè)。2022/8/205831 軟件測(cè)試概述軟件測(cè)試的基本內(nèi)容軟件測(cè)試的定義軟件測(cè)試的分類軟件測(cè)試的簡(jiǎn)單過(guò)程第3頁(yè)，共58頁(yè)。2022/8/205841.1 軟件測(cè)試的基本內(nèi)容軟件測(cè)試軟件測(cè)試基礎(chǔ)測(cè)試級(jí)別測(cè)試相關(guān)的度量測(cè)試技術(shù)測(cè)試過(guò)程測(cè)試有關(guān)的術(shù)語(yǔ)關(guān)鍵問(wèn)題測(cè)試與其它活動(dòng)的聯(lián)系測(cè)試對(duì)象測(cè)試目標(biāo)實(shí)際考慮測(cè)試活動(dòng)評(píng)價(jià)被測(cè)程序評(píng)價(jià)完成的測(cè)試基于測(cè)試人員的直覺(jué)和經(jīng)驗(yàn)基于規(guī)格說(shuō)明基于

2、代碼基于應(yīng)用本質(zhì)選擇和組合技術(shù)基于錯(cuò)誤圖 軟件測(cè)試知識(shí)域主題的分解結(jié)構(gòu)第4頁(yè)，共58頁(yè)。2022/8/205851.2 軟件測(cè)試的定義在IEEE標(biāo)準(zhǔn)610.12-1990中將軟件測(cè)試定義為：軟件測(cè)試（Software Test）在指定的條件下操作測(cè)試系統(tǒng)或組件(1)，觀察或記錄結(jié)果(2)，并對(duì)測(cè)試系統(tǒng)或組件的不同方面做出評(píng)估(3)的過(guò)程總體來(lái)講，軟件測(cè)試是一個(gè)尋找和證實(shí)軟件缺陷的過(guò)程第5頁(yè)，共58頁(yè)。2022/8/205861.3 軟件測(cè)試的分類軟件測(cè)試級(jí)別的幾個(gè)階段單元測(cè)試集成測(cè)試系統(tǒng)測(cè)試確認(rèn)測(cè)試回歸測(cè)試第6頁(yè)，共58頁(yè)。2022/8/205871.3.1 各種軟件測(cè)試之間的關(guān)系技術(shù)方法應(yīng)用

3、目標(biāo)/特性單元測(cè)試系統(tǒng)測(cè)試驗(yàn)收測(cè)試性能測(cè)試強(qiáng)壯性測(cè)試功能測(cè)試白盒測(cè)試黑盒測(cè)試測(cè)試階段或?qū)哟芜m用性測(cè)試可靠性測(cè)試集成測(cè)試安全性測(cè)試第7頁(yè)，共58頁(yè)。2022/8/205881.4 軟件測(cè)試的簡(jiǎn)單過(guò)程在很多軟件程序員的眼中，測(cè)試軟件就是運(yùn)行軟件，看軟件在運(yùn)行過(guò)程中是否出錯(cuò)； 實(shí)際上，運(yùn)行軟件只是軟件測(cè)試的一部分 實(shí)際的軟件測(cè)試是需要設(shè)計(jì)的，設(shè)計(jì)的結(jié)果是構(gòu)建了測(cè)試用例，而測(cè)試是按照測(cè)試用例來(lái)運(yùn)行軟件的，運(yùn)行軟件得到的結(jié)果需要記錄，統(tǒng)計(jì) 第8頁(yè)，共58頁(yè)。2022/8/205891.4.1 最簡(jiǎn)單的測(cè)試過(guò)程 最簡(jiǎn)單的測(cè)試過(guò)程至少包括測(cè)試設(shè)計(jì)，生成測(cè)試用例，執(zhí)行測(cè)試用例以及測(cè)試結(jié)果分析幾個(gè)階段測(cè)試設(shè)計(jì)執(zhí)

4、行測(cè)試用例測(cè)試結(jié)果分析生成測(cè)試用例測(cè)試管理第9頁(yè)，共58頁(yè)。2022/8/2058101.4.2 一個(gè)軟件測(cè)試的例子 對(duì)“Hello world”程序進(jìn)行測(cè)試 ，程序代碼如下：void static main (int argc, char* argv )printf( “Hello world”);return 0;第10頁(yè)，共58頁(yè)。2022/8/205811 建立測(cè)試用例 測(cè)試最基本的方法就是建立并運(yùn)行測(cè)試用例，我們通常使用表格的方式來(lái)構(gòu)建簡(jiǎn)單的測(cè)試用例表1 測(cè)試Hello world程序的測(cè)試用例用例編號(hào)說(shuō)明操作過(guò)程輸入值期望的結(jié)果1測(cè)試程序功能運(yùn)行軟件無(wú)在控制臺(tái)上打印出”Hello

5、world” 第11頁(yè)，共58頁(yè)。2022/8/205812 執(zhí)行測(cè)試用例 將Hello world 程序編譯、連接形成可執(zhí)行程序Hello.exe，然后運(yùn)行它，因?yàn)闇y(cè)試不要求輸入值，因此運(yùn)行軟件即是執(zhí)行測(cè)試Hello.exe第12頁(yè)，共58頁(yè)。2022/8/205813 記錄運(yùn)行的結(jié)果 程序在控制臺(tái)上打印出Hello world字樣第13頁(yè)，共58頁(yè)。2022/8/205814 測(cè)試總結(jié) 測(cè)試的實(shí)際結(jié)果與期望的結(jié)果一致，程序的打印功能是正確的上面4步就是對(duì)Hello world程序的一次正式測(cè)試，盡管它還不夠完整，但是它讓我們看到了測(cè)試的整個(gè)過(guò)程 第14頁(yè)，共58頁(yè)。2022/8/20581

6、51.4.3 對(duì)Hello World軟件的改進(jìn)void static main (int argc, char* argv )switch ( *argv1 ) case1:/ 輸入1打印Hello worldprintf( “Hello world!”);break;case2:/ 輸入2打印Hello guyprintf( “Hello guy!”);break;default:/ 輸入其它參數(shù)打印Helloprintf( “Hello!”);break; 第15頁(yè)，共58頁(yè)。2022/8/205816 建立測(cè)試用例由于該程序接受參數(shù)，我們可以選擇不同的輸入?yún)?shù)來(lái)進(jìn)行軟件測(cè)試表2 測(cè)試改

7、進(jìn)后Hello world程序的測(cè)試用例編號(hào)說(shuō)明操作過(guò)程輸入值期望的結(jié)果1測(cè)試程序功能運(yùn)行軟件1在控制臺(tái)上打印出”Hello world！” 2測(cè)試程序功能運(yùn)行軟件2在控制臺(tái)上打印出”Hello guy！”3測(cè)試程序功能運(yùn)行軟件3在控制臺(tái)上打印出”Hello！”4測(cè)試程序健壯性運(yùn)行軟件無(wú)打印出”Hello！”第16頁(yè)，共58頁(yè)。2022/8/205817 執(zhí)行測(cè)試用例我們?cè)诳刂婆_(tái)上運(yùn)行該程序，分別給程序帶不同的輸入?yún)?shù)，可執(zhí)行程序的名字是Hello.exeHello 1Hello 2Hello 3Hello 第17頁(yè)，共58頁(yè)。2022/8/205818 記錄運(yùn)行的結(jié)果表3 測(cè)試改進(jìn)后Hell

8、o world程序的結(jié)果記錄測(cè)試編號(hào)輸入期望的結(jié)果實(shí)際的結(jié)果通過(guò)/失敗11打印”Hello world！”打印”Hello world！”通過(guò)22打印”Hello guy！”打印”Hello guy！”通過(guò)33打印”Hello！”打印”Hello！”通過(guò)4無(wú)打印”Hello！”彈出錯(cuò)誤對(duì)話框失敗第18頁(yè)，共58頁(yè)。2022/8/205819.1 錯(cuò)誤對(duì)話框執(zhí)行不帶參數(shù)的Hello程序后，彈出錯(cuò)誤對(duì)話框，程序崩潰 第19頁(yè)，共58頁(yè)。2022/8/205820 測(cè)試總結(jié)在程序中使用了輸入?yún)?shù)變量*argv1，如果不輸入任何參數(shù)，那么argv1為空指針（NULL），程序訪問(wèn)空指針會(huì)出現(xiàn)問(wèn)題，如果我

9、們?cè)诔绦虻那懊鎸?duì)參數(shù)個(gè)數(shù)加以保護(hù)，就不會(huì)出現(xiàn)上面的問(wèn)題 真是想不到，這么簡(jiǎn)單的一個(gè)程序也會(huì)出錯(cuò) ！是的，即使我們認(rèn)為再簡(jiǎn)單的程序也可能包含錯(cuò)誤，但軟件測(cè)試可以找到這些錯(cuò)誤第20頁(yè)，共58頁(yè)。2022/8/205821問(wèn)題你以前正規(guī)的做過(guò)軟件測(cè)試嗎？你知道測(cè)試工具對(duì)于測(cè)試而言有什么作用嗎？第21頁(yè)，共58頁(yè)。2022/8/2058222. 軟件測(cè)試工具分類測(cè)試工具是為了提高測(cè)試效率，用軟件代替測(cè)試人工輸入的有效方法根據(jù)測(cè)試工具的作用，可以分類為：白盒測(cè)試工具黑盒測(cè)試工具功能測(cè)試工具性能測(cè)試工具第22頁(yè)，共58頁(yè)。2022/8/2058232.1 白盒測(cè)試白盒測(cè)試軟件測(cè)試員可以了解軟件的內(nèi)部結(jié)構(gòu)以

10、及實(shí)現(xiàn)的具體代碼，從而可以根據(jù)程序的內(nèi)部情況來(lái)設(shè)計(jì)更實(shí)用的測(cè)試案例白盒測(cè)試工具就是針對(duì)代碼進(jìn)行測(cè)試，測(cè)試中發(fā)現(xiàn)的錯(cuò)誤可以定位到代碼的具體位置白盒測(cè)試if (x 1 0) p=x*2;else p= x; 輸入輸出第23頁(yè)，共58頁(yè)。2022/8/2058242.1.1 白盒測(cè)試工具的分類白盒測(cè)試工具可以分為兩類靜態(tài)測(cè)試工具直接對(duì)代碼進(jìn)行語(yǔ)法分析，根據(jù)某種質(zhì)量模型評(píng)估代碼，不需要運(yùn)行代碼動(dòng)態(tài)測(cè)試工具動(dòng)態(tài)測(cè)試工具采用在程序中插樁的方式，讓程序中插入一些代碼，然后運(yùn)行代碼統(tǒng)計(jì)程序運(yùn)行時(shí)的數(shù)據(jù)第24頁(yè)，共58頁(yè)。2022/8/2058252.1.2 白盒靜態(tài)測(cè)試工具白盒靜態(tài)測(cè)試工具的代表是Telelo

11、gic公司的Logiscope軟件Telelogic是1983年在瑞典創(chuàng)立的復(fù)雜軟件及系統(tǒng)開(kāi)發(fā)解決方案供應(yīng)商，其提供從需求管理、變更管理、可視化軟件工程到軟件測(cè)試的工具，其產(chǎn)品被各國(guó)軍方所采用，2008年被IBM公司收購(gòu)第25頁(yè)，共58頁(yè)。2022/8/205826 Logiscope軟件Logiscope是Telelogic公司推出的專用于軟件質(zhì)量保證和軟件測(cè)試的產(chǎn)品主要功能是對(duì)軟件做質(zhì)量分析和測(cè)試以保證軟件的質(zhì)量，并可做認(rèn)證、反向工程和維護(hù)，特別是針對(duì)要求高可靠性和高安全性的軟件項(xiàng)目和工程/jxxy012/article/details/502548第26頁(yè)，共58頁(yè)。2022/8/205

12、827 Logiscope軟件的三大功能Audit：定位錯(cuò)誤模塊，可評(píng)估軟件質(zhì)量及復(fù)雜程度，提供代碼的直觀描述，自動(dòng)生成軟件文檔（根據(jù)標(biāo)準(zhǔn)進(jìn)行評(píng)估）RuleChecker：根據(jù)工程中定義的編程規(guī)則自動(dòng)檢查軟件代碼錯(cuò)誤，可直接定位錯(cuò)誤。包含大量標(biāo)準(zhǔn)規(guī)則，用戶也可定制創(chuàng)建規(guī)則，自動(dòng)生成測(cè)試報(bào)告 TestChecker：測(cè)試覆蓋分析，顯示沒(méi)有測(cè)試的代碼路徑，通過(guò)插裝和軟件運(yùn)行進(jìn)行分析第27頁(yè)，共58頁(yè)。2022/8/205828 Logiscope軟件界面第28頁(yè)，共58頁(yè)。2022/8/2058292.1.3 白盒動(dòng)態(tài)測(cè)試工具白盒動(dòng)態(tài)測(cè)試工具的代表包括：Rational公司的PurifyNumeg

13、a公司的BoundsCheckerCompuware公司的Devpartner等Numega 1997年被Compuware收購(gòu)Micro Focus公司2009年收購(gòu)Compuware公司的測(cè)試產(chǎn)品線第29頁(yè)，共58頁(yè)。2022/8/205830 IBM Rational Purify簡(jiǎn)介IBM Rational Purify是一個(gè)面向VC, VB或者Java開(kāi)發(fā)的測(cè)試工具，用于檢查Visual C/C+ 和Java 代碼中與內(nèi)存有關(guān)的錯(cuò)誤，確保整個(gè)應(yīng)用程序的質(zhì)量和可靠性主要用于查找Visual C/C+ 程序中的傳統(tǒng)內(nèi)存訪問(wèn)錯(cuò)誤，以及Java 代碼中與垃圾內(nèi)存收集相關(guān)的錯(cuò)誤方面 第30頁(yè)，

14、共58頁(yè)。2022/8/205831 Purify界面第31頁(yè)，共58頁(yè)。2022/8/2058322.2 黑盒測(cè)試工具黑盒測(cè)試是基于需求說(shuō)明書(shū)的軟件測(cè)試，在這種測(cè)試下，我們不需要了解軟件的內(nèi)部結(jié)構(gòu)，內(nèi)部分支，以及軟件代碼的具體實(shí)現(xiàn)黑盒測(cè)試工具一般原理是利用腳本的錄制和回放，模擬用戶的操作，然后比較記錄結(jié)果和預(yù)先設(shè)定的結(jié)果來(lái)判定測(cè)試的正確性黑盒測(cè)試輸入輸出第32頁(yè)，共58頁(yè)。2022/8/2058332.2.1 典型的黑盒測(cè)試工具 典型的黑盒測(cè)試工具包括：Compuware公司的QACenterRational公司的teamTest、Robot等第33頁(yè)，共58頁(yè)。2022/8/205834

15、QACenter簡(jiǎn)介QACenter測(cè)試軟件是一個(gè)綜合型的測(cè)試工具集，它幫助測(cè)試人員創(chuàng)建一個(gè)快速、可重用的測(cè)試過(guò)程這些測(cè)試工具自動(dòng)幫助管理測(cè)試過(guò)程，快速分析和調(diào)試程序，包括針對(duì)回歸，強(qiáng)度，單元，并發(fā)，集成，移植，容量和負(fù)載建立測(cè)試用例，自動(dòng)執(zhí)行測(cè)試和產(chǎn)生文檔結(jié)果第34頁(yè)，共58頁(yè)。2022/8/205835 QACenter的組成QACenter主要包括以下幾個(gè)模塊：QARun：應(yīng)用的功能測(cè)試工具QALoad：強(qiáng)負(fù)載下應(yīng)用的性能測(cè)試工具QADirector：測(cè)試的組織設(shè)計(jì)和創(chuàng)建以及管理工具TrackRecord：集成的缺陷跟蹤管理工具EcoTools：高層次的性能監(jiān)測(cè)工具/link?url=D

16、ePzfsLyNzDNZlBW6jiuNVbwy4ipGzw5GUTm_SHC-tvXeSX0To4Q1bm0SDcnMGADlOe-2R9wjHHuIhN9O6_JC_第35頁(yè)，共58頁(yè)。2022/8/2058362.3 功能測(cè)試工具功能測(cè)試是對(duì)產(chǎn)品各功能進(jìn)行驗(yàn)證，根據(jù)功能測(cè)試用例，逐項(xiàng)測(cè)試，檢查產(chǎn)品是否達(dá)到用戶要求的功能功能測(cè)試工具包括：Rational Robot SilkTestWinRunner第36頁(yè)，共58頁(yè)。2022/8/2058372.3.1 Rational Robot Rational Robot 是rational 的產(chǎn)品之一，提供了軟件的功能測(cè)試，它提供了許多類似機(jī)器

17、人的重復(fù)過(guò)程IBM Rational Robot 可以讓測(cè)試人員對(duì) .NET、Java、Web和其他基于 GUI 的應(yīng)用程序進(jìn)行自動(dòng)的功能性回歸測(cè)試Rational Robot 可開(kāi)發(fā)三種測(cè)試腳本，包括用于功能測(cè)試的GUI腳本、用于性能測(cè)試的VU以及VB腳本第37頁(yè)，共58頁(yè)。2022/8/2058382.4 性能測(cè)試工具性能測(cè)試是指通過(guò)自動(dòng)化的測(cè)試工具模擬多種正常、峰值以及異常負(fù)載條件來(lái)對(duì)系統(tǒng)的各項(xiàng)性能指標(biāo)進(jìn)行測(cè)試性能測(cè)試工具用于測(cè)試軟件的性能，包括：HP公司的LoadRunnerMicrosoft公司的WebStressApache Jmeter（開(kāi)源軟件）第38頁(yè)，共58頁(yè)。2022/8

18、/2058392.4.1 LoadRunner LoadRunner是一種預(yù)測(cè)系統(tǒng)行為和性能的負(fù)載測(cè)試工具LoadRunner通過(guò)以模擬成千上萬(wàn)用戶實(shí)施并發(fā)負(fù)載及實(shí)時(shí)性能監(jiān)測(cè)的方式來(lái)確認(rèn)和查找問(wèn)題，其對(duì)整個(gè)企業(yè)架構(gòu)進(jìn)行測(cè)試LoadRunner可適用于各種體系架構(gòu)的自動(dòng)負(fù)載測(cè)試，能預(yù)測(cè)系統(tǒng)行為并評(píng)估系統(tǒng)性能第39頁(yè)，共58頁(yè)。2022/8/2058402.4.2 LoadRunner工作原理第40頁(yè)，共58頁(yè)。2022/8/2058412.4.3 LoadRunner界面第41頁(yè)，共58頁(yè)。2022/8/2058422.5 測(cè)試管理工具測(cè)試管理包括對(duì)測(cè)試計(jì)劃、測(cè)試用例、測(cè)試實(shí)施以及測(cè)試缺陷進(jìn)行管

19、理測(cè)試管理工具是對(duì)測(cè)試過(guò)程進(jìn)行管理的工具，典型的測(cè)試管理工具包括：Mercury Interactive公司（2006年被HP收購(gòu)）TestDirectorRational公司的testManagerMozilla公司的Bugzilla（開(kāi)源工具）第42頁(yè)，共58頁(yè)。2022/8/2058432.5.1 TestDirectorTestDirector是HP(Mercury Interactive)公司生產(chǎn)的企業(yè)級(jí)測(cè)試管理工具，也是業(yè)界第一個(gè)基于Web的測(cè)試管理系統(tǒng)，它可以在公司內(nèi)部或外部進(jìn)行全球范圍內(nèi)測(cè)試的管理通過(guò)在一個(gè)整體的應(yīng)用系統(tǒng)中集成了測(cè)試管理的各個(gè)部分，包括需求管理，測(cè)試計(jì)劃，測(cè)試執(zhí)

20、行以及錯(cuò)誤跟蹤等功能第43頁(yè)，共58頁(yè)。2022/8/2058442.5.2 TestDirector項(xiàng)目管理基于Internet的測(cè)試項(xiàng)目管理第44頁(yè)，共58頁(yè)。2022/8/2058452.5.3 TestDirector界面第45頁(yè)，共58頁(yè)。2022/8/205846問(wèn)題：有這么多的測(cè)試工具，你怎么選擇適合于你的測(cè)試工具呢？第46頁(yè)，共58頁(yè)。2022/8/2058473. 測(cè)試工具的選擇測(cè)試工具眾多，因此需要根據(jù)一定的條件來(lái)選擇適合自己要求的測(cè)試工具選擇的測(cè)試工具的因素：功能價(jià)格測(cè)試自動(dòng)化適合軟件生命周期的各個(gè)階段第47頁(yè)，共58頁(yè)。2022/8/2058483.1 選擇的步驟圖 測(cè)

21、試工具選擇步驟成立小組定義問(wèn)題測(cè)試自動(dòng)化的解決方案工具供應(yīng)商確定需求商務(wù)談判決定候選評(píng)估演示檢驗(yàn)約束工具軟件市場(chǎng)第48頁(yè)，共58頁(yè)。2022/8/2058493.1.1 選擇的步驟說(shuō)明成立小組負(fù)責(zé)測(cè)試工具的選擇和決策，制定時(shí)間表確定需求，并研究不同的解決方案了解市場(chǎng)上滿足需求的產(chǎn)品，包括：基本功能、價(jià)格、限制以及服務(wù)等根據(jù)了解的情況，決定是自己開(kāi)發(fā)還是從市場(chǎng)上購(gòu)買第49頁(yè)，共58頁(yè)。2022/8/2058503.1.2 選擇的步驟說(shuō)明（續(xù)）確定23種候選產(chǎn)品請(qǐng)候選產(chǎn)品廠家介紹、演示產(chǎn)品初步確定商務(wù)談判最后決定第50頁(yè)，共58頁(yè)。2022/8/205851問(wèn)題你知道什么是測(cè)試驅(qū)動(dòng)開(kāi)發(fā)嗎？第51頁(yè)，共58頁(yè)。2022/8/2058524. CppUnit單元測(cè)試測(cè)試驅(qū)動(dòng)開(kāi)發(fā)(TDD)是以測(cè)試作為開(kāi)發(fā)過(guò)程的中心，它堅(jiān)持在編寫(xiě)實(shí)際代碼之前，先寫(xiě)好基于產(chǎn)品代碼的測(cè)試代碼XUnit是一個(gè)基于測(cè)試驅(qū)動(dòng)開(kāi)發(fā)的測(cè)試框架，它為我們?cè)陂_(kāi)發(fā)過(guò)程中使用測(cè)試驅(qū)動(dòng)開(kāi)發(fā)提供了一個(gè)方便的工具，使我們得以快速的進(jìn)行單元測(cè)試XUnit的成員有很多，如JUnit，PythonUnit等；CppUnit是XUnit家族中一個(gè)專門(mén)面向C+的測(cè)試框架 第52頁(yè)，共58頁(yè)