性能測(cè)試要點(diǎn)及用例

目錄一、性能測(cè)試要點(diǎn)及用例模板 21、性能測(cè)試團(tuán)隊(duì)成員職責(zé)技能描述 22、性能測(cè)試工具需求規(guī)劃表 33、性能測(cè)試環(huán)境調(diào)查表 34、典型業(yè)務(wù)列表 35、業(yè)務(wù)用例描述 46、場(chǎng)景列表 47、測(cè)試計(jì)劃 48、測(cè)試環(huán)境檢查 59、測(cè)試執(zhí)行記錄日志 510、性能測(cè)試分析報(bào)告 611、性能測(cè)試應(yīng)用領(lǐng)域與測(cè)試方法的關(guān)聯(lián) 612、常用的性能測(cè)試過(guò)程 713、并發(fā)測(cè)試主要關(guān)注的問(wèn)題（常用的測(cè)試方法） 814、性能調(diào)優(yōu)的標(biāo)準(zhǔn)過(guò)程示例圖 815、性能測(cè)試腳本錄制時(shí)的協(xié)議類型 916、不同應(yīng)用領(lǐng)域的性能測(cè)試目標(biāo)和性能目標(biāo) 1017、Windows操作系統(tǒng)主要計(jì)數(shù)器 1018、Unix常用計(jì)數(shù)器 11

一、性能測(cè)試要點(diǎn)及用例模板1、性能測(cè)試團(tuán)隊(duì)成員職責(zé)技能描述角色職責(zé)技能測(cè)試經(jīng)理和用戶等項(xiàng)目干系人交互，確保測(cè)試的外部環(huán)境制定測(cè)試計(jì)劃監(jiān)控測(cè)試進(jìn)度發(fā)現(xiàn)和處理測(cè)試中的風(fēng)險(xiǎn)計(jì)劃執(zhí)行和監(jiān)控能力風(fēng)險(xiǎn)意識(shí)和能力外交能力和靈活變通的能力測(cè)試設(shè)計(jì)定義性能規(guī)劃識(shí)別用戶的性能需求建立性能場(chǎng)景業(yè)務(wù)把握能力性能需求分析和識(shí)別能力測(cè)試開(kāi)發(fā)實(shí)現(xiàn)已設(shè)計(jì)的性能場(chǎng)景腳本開(kāi)發(fā)、調(diào)試確定測(cè)試時(shí)需要監(jiān)控的性能指標(biāo)、性能計(jì)數(shù)器腳本編碼和調(diào)試能力理解性能指標(biāo)和性能計(jì)數(shù)器測(cè)試執(zhí)行部署測(cè)試環(huán)境執(zhí)行腳本和場(chǎng)景根據(jù)監(jiān)控要求記錄測(cè)試結(jié)果、記錄性能指標(biāo)和性能計(jì)數(shù)器值搭建測(cè)試環(huán)境的能力測(cè)試工具使用（執(zhí)行）的能力性能指標(biāo)和性能計(jì)數(shù)器值獲取和記錄的能力測(cè)試分析根據(jù)測(cè)試結(jié)果、性能指標(biāo)的數(shù)值、性能計(jì)數(shù)器值進(jìn)行分析能根據(jù)性能規(guī)劃，分析出系統(tǒng)性能瓶頸、或量給出優(yōu)化建議掌握性能測(cè)試工具的使用方法掌握應(yīng)用系統(tǒng)性能領(lǐng)域相關(guān)知識(shí)，理解所采用的架構(gòu)熟悉常用的性能分析方法具有一定的編碼經(jīng)驗(yàn)支持角色（系統(tǒng)）系統(tǒng)支持，協(xié)助解決測(cè)試工程師無(wú)法解決的系統(tǒng)問(wèn)題處理系統(tǒng)問(wèn)題的能力和技能，最好由專職的系統(tǒng)管理員擔(dān)任這個(gè)角色支持角色（網(wǎng)絡(luò)）網(wǎng)絡(luò)方面的支持，協(xié)助測(cè)試工程師解決網(wǎng)絡(luò)方面的問(wèn)題，在必要時(shí)為測(cè)試分析角色提供網(wǎng)絡(luò)方面的分析支持網(wǎng)絡(luò)方面的能力和技能，最好由專職的網(wǎng)絡(luò)管理員擔(dān)任這個(gè)角色支持角色（數(shù)據(jù)庫(kù)）數(shù)據(jù)庫(kù)方面的支持，在必要時(shí)為測(cè)試角色提供數(shù)據(jù)庫(kù)方面的支持?jǐn)?shù)據(jù)庫(kù)方面的能力和技能，最好由專職的DBA擔(dān)任這個(gè)角色2、性能測(cè)試工具需求規(guī)劃表被測(cè)試系統(tǒng)環(huán)境測(cè)試工具功能需求建議操作系統(tǒng)環(huán)境測(cè)試工具是否能運(yùn)行在本操作系統(tǒng)上測(cè)試工具是否支持對(duì)本操作系統(tǒng)的監(jiān)控應(yīng)用服務(wù)器環(huán)境測(cè)試工具能否支持對(duì)本應(yīng)用服務(wù)器的監(jiān)控?cái)?shù)據(jù)庫(kù)環(huán)境測(cè)試工具能否支持本數(shù)據(jù)庫(kù)的監(jiān)控應(yīng)用使用的協(xié)議本系統(tǒng)使用了哪些協(xié)議哪些協(xié)議需要在性能測(cè)試中通過(guò)工具進(jìn)行錄制和產(chǎn)生負(fù)載測(cè)試工具能否支持需要進(jìn)行錄制和產(chǎn)生負(fù)載的協(xié)議網(wǎng)絡(luò)環(huán)境是否需要測(cè)試工具支持防火墻是否需要測(cè)試工具支持負(fù)載均衡測(cè)試管理支持測(cè)試工具是否能夠提供方便的測(cè)試結(jié)果分析和管理3、性能測(cè)試環(huán)境調(diào)查表性能測(cè)試環(huán)境描述系統(tǒng)架構(gòu)描述系統(tǒng)技術(shù)架構(gòu)描述系統(tǒng)物理架構(gòu)描述服務(wù)器需求服務(wù)器類別和數(shù)量每臺(tái)服務(wù)器的配置（CPU、內(nèi)存、磁盤(pán)、操作系統(tǒng)（含參數(shù)）、應(yīng)用軟件）客戶端環(huán)境使用的瀏覽器/客戶端應(yīng)用版本網(wǎng)絡(luò)傳輸狀況（限制）吞吐量估算4、典型業(yè)務(wù)列表功能所屬模塊訪問(wèn)路徑備注5、業(yè)務(wù)用例描述Case編號(hào)測(cè)試類型簡(jiǎn)短描述客戶需求列表軟件需求編號(hào)場(chǎng)景引用列表測(cè)試優(yōu)先級(jí)前置條件測(cè)試步驟參數(shù)化需求驗(yàn)證點(diǎn)創(chuàng)建人創(chuàng)建時(shí)間備注6、場(chǎng)景列表場(chǎng)景名稱場(chǎng)景業(yè)務(wù)及用戶比例分配測(cè)試指標(biāo)性能計(jì)數(shù)器用戶登錄登陸業(yè)務(wù)，100%用戶總用戶數(shù)200人響應(yīng)時(shí)間（<5s）服務(wù)器CPU使用率服務(wù)器內(nèi)存使用率標(biāo)準(zhǔn)日常工作入賬業(yè)務(wù)，40%用戶查詢業(yè)務(wù)，30%用戶統(tǒng)計(jì)業(yè)務(wù)，30%用戶總用戶數(shù)200人響應(yīng)時(shí)間（入賬<6s）（查詢<5s）（統(tǒng)計(jì)<10s）服務(wù)器CPU使用率服務(wù)器內(nèi)存使用率……………………7、測(cè)試計(jì)劃1．引言 1.1編寫(xiě)目的2．參考文檔3．測(cè)試目的4．測(cè)試范圍4.1測(cè)試對(duì)象4.2需要測(cè)試的特性4.3無(wú)需測(cè)試的特性5．測(cè)試啟動(dòng)與結(jié)束準(zhǔn)則5.1啟動(dòng)準(zhǔn)則5.2結(jié)束準(zhǔn)則6．測(cè)試方法6.1測(cè)試工具6.2測(cè)試設(shè)計(jì)6.3測(cè)試用例與測(cè)試場(chǎng)景7．測(cè)試類型7.1能力驗(yàn)證測(cè)試7.2容量規(guī)劃測(cè)試7.3穩(wěn)定性測(cè)試8．測(cè)試環(huán)境維護(hù)原則9．測(cè)試輸出10．測(cè)試資源需求與時(shí)間計(jì)劃8、測(cè)試環(huán)境檢查條目名稱檢查內(nèi)容責(zé)任人維護(hù)方法硬件環(huán)境硬件環(huán)境是否與拓?fù)涿枋鲆恢掠布負(fù)浣Y(jié)構(gòu)圖軟件環(huán)境軟件環(huán)境是否與軟件環(huán)境列表中描述一致軟件環(huán)境列表應(yīng)用部署是否成功應(yīng)用部署檢查測(cè)試輔助工具是否部署成功測(cè)試輔助工具部署檢查軟件參數(shù)設(shè)置是否符合要求軟件參數(shù)設(shè)置表數(shù)據(jù)環(huán)境數(shù)據(jù)是否與數(shù)據(jù)要求描述表中描述一致數(shù)據(jù)要求描述表上次測(cè)試是否引入了額外的數(shù)據(jù)而沒(méi)有清除數(shù)據(jù)維護(hù)腳本或是Import方式9、測(cè)試執(zhí)行記錄日志日期標(biāo)題測(cè)試內(nèi)容結(jié)果測(cè)試人10、性能測(cè)試分析報(bào)告1．測(cè)試背景2．測(cè)試目的3．測(cè)試概要描述3.1被測(cè)系統(tǒng)描述3.2測(cè)試時(shí)間3.3測(cè)試地點(diǎn)3.4測(cè)試人員3.5測(cè)試工具和環(huán)境3.6測(cè)試方案簡(jiǎn)介4．測(cè)試結(jié)果和結(jié)論4.1測(cè)試結(jié)論4.2測(cè)試結(jié)論的限制4.3對(duì)系統(tǒng)的建議5．原始數(shù)據(jù)和報(bào)告5.1測(cè)試執(zhí)行記錄5.2原始數(shù)據(jù)文件5.3測(cè)試工具生成的報(bào)告11、性能測(cè)試應(yīng)用領(lǐng)域與測(cè)試方法的關(guān)聯(lián)能力驗(yàn)證規(guī)劃能力性能調(diào)優(yōu)發(fā)現(xiàn)缺陷PerformanceTesting性能測(cè)試★L(fēng)oadTesting負(fù)載測(cè)試★★StressTesting壓力測(cè)試★★★★ConfigurationTesting配置測(cè)試★★ConcurrencyTesting并發(fā)測(cè)試★ReliabilityTesting可靠性測(cè)試★FailoverTesting失效恢復(fù)測(cè)試★★★12、常用的性能測(cè)試過(guò)程13、并發(fā)測(cè)試主要關(guān)注的問(wèn)題（常用的測(cè)試方法）問(wèn)題類別問(wèn)題描述內(nèi)存問(wèn)題是否有內(nèi)在泄漏（C/C++）是否有太多的臨時(shí)對(duì)象（Java）是否有太多的超過(guò)設(shè)計(jì)生命周期的對(duì)象（Java）數(shù)據(jù)庫(kù)問(wèn)題是否有數(shù)據(jù)庫(kù)死鎖（DeadLock）是否經(jīng)常出現(xiàn)長(zhǎng)事務(wù)（LongTransaction）線程/進(jìn)程問(wèn)題是否出現(xiàn)線程/進(jìn)程同步失敗其它問(wèn)題是否出現(xiàn)資源爭(zhēng)用導(dǎo)致的死鎖是否沒(méi)有正確處理異常（例如超時(shí)等）導(dǎo)致系統(tǒng)死鎖14、性能調(diào)優(yōu)的標(biāo)準(zhǔn)過(guò)程示例圖15、性能測(cè)試腳本錄制時(shí)的協(xié)議類型應(yīng)用類型應(yīng)用特點(diǎn)建議選用協(xié)議備注Web應(yīng)用應(yīng)用采用ASP結(jié)構(gòu)、J2EE或是.Net架構(gòu)HTTP/HTTPS協(xié)議Web應(yīng)用一般采用Http/Https協(xié)議進(jìn)行性能測(cè)試腳本錄制，但特別要指出的是，有些借助客戶端運(yùn)行的組件采用自定義Socket或是其他協(xié)議與服務(wù)器進(jìn)行通信，此時(shí)需要在錄制時(shí)選擇多種協(xié)議C/S應(yīng)用客戶端程序以ADO、Oledb方式連接后臺(tái)數(shù)據(jù)庫(kù)根據(jù)后臺(tái)數(shù)據(jù)庫(kù)類型選擇相應(yīng)協(xié)議例如，如果后臺(tái)數(shù)據(jù)庫(kù)是Oracle,則在錄制時(shí)選擇Oracle協(xié)議客戶端程序ODBC方式連接后臺(tái)數(shù)據(jù)庫(kù)ODBC協(xié)議無(wú)客戶端和服務(wù)器之間通過(guò)自定義的Socket協(xié)議進(jìn)行通信Socket協(xié)議無(wú)其它協(xié)議根據(jù)具體協(xié)議類型進(jìn)行分析例如，有些應(yīng)用為了能夠適應(yīng)復(fù)雜的廣域網(wǎng)環(huán)境，采用HTTP協(xié)議為C/S結(jié)構(gòu)應(yīng)用的客戶端和服務(wù)端之間的通信協(xié)議，此時(shí)可以根據(jù)具體的協(xié)議來(lái)選擇錄制使用的協(xié)議組件COM/DCOMCOM/DCOM這里提到的是針對(duì)組件的測(cè)試，商業(yè)性能測(cè)試工具一般提供了一種直接測(cè)試組件接口性能的方法EJBEJB協(xié)議服務(wù)WebServiceWebService協(xié)議有些人可能會(huì)用Http協(xié)議來(lái)錄制對(duì)WebService服務(wù)進(jìn)行性能測(cè)試的腳本，建議使用專門(mén)的WebService協(xié)議進(jìn)行錄制Mail服務(wù)器SMTP和POP協(xié)議無(wú)FTP服務(wù)器FTP協(xié)議無(wú)其它根據(jù)具體的協(xié)議選擇最接近的錄制協(xié)議無(wú)應(yīng)用服務(wù)器OracleApplicationServerOracleApplicationServer協(xié)議無(wú)SAPSAP協(xié)議無(wú)TuxedoTuxedo協(xié)議無(wú)其它根據(jù)具體協(xié)議選擇最接近的無(wú)16、不同應(yīng)用領(lǐng)域的性能測(cè)試目標(biāo)和性能目標(biāo)應(yīng)用領(lǐng)域性能測(cè)試目標(biāo)性能目標(biāo)能力驗(yàn)證驗(yàn)證系統(tǒng)在給定環(huán)境中的性能能力重點(diǎn)關(guān)注的關(guān)鍵業(yè)務(wù)響應(yīng)時(shí)間、吞吐量規(guī)劃能力驗(yàn)證系統(tǒng)的性能擴(kuò)展能力，找出系統(tǒng)能力擴(kuò)充的關(guān)鍵點(diǎn)，給出改善其性能擴(kuò)展能力的建議業(yè)務(wù)的性能瓶頸性能調(diào)優(yōu)提高系統(tǒng)的性能表現(xiàn)重點(diǎn)關(guān)注的關(guān)鍵業(yè)務(wù)響應(yīng)時(shí)間，吞吐量發(fā)現(xiàn)缺陷發(fā)現(xiàn)系統(tǒng)中的缺陷無(wú)17、Windows操作系統(tǒng)主要計(jì)數(shù)器類別計(jì)數(shù)器名稱計(jì)數(shù)器描述MemoryAvailableMbytes可用物理內(nèi)存數(shù)Pages/sec表明由于硬件頁(yè)面錯(cuò)誤而從磁盤(pán)取出的頁(yè)面數(shù)，或由于頁(yè)面錯(cuò)誤而寫(xiě)入磁盤(pán)以釋放工作集空間的頁(yè)面數(shù)PagesRead/sec頁(yè)的硬故障,Pages/sec的子集,為了解析對(duì)內(nèi)存的引用,必須讀取頁(yè)文件的次數(shù).閾值為5.數(shù)值越低越好.大數(shù)值表示是磁盤(pán)讀而不是緩存讀PageFaults/sec此值為處理器中的頁(yè)面錯(cuò)誤的計(jì)數(shù),當(dāng)進(jìn)程引用特定的虛擬內(nèi)存頁(yè),該頁(yè)不在其主內(nèi)存的工作集當(dāng)中時(shí),將出現(xiàn)頁(yè)面錯(cuò)誤.如果某頁(yè)已經(jīng)位于內(nèi)存中,或者它正在被共享該頁(yè)的其他進(jìn)程所使用,則頁(yè)面錯(cuò)誤不會(huì)導(dǎo)致該頁(yè)從磁盤(pán)中讀取CacheBytes文件系統(tǒng)緩存(FileSystemCache),默認(rèn)情況下為50%的可用物理內(nèi)存Process%ProcessorTime被處理器消耗的處理器的時(shí)間數(shù)量。如果是專用于某種特定應(yīng)用（例如數(shù)據(jù)庫(kù)服務(wù)器或是應(yīng)用服務(wù)器），則可用應(yīng)用相關(guān)進(jìn)程%ProcessTime進(jìn)行衡量，此時(shí)，可接受的上限一般不超過(guò)85%PageFaults/sec將進(jìn)程產(chǎn)生的頁(yè)故障與系統(tǒng)產(chǎn)生的相比較，以判斷這個(gè)進(jìn)程對(duì)系統(tǒng)頁(yè)故障產(chǎn)生的影響Workset處理線程最近使用的內(nèi)存頁(yè)，反映了每一個(gè)進(jìn)程使用的內(nèi)存頁(yè)的數(shù)量。如果服務(wù)器有足夠的空閑內(nèi)存，頁(yè)就會(huì)被留在工作集中，當(dāng)自由內(nèi)存少于一個(gè)特定的閾值時(shí)，頁(yè)就會(huì)被清除出工作集PrivateBytes此進(jìn)程所分配的無(wú)法與其它進(jìn)程共享的當(dāng)前字節(jié)數(shù)量。如果系統(tǒng)性能隨著時(shí)間而降低，則此計(jì)數(shù)器可以是內(nèi)存泄漏的最佳指示器。Processor%ProcessorTime如果該值持續(xù)超過(guò)95%，表明瓶頸是CPU，可以考慮增加一個(gè)處理器或換一個(gè)更快的處理器%UserTime非內(nèi)核操作耗費(fèi)的CPU時(shí)間。一般來(lái)說(shuō)，如果系統(tǒng)中使用了大量的算法或是復(fù)雜的計(jì)算操作，該值會(huì)比較大%PrivilegedTimeCpu內(nèi)核時(shí)間是在特權(quán)模式下處理線程執(zhí)行代碼所花時(shí)間的百分比%DPCTimeCPU消耗在網(wǎng)絡(luò)處理上的時(shí)間，些值越低越好PhysicalDisk%DiskTime指所選磁盤(pán)驅(qū)動(dòng)器忙于為讀或?qū)懭胝?qǐng)求提供服務(wù)所用的時(shí)間的百分比AverageDiskQueueLength指讀取和寫(xiě)入請(qǐng)求（為所選磁盤(pán)在實(shí)例間隔中列隊(duì)的）的平均數(shù)。該值應(yīng)不超過(guò)磁盤(pán)數(shù)的1.5-2倍。要提高性能，可增加磁盤(pán)。注意：一個(gè)Raiddisk實(shí)際有多個(gè)磁盤(pán)AverageDiskRead/WriteQueueLength指讀?。▽?xiě)入）請(qǐng)求（列隊(duì)）的平均數(shù)DiskRead(Writes)/sec物理磁盤(pán)上每秒種磁盤(pán)讀、寫(xiě)的次數(shù)。兩者相加，應(yīng)小于磁盤(pán)設(shè)備最大容量AverageDisksec/Read指以秒計(jì)算的在此盤(pán)上讀取數(shù)據(jù)的所需平均時(shí)間AverageDisksec/Transfer指以秒計(jì)算的在此盤(pán)上寫(xiě)入數(shù)據(jù)的所需平均時(shí)間NetworkInterfaceBytesTotal/sec為發(fā)送和接收字節(jié)的速率，包括幀字符在內(nèi)。判斷網(wǎng)絡(luò)連接速度是否是瓶頸，可以用該計(jì)數(shù)器的值和目前網(wǎng)絡(luò)的帶寬比較System%TotalProcessorTime系統(tǒng)上所有處理器都忙于執(zhí)行非空閑線程的平均時(shí)間的百分比，該值反映了用于有用作業(yè)上的時(shí)間的比率。對(duì)單處理器系統(tǒng)來(lái)說(shuō)，該值很容易理解；對(duì)多處理器系統(tǒng)來(lái)說(shuō)，該值是體現(xiàn)了所有處理器的平均繁忙程度。例如，如果所有處理器都繁忙，此值為100%，如果有一半的處理器繁忙，另一半處理器為安全空閑，此值為50%。FileDataOperations/sec計(jì)算機(jī)對(duì)文件系統(tǒng)設(shè)置執(zhí)行讀取和寫(xiě)入操作的速率。本計(jì)數(shù)器的計(jì)數(shù)不包括文件控制操作ProcessorQueueLength線程單元中處理器隊(duì)列的即時(shí)長(zhǎng)度。所有處理器都使用單一隊(duì)列（線程在該隊(duì)列中等待處理器進(jìn)行循環(huán)）。此長(zhǎng)度不包括當(dāng)前正在執(zhí)行的線程。一般情況下，如果處理器隊(duì)列的長(zhǎng)度一直超過(guò)服務(wù)器上可用處理器隊(duì)列的長(zhǎng)度一直超過(guò)服務(wù)器上可用處理器的總數(shù)量+1，則可能表示處理器堵塞。18、Unix常用計(jì)數(shù)器類別計(jì)數(shù)器名稱計(jì)數(shù)器描述MemoryFree(KB)可用物理內(nèi)存數(shù)Swap(KB)已使用的虛擬內(nèi)存數(shù)量。在Linux系統(tǒng)中。該值被標(biāo)識(shí)為Swap(page)si每秒從磁盤(pán)交換到內(nèi)存的數(shù)量。在Linux系統(tǒng)中，該值被放在Swap區(qū)中(page)so每秒從內(nèi)存交換出的內(nèi)存數(shù)量。在Linux系統(tǒng)中，該值被放在Swap區(qū)中Cache(KB)文件系統(tǒng)緩存Process%CPUUsage被處理器消耗的處理器時(shí)間數(shù)量。如果是專用于某種特定應(yīng)用（例如數(shù)據(jù)庫(kù)服務(wù)器或是應(yīng)用服務(wù)器）。則可用應(yīng)用相關(guān)進(jìn)程的%ProcessorTime進(jìn)行衡量，此時(shí)，可接受的上限一般是不超過(guò)85%PageFaultscount該進(jìn)程產(chǎn)生的頁(yè)面失效次數(shù)?？梢杂迷撝蹬c系統(tǒng)的頁(yè)面失效的影響Residentsize(KB)進(jìn)程保留的使用內(nèi)存量。該數(shù)值等于進(jìn)程的代碼使用內(nèi)存十進(jìn)程的數(shù)據(jù)使用內(nèi)存。如果該值在測(cè)試過(guò)程中持續(xù)增加，很可能意味著發(fā)生了內(nèi)存泄漏。Processor%IdleTimeIdletime%描述的是CPU總的空閑時(shí)間。如果該值持續(xù)低于10%，表明瓶頸是CPU?？梢钥紤]增加一個(gè)處理器或換一個(gè)更快的處理器%UserTime非內(nèi)核操作耗費(fèi)的CPU時(shí)間。一般來(lái)說(shuō)。如果系統(tǒng)中使用了大量的算法或是復(fù)雜的計(jì)算操作，該值會(huì)比較大%KernelTimeCPU內(nèi)核時(shí)間是在特權(quán)模式下處理線程執(zhí)行代碼