某軟件系統(tǒng)經(jīng)典測試報(bào)告

..軟件系統(tǒng)測試報(bào)告——某軟件系統(tǒng)測評單位：背景：如今網(wǎng)上招聘越來越普遍,但有些招聘系統(tǒng)的綜合性能不是很好,比如系統(tǒng)的冗余、系統(tǒng)的性能、安全性、完整性等等都有待提高,本次測試的目的就是針對本系統(tǒng)的性能進(jìn)行測試。實(shí)驗(yàn)?zāi)康?、通過對測試結(jié)果的分析,得到對軟件質(zhì)量的評價(jià)2、分析測試的過程,產(chǎn)品,資源,信息,為以后制定測試計(jì)劃提供參考3、評估測試測試執(zhí)行和測試計(jì)劃是否符合4、分析系統(tǒng)存在的缺陷,為修復(fù)和預(yù)防bug提供建議二、實(shí)驗(yàn)內(nèi)容該文檔的目的是描述網(wǎng)上招聘系統(tǒng)項(xiàng)目客戶端系統(tǒng)測試的總結(jié)報(bào)告,其主要內(nèi)容包括：系統(tǒng)環(huán)境簡介1、軟件名稱：網(wǎng)上招聘求職系統(tǒng)2、軟件功能：為求職者提供求職、收藏、信息交互等功能；為招聘單位提供招聘、收藏、信息交互等功能；為管理員提供管理網(wǎng)站公告、友情鏈接和網(wǎng)站會員的管理功能。3、用戶：求職者、招聘單位、管理員4、開發(fā)者：ZSS系統(tǒng)數(shù)據(jù)度量系統(tǒng)結(jié)果評估用戶群：1、項(xiàng)目管理人員2、測試人員范圍：該文檔定義了客戶端系統(tǒng)測試的結(jié)果,總結(jié)了測試客戶端的職位查詢、網(wǎng)上提交簡歷、在線答題的基本功能,以及支持大數(shù)據(jù)量并發(fā)訪問的性能,給出了測試的結(jié)論。2.1嚴(yán)重bug：出現(xiàn)以下缺陷,測試定義為嚴(yán)重bug系統(tǒng)無響應(yīng),處于死機(jī)狀態(tài),需要其他人工修復(fù)系統(tǒng)才可復(fù)原。點(diǎn)擊某個(gè)菜單后出現(xiàn)"Thepagecannotbedisplayed"或者返回異常錯(cuò)誤。進(jìn)行某個(gè)操作〔增加、修改、刪除等后,出現(xiàn)"Thepagecannotbedisplayed"或者返回異常錯(cuò)誤2.2縮寫說明HRHumanResource〔人力資源管理的縮寫。MVCＭｏｄｅｌ－Ｖｉｅｗ－Ｃｏｎｔｒｏｌ〔模式－視圖－控制的縮寫,表示一個(gè)三層的結(jié)構(gòu)體系。2.3測試類型a、功能性測試:按照系統(tǒng)需求定義中的功能定義部分對系統(tǒng)實(shí)行的系統(tǒng)級別的測試。b、非功能性測試:按照系統(tǒng)需求定義中的非功能定義部分〔如系統(tǒng)的性能指標(biāo),安全性能指標(biāo)等對系統(tǒng)實(shí)行的系統(tǒng)級別的測試。c、測試用例：測試人員設(shè)計(jì)出來的用來測試軟件某個(gè)功能的一種情形2.4參考資料[1]《LoadRunner使用手冊》北京長江軟件編制[2]《網(wǎng)上招聘客戶端需求說明》北京長江軟件編制[3]《軟件測試技術(shù)概論》古樂史九林編著/清華大學(xué)出版社[4]《軟件測試：第二版》PaulC.Jorgensen著/機(jī)械工業(yè)出版社2.5測試執(zhí)行此次測試嚴(yán)格按照項(xiàng)目計(jì)劃和測試計(jì)劃執(zhí)行,按時(shí)完成了測試計(jì)劃規(guī)定的測試對象的測試。針對測試計(jì)劃規(guī)定的測試策略,在測試執(zhí)行中都有體現(xiàn),在測試執(zhí)行過程中,依據(jù)測試計(jì)劃和測試用例,對系統(tǒng)進(jìn)行了完整的測試三、測試環(huán)境描述本測試的測試目的是驗(yàn)證網(wǎng)上招聘系統(tǒng)的客戶端能否實(shí)現(xiàn)應(yīng)聘者的職位查詢、簡歷提交、問卷的答復(fù)等基本功能,以及并發(fā)訪問的性能。為此,采用Mercury的LoadRunner7.5１測試工具進(jìn)行壓力測試,驗(yàn)證是否滿足系統(tǒng)的需求。測試機(jī)器是安裝了LoadRunner7.5１測試工具的客戶機(jī),可以執(zhí)行功能也可以采用工具錄制功能,并模擬多人并發(fā)訪問系統(tǒng),監(jiān)控系統(tǒng)的性能,得出分析結(jié)果。如圖G－１。圖G-1:測試機(jī)器的環(huán)境圖G-1:測試機(jī)器的環(huán)境安裝了安裝了LoadRunner7.5１的客戶機(jī)這個(gè)測試機(jī)器的配置環(huán)境如下：操作系統(tǒng)：WindowsXP配置工具：Tomcat5.0以上瀏覽器：MicrsoftIECPU：2.0以上四、功能測試執(zhí)行情況測試計(jì)劃單元測試〔類測試：2010年10月1日-2010年11月30日集成測試〔交互測試：2010年12月1日-2010年12月10日系統(tǒng)測試：2010年12月11日-2010年12月31日測試方案單元測試方案：由開發(fā)人員在系統(tǒng)開發(fā)過程中對編寫的系統(tǒng)函數(shù)以及數(shù)據(jù)庫接口函數(shù)等使用白盒測試方法進(jìn)行單元測試。集成測試方案：由測試小組在單元測試結(jié)束后對使用黑盒測試方法對各單元組合在一起能否按照既定意圖寫作運(yùn)行進(jìn)行測試。系統(tǒng)測試方案：由測試小組在集成測試結(jié)束后對整個(gè)系統(tǒng)能否在實(shí)際軟件要求的環(huán)境正常運(yùn)行,并且對最終的系統(tǒng)軟件進(jìn)行全面的測試,以確保最終軟件系統(tǒng)滿足產(chǎn)品需求并且遵循系統(tǒng)設(shè)計(jì)。測試說明由于篇幅有限,只寫出部分重要代表性測試用例,有個(gè)人注冊、個(gè)人簡歷填寫、上傳照片的測試用例。其他測試略。表G-2是測試用例執(zhí)行情況的綜述。表G-2:測試用例的度量數(shù)據(jù)被測對象用例執(zhí)行總數(shù)發(fā)現(xiàn)缺陷數(shù)首頁TestCase-FUNC-01TestCase-FUNC-02TestCase-FUNC-03TestCase-FUNC-048＋13填寫基本信息頁面TestCase-FUNC-05TestCase-FUNC-0629＋19填寫工作經(jīng)歷頁面TestCase-FUNC-05TestCase-FUNC-0712＋11填寫教育經(jīng)歷頁面TestCase-FUNC-05TestCase-FUNC-0810＋11填寫工作技能頁面TestCase-FUNC-05TestCase-FUNC-094＋12填寫家庭關(guān)系頁面TestCase-FUNC-05TestCase-FUNC-106＋16填寫自我介紹頁面TestCase-FUNC-05TestCase-FUNC-111＋11預(yù)覽應(yīng)聘者簡歷TestCase-FUNC-05TestCase-FUNC-120＋10回答問卷界面TestCase-FUNC-05TestCase-FUNC-131＋20直接訪問后續(xù)頁面TestCase-Perf-18＋18并發(fā)訪問系統(tǒng)TestCase-Perf-20＋10４.2性能測試執(zhí)行情況性能測試是通過Ｌｏａｄｒｕｎｎｅｒ測試工具模擬２０個(gè)人同時(shí)訪問系統(tǒng)的客戶端。首先錄制客戶端的基本操作,然后設(shè)置參數(shù)以保證２０個(gè)腳本的輸入是不完全一致的。通過設(shè)置執(zhí)行情景來實(shí)施性能測試,打開監(jiān)控窗口監(jiān)控系統(tǒng)運(yùn)行狀況,最后得到執(zhí)行結(jié)果報(bào)告?；顒佑脩粢晥D圖G－３是２０個(gè)模擬用戶的運(yùn)行結(jié)果。從圖中可以看到有２０個(gè)虛擬用戶在同時(shí)訪問系統(tǒng)的客戶端。圖G－３：２０個(gè)模擬用戶每分鐘點(diǎn)擊數(shù)圖G－３：２０個(gè)模擬用戶圖G－４是２０個(gè)用戶并發(fā)訪問客戶端時(shí),每分鐘的點(diǎn)擊數(shù)。從圖中可以看出,由于設(shè)定了集合點(diǎn),點(diǎn)擊數(shù)大的集中在每次填寫完表單提交數(shù)據(jù)時(shí)。圖G－４：每分鐘的點(diǎn)擊數(shù)圖G－４：每分鐘的點(diǎn)擊數(shù)吞吐率圖G－５是２０個(gè)用戶訪問時(shí)吞吐率,從圖中可以看出,同樣由于在每次提交數(shù)據(jù)時(shí)設(shè)定了集合點(diǎn),吞吐率大都集中在每次填寫完表單、提交數(shù)據(jù)的時(shí)候。而前4個(gè)頁面由于需要下載圖片,因此吞吐率也相對較大。圖G－５：訪問吞吐率圖G－５：訪問吞吐率事務(wù)概要圖G－６是２０個(gè)模擬用戶的事務(wù)圖。圖G－６：事務(wù)圖圖G－６：事務(wù)圖說明：事務(wù)分別對應(yīng)于每次點(diǎn)擊進(jìn)入下一個(gè)界面。順序依次是：init,login,config1,config2,config3,config4,config5,end事務(wù)響應(yīng)時(shí)間圖G－７是模擬２０個(gè)并發(fā)用戶的設(shè)置的事務(wù)的響應(yīng)時(shí)間圖,從圖表中可以看出,在最后一次提交頁面時(shí),反應(yīng)時(shí)間最長。圖G－７：性能測試的事務(wù)響應(yīng)時(shí)間圖G－７：性能測試的事務(wù)響應(yīng)時(shí)間綜述上圖得到如下結(jié)論：并發(fā)用戶數(shù)：20通過交易總數(shù)：220總吞吐量：〔bytes5436861平均吞吐量〔bytes/second：22844總hits數(shù)：920每秒平均hits數(shù)：3.866事務(wù)時(shí)間響應(yīng),見表G－３。表G－３：事務(wù)的響應(yīng)時(shí)間查響應(yīng)時(shí)間差交易事務(wù)最大值最小值平均值變化率開始0000顯示職位列表查看職位詳細(xì)信息43.97436.39937.5441.802填寫提交個(gè)人資料56.68749.68954.8681.677填寫提交工作經(jīng)歷42.15732.09436.2111.966填寫提交教育經(jīng)歷30.57719.28625.6402.262填寫提交基本技能17.73611.56314.9751.267填寫提交家庭成員12.4068.43611.0790.92填寫提交各人評價(jià)預(yù)覽簡歷50.07848.23549.3270.468答題并提交結(jié)果6.8374.3155.650.568關(guān)閉網(wǎng)頁0000結(jié)束0000五、測試結(jié)果分析5.1測試進(jìn)度和工作量度量功能測試的進(jìn)度和工作量計(jì)劃與實(shí)際比較結(jié)果如下。5.1.1進(jìn)度度量表G－4是測試進(jìn)度的計(jì)劃與實(shí)際結(jié)果比較。從度量數(shù)據(jù)看實(shí)際進(jìn)度與計(jì)劃基本相符。表G－4：是測試進(jìn)度的度量數(shù)據(jù)任務(wù)計(jì)劃開始計(jì)劃結(jié)束實(shí)際開始實(shí)際結(jié)束測試計(jì)劃與設(shè)計(jì)2006-5-192006-5-262006-5-152006-6-1測試執(zhí)行2006-6-122006-7-22006-6-172006-7-1測試總結(jié)2006-7-32006-7-52006-6-302006-7-15.1.2工作量度量表G－5是實(shí)際測試工作量的數(shù)據(jù),與計(jì)劃基本相符。表G－5：是測試工作量度量執(zhí)行任務(wù)開始時(shí)間結(jié)束時(shí)間工作量〔人時(shí)測試計(jì)劃與設(shè)計(jì)2006-5-152006-6-120×3人時(shí)測試執(zhí)行2006-6-172006-7-115×3人時(shí)測試總結(jié)2006-6-302006-7-16×3人時(shí)5.2缺陷數(shù)據(jù)度量表G－6是測試過程缺陷數(shù)據(jù)的總結(jié)情況,從缺陷的嚴(yán)重程度看,嚴(yán)重和致命的缺陷占的比例較大,說明系統(tǒng)還是存在嚴(yán)重問題,需要重新修改,產(chǎn)品不能提交。從缺陷的類型看,功能缺陷、賦值缺陷和設(shè)計(jì)缺陷占比較大的比例,說明設(shè)計(jì)和編碼過程中存在很大的問題。表G－6：測試過程的缺陷數(shù)據(jù)被測對象總數(shù)嚴(yán)重程度缺陷類型致命嚴(yán)重一般提示設(shè)計(jì)錯(cuò)誤賦值錯(cuò)誤算法錯(cuò)誤接口錯(cuò)誤功能錯(cuò)誤其它首頁30102210000填寫基本信息頁面90045000090填寫工作經(jīng)歷頁面11000010000填寫教育經(jīng)歷頁面11000010000填寫工作技能頁面22000020000填寫家庭關(guān)系頁面66000060000填寫自我介紹頁面11000010000回答問卷界面00000000000直接訪問后續(xù)頁面808000800005.3綜合數(shù)據(jù)分析根據(jù)測試的結(jié)果可以得出如下的分析數(shù)據(jù)。用例執(zhí)行效率＝執(zhí)行用例總數(shù)/執(zhí)行總時(shí)間〔小時(shí)＝128/45＝2.84〔個(gè)/小時(shí)用例質(zhì)量＝缺陷總數(shù)/用例總數(shù)×100＝31/128*100＝24.2％根據(jù)缺陷跟蹤結(jié)果得出缺陷的嚴(yán)重程序分布和的缺陷的類型分布,如圖G－8和圖G－9。缺陷嚴(yán)重程度分布餅圖：圖G－8：缺陷嚴(yán)重程度的分布圖G－8：缺陷嚴(yán)重程度的分布缺陷類型分布餅圖：圖G－9：缺陷類型分布圖圖G－9：缺陷類型分布圖可靠性現(xiàn)有系統(tǒng)的可靠性控制不夠嚴(yán)密,很多控制是通過頁面控制實(shí)現(xiàn)的,如果頁面控制失效,可以向數(shù)據(jù)庫插入數(shù)據(jù),引發(fā)錯(cuò)誤?，F(xiàn)有系統(tǒng)的容錯(cuò)性不高,如果系統(tǒng)出現(xiàn)錯(cuò)誤,返回錯(cuò)誤類型為找不到頁面錯(cuò)誤,無法回復(fù)到出錯(cuò)前的狀態(tài)兼容性現(xiàn)有系統(tǒng)支持window下的IE瀏覽器和傲游瀏覽器,支持linux系統(tǒng)下的IE瀏覽器和火狐瀏覽器?，F(xiàn)有系統(tǒng)未進(jìn)行其他兼容性測試安全性現(xiàn)有系統(tǒng)控制了以下安全性問題：把某一個(gè)登錄后的頁面保存下來,不能單獨(dú)對其進(jìn)行操作不進(jìn)行登錄直接輸入某一頁面的Url能否打開頁面并進(jìn)行操作不應(yīng)該允許?，F(xiàn)有系統(tǒng)未控制以下安全性問題：用戶名和密碼應(yīng)對大小寫敏感登陸錯(cuò)誤次數(shù)限制5.4詳細(xì)測試結(jié)果1.個(gè)人注冊功能測試如表序序號測試目的&先決條件測試輸入預(yù)期測試結(jié)果實(shí)際測試結(jié)果111目的：正確輸入,注冊能否操作成功用戶名：zhang<數(shù)字、字母、下劃線組成密碼：123456<長度大于5的數(shù)字、字母、下劃線組成的字符串重復(fù)密碼：123456〔與密碼相同密碼找回問題：我是誰？<字符串>密碼找回答案：張三<字符串>轉(zhuǎn)到成功頁面同預(yù)期測試結(jié)果2目的：檢測系統(tǒng)對用戶名的檢測程度2.1不輸用戶名"用戶名不能為空"同預(yù)期測試結(jié)果2.2輸入已存在用戶名:zhang用戶名已存在2.3用戶名：123.abc"用戶名只能由數(shù)字字母下劃線組成"2.4用戶名：-12345"用戶名只能由數(shù)字字母下劃線組成"3目的：檢測系統(tǒng)對密碼輸入的檢測程度3.1不輸入密碼"密碼不能為空且不能少于6位"同預(yù)期測試結(jié)果3.2密碼：12345"密碼不能為空且不能少于6位"4目的：檢測系統(tǒng)對重復(fù)密碼輸入的檢測程度4.1重復(fù)密碼：12345"您兩次密碼輸入不一致"同預(yù)期測試結(jié)果4.2密碼：_123abc重復(fù)密碼：_123ab"您兩次密碼輸入不一致"5目的：檢測系統(tǒng)對密碼找回問題輸入的檢測程度不輸入密碼找回問題"必填項(xiàng)不能為空"同預(yù)期測試結(jié)果6目的：檢測系統(tǒng)對密碼找回答案輸入的檢測程度不輸入密碼找回答案"必填項(xiàng)不能為空"同預(yù)期測試結(jié)果5.5測試結(jié)果評價(jià)測試結(jié)果顯示本系統(tǒng)