GBT 18905.6-2002軟件工程 產(chǎn)品評價 第6部分：評價模塊的文檔編制

軟件工程產(chǎn)品評價第6部分：評價模塊的文檔編制Part6:Documentationofevaluationmodules2002-12-04發(fā)布前言 1引言 Ⅱ 2一致性 3規(guī)范性引用文件 4術(shù)語和定義 5評價模塊的概念 26評價模塊文檔編制格式 2附錄A(資料性附錄)評價模塊的開發(fā) 5附錄B(資料性附錄)評價模塊的實例——故障密度 6附錄C(資料性附錄)評價模塊的實例——功能性 9附錄D(資料性附錄)評價模塊的實例——易用性和使用質(zhì)量 參考文獻 22I本部分為GB/T18905—2002的第6部分，等同采用ISO/IEC14598-6;2001《軟件工程產(chǎn)品評價Ⅱ測量結(jié)果來實施特定的軟件產(chǎn)品評價。ISO/IEC9126-2和ISO/IEC9126-3提量實例。這些度量難以在一個組織中一致地使用。但它可能對特定應用開發(fā)新度量是必需的。因此，組織中的支持機構(gòu)(見GB/T18905.2)為了在組織內(nèi)正確和一致地使用度量，有必要對各個度量都分 軟件工程產(chǎn)品評價第6部分：評價模塊的文檔編制本部分定義了用于描述評價模塊的文檔編制的結(jié)構(gòu)和內(nèi)容。評價模塊旨在ISO/IEC9126和本系2一致性GB/T18905.2—2002軟件工程產(chǎn)品評價第2部分：策劃和管理(ISO/IEC14598-2:2000,GB/T18905.3—2002軟件工程產(chǎn)品評價第3部分：開發(fā)者用的過程(ISO/IEC14598-3:GB/T18905.5—2002軟件工程產(chǎn)品評價第5部分：評價者用的過程(ISO/IEC14598-5:ISO/IEC9126-1軟件工程產(chǎn)品質(zhì)量第1部分：質(zhì)量模型2軟件產(chǎn)品的評價可說是一項全面性的工作。各個質(zhì)量特性和子特性可能需要采用不同的評價技質(zhì)量的一個或多個方面。但每個單元應集中在采用特定的評價技術(shù)對一個特定的質(zhì)量方面做出評價。 評價模塊的文檔有EM(評價模塊)0至EM5共6個部分，它們各有不同的用途，并有可選的附可選的附錄EMA包含了應用評價模塊的詳細過程。盡管EMA是可選的，但仍建議將它包括3描述特性、子特性或?qū)傩缘馁|(zhì)量模型應予確定。除非有特殊原因，宜使用ISO/IEC9126-1中的模型。6.2.2評價級別本條描述由評價模塊定義的評價級別。評價級別與被評價的特性、子特性或?qū)傩缘闹匾杂嘘P(guān)。建議在描述級別時考慮軟件的用法和軟件產(chǎn)品的環(huán)境(例如：安全條件、保密約束、經(jīng)濟風險和應用約束)。級別根據(jù)采用的評價技術(shù)和要獲得的評價結(jié)果來定義評價的深度或全面性。不同的評價級別給出不同的軟件產(chǎn)品質(zhì)量的可信度。6.2.3技術(shù)本條應描述評價模塊中應用的評價技術(shù)。應包含或適當引用評價所依據(jù)的有關(guān)理論、模型或試探法。6.2.4適用性本條應確定評價模塊的適用范圍。應描述在軟件生存周期中評價模塊在何處可以用。若擬用在特定的軟件生存周期過程中，則應加以規(guī)定。本條應提供對標準的和技術(shù)文檔的引用。若評價模塊依賴于其他評價模塊的結(jié)果，則應在這里提及。6.4EM3:術(shù)語和定義本條應定義在評價模塊中使用的技術(shù)術(shù)語。或者是，指出可找到定義的引用信息。6.5.1對評價的輸入本條應確定評價所要求的輸人。輸入應分類為產(chǎn)品部件、產(chǎn)品信息、支持信息和使用中的產(chǎn)品信息。6.5.2數(shù)據(jù)元素本條應規(guī)定哪些數(shù)據(jù)元素應從輸入中提取。6.5.3度量和測量本條應描述如何用度量根據(jù)數(shù)據(jù)元素計算測量。6.6.1測量映射它相映射。若此映射是有價值的，那么需要映射的算法(功能)的細節(jié)6.6.2報告應鼓勵使用。6.7EMA:應用規(guī)程本條應定義那些在6.4中未定義，但在評價模塊的EMA部分或引用的來源中使用的技術(shù)術(shù)語。本條應規(guī)定應用評價模塊時需要的資源。宜包括：需要的軟件工具(宜標或評價組織需要的任何專業(yè)技能和資格(如，證書));應用工作(宜估算評價模塊的典型應用所需的工是，宜強調(diào)采取措施確保結(jié)果的可追蹤性和可重復性。描6.7.4文檔編制5(資料性附錄)評價模塊的開發(fā)本附錄提供了開發(fā)新評價模塊的過程指南。ISO/IEC9126-2、ISO/IEC9126-3和ISO/IEC9126-4可作為該過程的輸人。評價模塊的開發(fā)過程宜包括五個步驟：A.1評價模塊需求的確定當確定了新評價模塊的需求，并決定開發(fā)評價模塊時，第一步宜確定新評價模塊的具體需求。包括確定質(zhì)量模型和質(zhì)量特性或子特性。還應決定評價的嚴格度。A.2評價模塊的規(guī)格說明在評價模塊的需求已確定的基礎(chǔ)上，下一步是規(guī)定針對評價的技術(shù)和評價輸入(例如，源代碼),以及度量集和基礎(chǔ)數(shù)據(jù)元素集。ISO/IEC9126-2、ISO/IEC9126-3和ISO/IEC9126-4可能有用。A.3評價規(guī)程的開發(fā)本步驟把正式的規(guī)格說明與前一步結(jié)合起來并增加一些程序性的內(nèi)容。對度量和數(shù)據(jù)元素的解釋宜在評價環(huán)境中予以闡明。宜估計所需的資源，制定詳細的評價規(guī)程。評價規(guī)程的試用可能是必要的。A.4評價規(guī)程的描述本步驟中，宜根據(jù)評價模塊格式來描述前一步驟制定的評價規(guī)程，也就是說，該描述應符合本部分。A.5評價模塊的驗證和確認評價模塊宜對照規(guī)格說明進行評審。宜由掌握評價技術(shù)的專家來做這項工作。確認宜確保評價模塊代表了技術(shù)最新發(fā)展狀態(tài)和現(xiàn)有的技術(shù)對本組織是不太熟悉的。評價模塊宜在不同的環(huán)境中由不同的小組人員來進行測試(確認)。所得的經(jīng)驗宜作為一種改進的輸入反饋給評價模塊開發(fā)組。6(資料性附錄)2)在測試階段的特定時刻，記錄所測故障的累積數(shù)目。B.1.1特性B.1.2評價級別B.1.4適用性7NCLOC(無注釋的代碼行數(shù))(Non—CommentedLinesOfCode)FDV(故障密度值)(FaultDensityValue)B.5.1測量的映射良好差B.5.2報告需要的軟件工具8硬軟件平臺需要有使用RGM方面的知識。B.6.3評價指令通過使用可靠性增長模型RGM,估計潛在的故障LOC數(shù)。故障代碼行的估計數(shù)通過應用RGM9(資料性附錄)C.0引言Vsc,為i子特性的測量值；m;當?shù)趇個回答是肯定時為1,否則為0;n為測量的總數(shù)；C.1范圍C.1.1特性功能性的度量包括表示5個子特性指標：在GB/T18905.5的附錄B(資料性附錄)中描述了評價級別的選擇準則。A生存)務的保護不可恢復的環(huán)境B巨大經(jīng)濟損失(公司被兼并)務的保護可恢復的環(huán)境損害C數(shù)人受傷害重大經(jīng)濟損失(公司受影響)針對出錯風險的保護DC.1.3技術(shù)形式化證明(目前在A級尚不存在評價功能性的相應技術(shù))部件測試(白盒測試)功能性測試(黑盒測試)這是試圖發(fā)現(xiàn)軟件產(chǎn)品與它的外部規(guī)格說明之間的差距的過程。分析規(guī) 應充分規(guī)定測試的規(guī)格說明安全性 需要的軟件部件，文檔證報告、需求測量報告、軟件設審報告、軟件規(guī)格說明方法和工明、編程語言和編譯程序的說明不適用程序評審報告、程序測量報告、程序測試計劃、程序測試報告、系統(tǒng)需求分析、系統(tǒng)規(guī)格說明和設計、系統(tǒng)測試計劃、配置管理計劃、配置管理報告、質(zhì)量保證在測試活動(7)中與“開發(fā)者”的境”的可用性，在“評價環(huán)境”和“目標環(huán)境”之間信息改變后的說明、軟件需求規(guī)格說明(5)、軟件設計說明，系統(tǒng)評審報告、系統(tǒng)驗證報告、系統(tǒng)測試計劃、系統(tǒng)測試報告軟件開發(fā)階段之后可執(zhí)行的產(chǎn)品(1),產(chǎn)品說明(2)、用戶手冊(3)、系統(tǒng)手冊、測試用例(4)(1)指在評價環(huán)境中運行產(chǎn)品，或有權(quán)使用可能運行產(chǎn)品的且標環(huán)境C.4輸入和度量件工程產(chǎn)品評價第5部分：評價者用的過程(*)。評價等級C的輸入評價等級D的輸入C.4.2數(shù)據(jù)元素投入運行(運行測試)后必須被更改(更改包括增加、修改和刪除)的功能數(shù)目與規(guī)定的功能總數(shù)正確率1(差)2(合格)3(良好)4(優(yōu)秀)0 ——報告的頁數(shù).—-產(chǎn)品用途的一般描述； 第5章評價結(jié)果 ·第2章評價需求·第3章評價規(guī)格說明前言引言D.1范圍D.1.2評價等級本評價規(guī)程能提供對三種使用質(zhì)量特性的準確估計。其準確度依賴于評近似程度，及每個被評價的用戶組中的用戶數(shù)。為了獲得可靠的結(jié)果，宜至少在實際使用環(huán)境中評價8個用戶。D.1.3技術(shù)為保證或確認質(zhì)量，在開發(fā)、獲取或運行期間采用適用性。為獲得使[1]ISO9241-11:1998配有可視顯示終端(VDTs)的辦公環(huán)境的功效學需求第11部分：易用性[3]BrookeJ(1996).SUS:A“quickandTaylorandFrancis.見http://www.redhatch.co.uk/sus,html[5]Kirakowski,J.(1996)。軟Weerdmeester,工業(yè)中的應用性評價。Taylor&France,UK。參見http://www.ucc.ie/hfrg/questionnaire/sumi/tp:///projects/hci/Research/1994/qD.4.1評價的輸入—-若產(chǎn)品有基于打印的接口時的介質(zhì)的大小和打印的分辨率；通常適用于提供標識用戶碰到的問題的附加定性數(shù)據(jù)，這些問題因使用質(zhì)量的困難所引起。也可包括為改進使用質(zhì)量而變更產(chǎn)品的建議。D.4.3度量和測量D.4.3.1有效性有效性是用戶能否準確而全面地達到目標的一種測量。它并不考慮如何達到目標，只考慮是否達有效性宜通過任務目標已經(jīng)達到的程度來測量。一種可能的度量是完全達到其目標的用戶所占的百分比。如果達到部分目標(例如，通過不完全的或次優(yōu)的結(jié)果),那么更合適的度量是平均達到目標的程度，根據(jù)特定的準則，得分范圍為0～100%。在某些情況下，不能改正的關(guān)鍵性故障的用戶的百分比可能是重要的。D.4.3.2生產(chǎn)率針對資源消耗量，生產(chǎn)率關(guān)系到得到的有效性級別。效率通常由完成任務的平均時間來評估。效率也可能關(guān)系到其他資源(例如，使用總成本),或相對不太重要(例如，某些消費應用)。任務時間是效率的總的測量。當然，用戶完成任務花費的時間越少，則任務耗費的資源越少，產(chǎn)品就越好。效率作為有效性與時間，它的測量給出了一個工作效率的測量，并且對于相同的用戶組和任務，當比較不同的產(chǎn)品時是有用的。D.4.3.3滿意度滿意度是對用戶使用產(chǎn)品的反映的評估，宜使用標準問卷來測量。D.5結(jié)果的解釋D.5.1測量的映射D.5.1.1有效性有效性以百分比來測量。有效性判定準則依賴于評價等級和商業(yè)目標的本質(zhì)。D.5.1.2生產(chǎn)率生產(chǎn)率通過任務時間或有效性與任務時間來測量。效率判定準則依賴于評價等級和商業(yè)目標本質(zhì)。D.5.1.3滿意度滿意度判定準則通過與相關(guān)產(chǎn)品先前結(jié)果進行比較來設置，或通過工業(yè)標準提供的數(shù)據(jù)庫的問卷的比較來設置。D.5.1.4測量的解釋D.5.1.5準確性報告的所有度量宜給出均值和均值的標準差。對值之間差異的任何要求宜說明其非偶然發(fā)生的概率。D.5.1.6解釋每種測量都應在具體的使用環(huán)境中，對照使用質(zhì)量的需求來解釋。把有效性和滿意度的打分組合起來通常是無意義的。D.5.2報告報告宜有下列內(nèi)容： 產(chǎn)品的目的：產(chǎn)品用于什么,產(chǎn)品旨在為用戶做什么;——評價的對象，和待測的所有特定目標值；——被評價的用戶組期望的基本特性和能力；——評價環(huán)境：執(zhí)行任務時的條件，被評價的環(huán)境及期望的使用環(huán)境之間的任何已知的差別； 結(jié)果(宜包括圖表)D.6.2評價指示——不宜給參與