CMMI評估問答記錄EPG和QA

1、Scripted questions for EPG/QA FARSession:Date and Time:Duration:QuestionsPA RefWould you please describe how do you plan for QA activities?你是如何編制質量保證計 劃的？PPQA SP 1.1,1.2,GP 2.1 2.2,2324,2.7Would you please describe the conduct of process audits?過程審計工作是如何開展 的？PPQA SP1.1Would you please describe the c

2、onduct of product audits in the projects?PPQA SP1.2QuestionsPA Ref文檔審計工作是如何開展的？How do you handle findings of the audit?審計的結果你是如何處理的？PPQA SP 2.1 ANDSP 2.2Would you please describe how senior management is involved in QA activities高層如何參與質量保證活 動的？PPQA SP2.1,GP2.10, 2.8Would you please describe who audi

3、ts QA function?誰審計QA的工作？PPQA SP 1.1Would you please describePPQA GP2.8, GPQuestionsPA RefQA measurement activities?QA有那些度量？3.2Can you give some example of process improvements carried out in your organization based on audit findings?QA審計結果是怎樣運用 到過程改進活動的？PPQA SP 2.11、你是如何編制質量保證計劃的？我們的質量保證計劃是這樣來編制的：在一

4、個項目的里程碑進度計劃制定出來后，我們開始編制質量保證計劃，編制前我們會參考組織資產(chǎn)庫里面歷史項目白質量保證計劃數(shù)據(jù)和查詢OSSP里面定義的這類項目需要滿足的質量目標。再結合本項目的特征確定項目的質量要素和質量目標，質量要素可能包括進度偏差、工作量偏差、成本偏差、質量成本、生產(chǎn)率、需求穩(wěn)定指數(shù)、系統(tǒng)測試缺陷密度、系統(tǒng)測試缺陷清除率、驗收測試缺陷密度等等。同時我們還會根據(jù)這些質量項定義這些質量項的檢查時間點、頻率、參與的人員、以及這些 質量目標要在哪些活動中進行檢查。另外還要去定義整個質量活動的過程安排以及過程質量的檢查安排，一般一個項目我們會安 排檢查的幾個主要過程域有項目規(guī)劃活動、項目監(jiān)督與

5、控制活動、需求開發(fā)與管理活動、統(tǒng) 測試活動、配置管理活動等等以上這些準備工作做完以后，我會把這些都寫入質量保證計劃里，納入整體項目計劃 中，然后進行評審，最后會得到公司高層的批準。2、過程審計工作是如何開展的？我們的過程審計工作是這樣開展的：我們在項目規(guī)劃期間會制定質量保證計劃，質量保證計劃中會包括過程審計的活動安排（活動安排有：1、對階段工作的審計2、對重大問題的審計 3、對決策活動的審計4、對配 置管理的審計 等等），同時還包括每項活動審計的時間點、時機、頻率、參與的人員等等。主要手段是采取檢查單的形式來進行審計，檢查單里面包括針對這個項目定義好的檢查項， 這些檢查項都是一些比較客觀的是非

6、題，檢查項根據(jù)每個項目的不一樣，我們都會制定出不 同的檢查項，以此來審計整個過程。3、文檔審計工作是如何開展的？我們的文檔審計工作是這樣開展的：,活動安排有審我們在項目規(guī)劃期間制定的質量保證計劃中會包括文檔的審計活動安排 計的時間點、時機、參與人員等等。主要手段也是采取檢查單的形式進行審計，檢查單中的檢查項主要針對文檔的結果，譬如：文檔的格式是否符合OSSP里面定義的標準模板格式、是否按 OSSP文檔模板中定義的內容形 式編寫、OSSP里面要求輸出的文檔有沒有輸出、文檔有沒有納入到配置項里、有沒有納入配 置庫、以及納入配置庫的版本、狀態(tài)、標識等各種屬性是否正確。4、審計的結果你是如何處理的？審

7、計結果我們是這樣處理的：審計結果中如果出現(xiàn)不符合的情況，我會填寫不符合項報告，并且把報告提交給問題的 關系人以及不符合項問題的負責人，我會要求他修正這個不符合項，并且我會記錄在不符 合項統(tǒng)計表里。如果項目組內難以解決或解決不了的問題，我會把這個問題上報給公司高 層，由公司高層給出解決措施或處理這個結果。最后我會跟蹤這些不符合項的處理情況，一 直到它關閉，并把問題的驗證結果記錄到不符合項統(tǒng)計表中。在項目結項時，我會把所有的審計結果匯總起來，形成質量總結報告提交給相應的關系 人。另外在審計結果分析當中，我會去發(fā)掘一些可以改進的地方。5、高層如何參與質量保證活動的?高層是這樣參與質量保證活動的：1、

8、對質量保證計劃的審批2、我們QA會階段性對公司高層進行質量保證活動的匯報，階段質量保證報告3、當出現(xiàn)重大問題或緊急情況時，高層會參與指導和決策4、項目結束時，我們會提交質量保證報告給公司高層5、另外，公司高層也會不定期地抽查我們的質量保證工作6、誰審計QA的工作？組織級QA會審計QA的工作EPG會抽查QA的工作咨詢師會審查我們QA的工作另我們還會邀請一些兄弟公司的 QA跟我們進行相互審查7、QA有那些度量？QA工作的度量主要有以下一些度量項：進度偏差、成本偏差、工作量偏差、規(guī)模偏差、質量成本、生產(chǎn)率、軟件需求穩(wěn)定指數(shù)、缺 陷數(shù)量統(tǒng)計、NG項統(tǒng)計、不符合統(tǒng)計、豁免的數(shù)量統(tǒng)計、每個過程的執(zhí)行符合度

9、統(tǒng)計等8、QA審計結果是怎樣運用到過程改進活動的?我們會對審計的結果進行分析，提出一些改進建議。譬如：以前配置項建議基線是通過口頭或郵件形式知會MO,很容易導致配置庫中基線庫中的版本錯誤，后面我建議配置項進行基線庫，必須填寫基線建立申請表，寫明基線所包含的配置項、實際版本、CVS版本，這樣避免進入基線庫中的配置庫混亂?，F(xiàn)在OSSP已增加該表單。Would you please describe how do you identify and plan process needs and improvement activities?你怎樣收集過程改進需求 和計劃過程改進活動的？OPF SP 1

10、.1,1.3, GP2.1, ,3.1收集需求：應從以下方面進行分析：調查、訪談、行業(yè)標準、CMMI模型、歷史項目結項數(shù)據(jù)、項目執(zhí)行過程數(shù)據(jù) 、 項目的問題及風險、公司的戰(zhàn)略發(fā)展方向、業(yè)務目標、 客戶的滿意度調查及客戶的建議等。過程改進：把EPG成員召集對他們進行講解和培訓，讓他們理解需求和目標的重點；根據(jù)目前業(yè)務發(fā)展情況安排一個大概的過程改進時間表和任 務，這些任務包括制定 OSSP體系、評 審、發(fā)布、以及對成員培訓OSSP體 系，在培訓結束后，我們還會導入一些 試點項目運行一段時間，檢測 OSSP體 系定義的怎么樣，同時我也會分派 EPG 成員去項目組收集項目執(zhí)行過程，從這 些數(shù)據(jù)當中，我

11、們進一點步分析和找出 一些不足之處，加以分析，進行進一步 的改善，同時還計劃在未來的某f進 行CMMI 3級的正式評估，在評估過 后，我還會代領EPG成員進行持續(xù)性 的改進，不斷的完善質量管理體系。Can you describe composition of EPG?EPG有哪些人組成？GP 2.7PPQA,MA,OPF,OPDGP 2.3/2.4OPF,OPDGM:孫進成、田鎮(zhèn)魁、鄧鵑、陳閩峰PMO:李紅衛(wèi)PM:劉坤、程嚴俊CM:孟國海、楊曉瓏QA/QC :陳義路、朱瑞研發(fā)：曾義、王輝等Would you please describe how are you communicated a

12、bout EPG activities?相關干系人怎樣了解到EPG活動的？GP 2.7PPQA,MA,OPF,OPD1、在收集需求的過程中通過調查和訪 談等方式讓相關干系人了解到 EPG 的活動；2、EPG過程改進的定義需求通過相關 干系人的評審方可實施，通過評審 會議讓其了解到相關活動；3、在項目執(zhí)行過程中，我們會收集項目的執(zhí)行數(shù)據(jù)、評審數(shù)據(jù)、分析數(shù) 據(jù)等，在上述活動過程中，項目成 員可了解到EPG的活動；4、我們每月都有月會，通過月會活 動，相關干系人也可了解至I EPG的 活動5、相關干系人也可通過EPG的報告了 解到相關活動6、我們的EPG成員也會經(jīng)常參與到各個部門的工作，進一些指導活

13、動，他們與也可了解EPG的活動7、相關干系人也可查看我們的組織資產(chǎn)庫，在組織資產(chǎn)庫中，有我們EPG方面的所有義檔，他們也可通過這種方式進行了解Can you give examples of some of the processes define at organizational level?組織定義的過程有那些？OPD SPd1.1,OPF SP3.1,3.2（OSSP里東西）項目立項、項目啟動、項目規(guī)劃、需求 開發(fā)與管理、系統(tǒng)設計、實現(xiàn)與測試、 系統(tǒng)測試、過程和產(chǎn)品質量保證、變更 控制與管理、技術評審、缺陷管理、配 置管理、風險管理、組織培訓、組織過 程定義及改進、項目結項Can yo

14、u please describe the lifecycles defined at the organizational level?組織定義的生命周期有哪OPD SP 1.2瀑布模型、快速原型、迭代模型、增量模型（只需講出OSSP中已定義的模型）些？Can you please describe the established work environmen standards and how they are maintained?工作環(huán)境標準是怎樣被建 立和維護的？OPD SP 1.6注意這里是指組織級別的工作環(huán)境，不是項目級別的工作環(huán)境。主要包括：1、公司的規(guī)章制度、項目的規(guī)章制度

15、、決策安排、職責劃分2、獎懲制度、考勤制度、項目管理制度、建立和維護部分請閩哥補充，謝謝！How tailoring is done and who approves the tailoring?裁剪活動怎樣開展？誰批 準裁剪？OPD SP 1.3在組織級別：我們會依據(jù)過程的特性、項目的特性定義過程裁剪指南，在裁剪 指南中定義了哪些活動項目組是必須要 做的，哪些活動項目組可以在某些條件 卜可以不做；在項目級別：項目經(jīng)理在做項目計劃的 時候，首先需要根據(jù)項目的特點、特性 和要求，參考組織的裁剪指南，確定項 目的定義過程，在項目定義過程完成之Would you please describeOPF

16、 SP 1.2how the processes areappraised?過程是怎樣被評價的?后，我們會安排QA進行審核，同時我做為EPG Leader為親自批準這份項目定 義過程。1、在每個項目中都會安排 QA進行檢查和審計項目的過程執(zhí)行情況，在審計過程中主要使用檢查單的形式進行檢查，檢查每個過程執(zhí)行的符合度是多少，在得出每個過程符合度之后，我們 會通過一定的比例和方法計算出所有過 程符合度的平均值，然后根據(jù)這個平均 值確定過程的執(zhí)行情況。2、項目經(jīng)理在項目結項的時候會將項目當中各個指標的數(shù)據(jù)提交到EPG 組，我們會對這些數(shù)據(jù)進行分析和總 結，可從數(shù)據(jù)分析和總結中得出項目的 執(zhí)行情況。3、

17、我們會將以上數(shù)據(jù)納入組織資產(chǎn)庫 進行管理，然后我們會按照季度的形式來分析季度與季度之間的數(shù)據(jù)與偏差,從中我們也會發(fā)現(xiàn)過程的執(zhí)行情況4、除上之外我們EPG組還會不定期的參與項目工作，如指導工作、檢查工作、審計工作，了解項目的過程執(zhí)行情況Would you please describe how do you establish and implement process action items?怎樣建立和實施過程改進 項的？OPF SP 2.1and 2.2首先確定過程改進的目標和方向，制定 過程改進計劃，執(zhí)行計劃，收集數(shù)據(jù)， 分析不足的地方，進行過程改進，然后 再收集數(shù)據(jù)、進行過程改進，如此

18、循oWould you please describe how process training are carried out in your organization關于過程的培訓是怎樣開GP 2.5 OFALL Pas,OPF SP3.1我們對過程培訓一共進行了兩次，第一次是針對體系文件V1.0版本進行的培訓，在體系文件V1.0版本發(fā)布以后，我會把這個培訓的需求告訴我們的組織培訓人員，讓他們來進行具體的培訓工作，但培訓教材是由我來準備的，也是展的？我來主講的。他們會根據(jù)我的要求制定 培訓計劃，然后按照培訓計劃進行培訓 工作，并對培訓效果進行考核，分析培 訓效果有沒有達到預期目標， 第二次

19、培訓是在對體系文件升級之后形成 V1.1版本的時候進行，這次培訓的過程比1.0 的培訓簡短一些，培訓結束之后也會進 行考核和總結，How do you handle changes to the process documents?過程文檔的變更是怎樣處 理的？ALL PAsGP 2.1,2.2& 2.6OPF 3.1,OPD 1.5在體系文件OSSP V1.0發(fā)布之后，我們 導入了幾個試點項目，導入試點項目之 后，我們EPG成員分派到各試點項目 收集項目數(shù)據(jù)，觀察項目的執(zhí)行情況， 以及收集關于過程改進的建議，收集建 議之后我們EPG成員對這些過程改進 建議進行討論和分析，確定哪些地方

20、確 實需要改進及其緊急程度，對于比較緊 急的改進建議，我們會立即修改。改進 之后我們會告知相關關系人，讓他們按 照新的過程定義進行操作。對于不太緊Can you please describe howOPF SP 3.2,do you monitor process3.3improvement activities?怎樣監(jiān)控過程改進活動?急的建議，我們會安排在這個體系文件 大版本升級的時候進行過程改進，在改 進完成之后同樣會進行發(fā)布、培訓等工 作，然后要求大家按照新的過程定義來 操作。1、從項目計劃開始，根據(jù)過程改進需要，制定過程改進計劃，然后按照過程改進計劃執(zhí)行，在每個月的月會上，我們EPG

21、成員會識別和分析過程改進情況，針對出現(xiàn)的問題，我們也會制定相應的應對措施，同時也會安排下個月的任務活動2、公司高層也會參與于過程改進活動，一是幫助和指導我們進行過程改進活動；二是在遇到?jīng)Q策問題時，需要由公司高層進行決策3、我們每半年會做一次過程改進總結報告，在這份報告中會詳細記錄過程改進以來，各個項目的狀態(tài)、數(shù) 據(jù)、偏差情況等，并將報告分發(fā)給 相關干系人，讓他們知道項目的過 程執(zhí)行情況How do you improve the processes based on actual implementation?基于實際的執(zhí)行效果，怎 樣進一步的改進過程？OPF SP 3.4首先確定過程改進的目

22、標，根據(jù)實際執(zhí) 行情況確定目標與實際情況的偏差，然 后根據(jù)偏差制定過程改進計劃，執(zhí)行計 劃，收集過程進數(shù)據(jù)，分析數(shù)據(jù)-> 確定 偏差（如此循環(huán)）比如在進度方面，我們按照季度來統(tǒng)計 分析所有項目的進度情況，以及每個季 度的進度偏差情況，通過觀察進度偏差 情況，我們EPG組會進行分析并識別 出偏差的原因，然后根據(jù)造成偏差的原 因進行進一步的分析并制定改進策略。Can you please describe how do you ensure alignment of metrics with business needsMA SP 1.1商業(yè)目標：專業(yè)從事醫(yī)療信息化相關產(chǎn) 品的研究、開發(fā)、分

23、銷、服務，促進中 國醫(yī)療信息化事業(yè)的發(fā)展。of your organization?怎樣確保度量目標和商業(yè)需求的一致性？度量目標：提高產(chǎn)品質量、降低產(chǎn)品缺 陷、提高生產(chǎn)率、降低成本、提高客戶 才兩意度。為了確保度量目標與商業(yè)目標的一致 性，我們需要從各個項目中收集項目數(shù) 據(jù)，所以會要求各項目組提供各種項目 數(shù)據(jù)，如：進度數(shù)據(jù)、成本數(shù)據(jù)、質量 數(shù)據(jù)、QA等各種數(shù)據(jù)，對于這些提交 上來的數(shù)據(jù)，我們首先會驗證這些數(shù)據(jù) 的真實性，并為項目組制定相應的流程 和標準，簡化他們的操作，使其按照已 制定的標準和流程來執(zhí)行。然后我們會 每半年對收集來的度量數(shù)據(jù)和商業(yè)目標 進行對比和分析，即時發(fā)現(xiàn)和處理兩者 之間

24、的偏差，確保度量目標與商業(yè)目標 的一致性。Can you give some exampleS MA SP 1.2,（OSSP 為項目定義的度量項）需求分析正確率、需求設計覆蓋率、軟of metrics defined forSP 2.1 TOprojects and functions?為項目定義的度量項有哪 些？FU : Can you give some specific examples metrics described in the metrics analysis report?請說出度量分析報告中的 一些實際度量數(shù)據(jù)。2.4件需求穩(wěn)定指數(shù)、設計的正確率、代碼 的注釋率、系統(tǒng)測試

25、缺陷排除率、發(fā)布 前缺陷發(fā)現(xiàn)密度（個/KLOC）、遺留缺陷 密度（個/KLOC）、生產(chǎn)率（LOC/人 天）、成本偏差、系統(tǒng)測試缺陷密度、 驗收測試缺陷密度、階段缺陷清除率、 缺陷整體清除率、NC分布百分比、PA 執(zhí)行符合度、質量成本（）、進度偏 差、工作量偏差、規(guī)模偏差、關鍵資源 討、Please describe how do you collect and store the measurement data at the organization Level.怎樣收集和貯存組織級的 度量數(shù)據(jù)？MA SP1.3,2.1,PPQAGP2.6 OPDSP 1.4從PM、QA、CM、高層經(jīng)理、客

26、戶等 相關干系人收集相關度量數(shù)據(jù)，在收集 完后對收集到的數(shù)據(jù)進行整理和分析， 無論是合理的還是不合理的，都會全部 歸入組織資產(chǎn)庫中的組織度量庫中。舉例說明Would you please describe how do you carry outMA SP1.1-1.4,在項目級別上，我們會要求每個項目組制定項目度量計劃，確定度量目標和度Measurement and analysis activities?你怎樣開展度量分析工作的？MASP2.1-2.4and all PAsGP 2.8/3.2量項，在實際項目工作當中，我們會要 求項目經(jīng)理收集這些度量項的數(shù)據(jù)，并 且我們也會安排QA來驗證這

27、些數(shù)據(jù)的 真實肩效性，我們EPG組也會抽查這 些數(shù)據(jù)的真實后效性，項目結項之后， 我們會要求項目組將各度量數(shù)據(jù)提交到 EPG組，我們會每季度把提交上來的數(shù) 據(jù)進行分析和整理，分析出本季度的數(shù) 度量情況、趨勢情況、以及本季度與上 季度的偏差情況，對偏差進行分析，找 出引起偏差的原因，用于過程改進，并 把分析整理后的數(shù)據(jù)存儲到組織度量庫 中。Would you please describe how do you communicate and use measurement results你怎樣交流和利用度量結 果的？MA SP 2.4?1、參考組織級的歷史數(shù)據(jù)，對之前收 集過來的數(shù)據(jù)進行分析，形成分析總結 報告，并根據(jù)各種圖形、最大/最小 值、平均值等，我們都會把這些數(shù)據(jù)分 發(fā)給項目組，供他們參考，幫助他們進 行項目