財政支出項目績效評價操作指南

1、財政支出項目績效評價操作指南（試行）海南省財政廳2010 年 8 月引言目錄表20圖圖 2-1 項目邏輯模型6.專欄1引言1.1 背景2009年6月22日，財政部發(fā)布了財政支出績效評價管理暫行辦法（財預(yù) 200976號）（以下簡稱辦法）。財政支出績效評價自此有了統(tǒng)一的部門規(guī)章。辦法對績效評價的實施和管理提出了明確要求， 對績效評價涉及的各方職責、 評價內(nèi)容、評價指標的確定、評價方法、實施程序、報告撰寫和評價結(jié)果應(yīng)用作 出了原則性的規(guī)定。辦法同時指出，各地可據(jù)此辦法制定切合本地實際 的管理辦法和實施細則。為此，海南省財政廳參照財政部國際金融組織貸款項目績效評價操作指南 并在開展績效評價試點的基礎(chǔ)

2、上，組織編寫了財政支出項目績效評價操作指南（以下簡稱指南），用以指導(dǎo)全省各級政府部門開展績效評價工作。1.2 目的本指南旨在向全省各級政府部門和評價人員開展財政支出項目績效評價（簡稱績效評價1）,提供具體操作指導(dǎo)，從而幫助他們更好地理解、管理和實施評價活動，并提高評價的規(guī)范性和質(zhì)量。本指南有3個主要目的：幫助各級政府部門管理人員、 項目實施人員和評價人員更好地理解并掌 握財政支出項目績效評價的基本概念、 一般準則、方法及其他相關(guān)知識； 幫助各級政府部門有效地開展績效評價管理工作，并對績效評價進行質(zhì)量控制；指導(dǎo)評價人員規(guī)范地實施績效評價任務(wù)，從而提高績效評價的質(zhì)量。以下如無特殊說明，績效評價均指

3、的是財政支出項目績效評價。此外，本指南還可以作為各級政府部門建立適合本地、本部門實際的績 效目標管理系統(tǒng)的重要參考1.3內(nèi)容本指南包括9章內(nèi)容。第1章是引言，主要說明指南編寫的背景、目的、內(nèi)容及其使用。第2章是績效評價的基本概念，主要介紹本指南涉及的定義、評價原則、準則、評價步驟等。第 3、4章是績效評價管理，主要闡述評價任務(wù)的組織和評價任務(wù)大綱的設(shè)計與編寫。 第5-7章是績效評價的設(shè)計與實施，重點介紹績效評價的設(shè)計、實施和評價報告編寫。第 8章是評價結(jié)果的使用 與擴散，介紹如何使用評價結(jié)果，如何進行評價結(jié)果的擴散。第 9章是績效評價 的質(zhì)量控制。質(zhì)量控制對于績效評價非常關(guān)鍵， 是評價管理者重

4、要工作之一。質(zhì) 量控制貫穿于績效評價從設(shè)計、實施到撰寫報告的全過程。圖1-1財政支出項目績效評價操作指南框架0質(zhì)量控制 第9章質(zhì)量控制 第9章本評推演計的內(nèi) （設(shè)計階段）2 項目績效評價的基本概念1.1 績效評價的定義績效評價的定義是開展項目績效評價相關(guān)各方相互溝通和理解的一個基礎(chǔ)。本指南所稱的績效評級，是指財政部門和預(yù)算部門（單位）根據(jù)設(shè)定的績效目標，運用科學(xué)、合理的評價方法、指標體系和評價標準，對財政支出產(chǎn)出和效果進行客觀、公正的評價。1.2 績效評價的原則客觀、公正原則。應(yīng)當依據(jù)績效評價準則、關(guān)鍵評價問題等開展評價活動，確保評價結(jié)果的真實性。科學(xué)、規(guī)范原則?？冃гu價的設(shè)計應(yīng)當具有科學(xué)性和

5、可操作性，評價的實施應(yīng)該遵循規(guī)范的程序和方法?？煽啃栽瓌t。績效評價應(yīng)該既要報告項目成功的方面，也要報告項目失敗的方面。目標導(dǎo)向原則。績效評價以項目目標為導(dǎo)向，重點評價項目目標的相關(guān)性、目標實現(xiàn)程度、相對于目標實現(xiàn)程度的效率、以及項目成效的可持續(xù)性。參與性原則。項目各利益相關(guān)者，包括項目管理方、項目實施單位、項目受益群體、有關(guān)專家等，要盡可能地以適當方式參與到考評過程中來。1.3 項目的邏輯模型財政支出項目的設(shè)計都應(yīng)使用邏輯模型。項目邏輯模型是一種理解從投入到結(jié)果之間的因果關(guān)系的有效工具。項目邏輯模型包括投入、活動、產(chǎn)出、成效、影響5個關(guān)鍵要素。其背后的邏輯是：對一個項目投入一定的資源，以便其

6、開展必要的活動；至少有一些活動會獲得一些產(chǎn)出，比如產(chǎn)品和服務(wù)；通過使用 這些產(chǎn)出應(yīng)該會帶來某種變化。投入（Inputs ）:指用于項目實施的各種資源，包括人力、資金、實物、時 問和專業(yè)技能等資源?；顒樱ˋctivities ）:我們所做的。指為實現(xiàn)項目目標而調(diào)動和使用各種資 源的各項行動和工作，活動可以使用動詞來表述（開展、建設(shè)、培訓(xùn)、調(diào)研等）。產(chǎn)出（Outputs ）:我們所生產(chǎn)的。指通過實施各項活動而產(chǎn)生的產(chǎn)品和服務(wù)， 是有形的，可計算的。比如為50個人提供了醫(yī)療服務(wù)，培訓(xùn)了 100名小學(xué)教師， 修建了 100公里公路。成效（Outcome :我們?yōu)楹巫?。指通過使用項目的產(chǎn)出而帶來的短期或

7、中 期的直接效果，成效能夠被增加、減少、增強、改善或維持。比如新修公路使通 行時間縮短，提高了運輸效率。設(shè)定清晰的成效對于設(shè)計和構(gòu)建結(jié)果導(dǎo)向的監(jiān)測 與評價體系至關(guān)重要，成效不能直接考核，它必須轉(zhuǎn)化為一組關(guān)鍵指標，這些指 標能夠提供關(guān)于成效是否得以實現(xiàn)的信息。影響（Impacts ）：指由成效累積導(dǎo)致的長期的或全面的變化， 類似于戰(zhàn)略目 標。比如運輸效率提高降低了運輸成本（成效），從而促進了當?shù)亟?jīng)濟的發(fā)展（影 響）。圖2-1以某培訓(xùn)項目為例，解釋項目邏輯模型。圖2-1項目邏輯模型一一以某培訓(xùn)項目為例1.資金1.培訓(xùn)11.服務(wù)時數(shù)1.技能提升1.培訓(xùn)者在5年2.人員2.教育2.完成課程2.態(tài)度改變

8、內(nèi)比那些沒有接3.物料供應(yīng)3.咨詢服務(wù)的參加者人3.新的就業(yè)受培訓(xùn)的人掙得數(shù)機會更多2.接受培訓(xùn)的人的生活水平高于1.4 績效評價的準則本指南采用以下4 個評價準則，即相關(guān)性、效率、效果和可持續(xù)性。1.4.1 相關(guān)性相關(guān)性是指項目目標與政府的發(fā)展政策和優(yōu)先重點、部門/行業(yè)發(fā)展規(guī)劃以及受益群體的需求的相符程度。通過對相關(guān)性的評價，可以檢查項目設(shè)計和項目實施是否針對當?shù)氐膶嶋H需求，解決當?shù)氐膶嶋H問題。1.4.2 效率效率是指資源/投入轉(zhuǎn)化為結(jié)果的經(jīng)濟性。效率評價的內(nèi)容包括項目實施的時間效率、資金使用、在使用既定資源下的產(chǎn)出情況、項目的經(jīng)濟內(nèi)部收益率（ EIRR） 。項目實施的時間效率考察項目是否按

9、計劃的時間開工、是否在計劃實施周期內(nèi)完工。 資金使用考察項目資金的使用是否按照預(yù)算執(zhí)行。在使用既定資源下的產(chǎn)出情況是指項目是否實現(xiàn)了所有的預(yù)計產(chǎn)出。項目經(jīng)濟內(nèi)部收益率是指項目周期內(nèi)經(jīng)濟凈現(xiàn)值累計等于零的折現(xiàn)率，是反映項目對國民經(jīng)濟和社會貢獻的相對指標。1.4.3 效果效果是指項目目標的實現(xiàn)程度，它也表現(xiàn)為目標群體的受益情況。效果從項目目標實現(xiàn)程度和項目瞄準度兩方面進行評價。項目目標是在項目設(shè)計時的預(yù)計成效， 指通過一系列項目活動而要實現(xiàn)的結(jié)果，通常表現(xiàn)為對社會、經(jīng)濟、 社區(qū)、目標人群所產(chǎn)生的積極作用。項目瞄準度是指考察項目成果是否真正地被目標群體享有。 也就是說，項目效果的評價不僅取決于項目實

10、現(xiàn)預(yù)期目標的程度，也要考察其成果（一般表現(xiàn)為項目提供的產(chǎn)品或服務(wù)）是否使目標人群受益。1.4.4 可持續(xù)性可持續(xù)性是指項目完工后持續(xù)運行和發(fā)揮成效的可能性。它針對保障項目持續(xù)運行并發(fā)揮成效的各方面因素進行評價，這些因素包括項目管理或運行機構(gòu)的持續(xù)性、項目產(chǎn)出的維護和利用、制度保障等。此外，由于財政部門對項目還款十分關(guān)注，可持續(xù)性還對項目還款能力進行評價。1.5 績效評價的步驟績效評價一般包括以下幾個步驟，每個步驟的詳細內(nèi)容和做法將在以后各章進行闡述。第 1 步：前期準備前期準備包括確定績效評價任務(wù)和評價組織實施模式（見第3 章） 、編制評價任務(wù)大綱（見第4 章）等。第 2 步：評價設(shè)計根據(jù)評價

11、任務(wù)大綱設(shè)計詳細的評價實施方案，包括開發(fā)績效評價框架、選擇證據(jù)收集方法、設(shè)計面訪、座談會和實地調(diào)研等的問題清單、進行人員、時間和經(jīng)費安排等（見第5 章） 。第 3 步：評價實施按照設(shè)計的方案開展績效評價，包括證據(jù)收集整理、證據(jù)分析、形成評價結(jié)論、經(jīng)驗教訓(xùn)和建議等（見第6 章） 。第 4 步：報告評價結(jié)果按照本 指南附件3 的格式編寫績效評價報告，在此過程中要與利益相關(guān)者進行溝通，并將他們的觀點和意見吸收到評價報告中來（見第7 章） 。第 5 步：評價結(jié)果使用和擴散項目管理部門利用評價結(jié)果，用于解決問題、改進管理或為決策提供依據(jù)。財政部門將評價結(jié)果與以后年度的預(yù)算安排進行掛鉤（見第8 章） 。3

12、 評價任務(wù)的組織具體評價任務(wù)由財政部門以文件形式下達的年度評價計劃確定。3.1 評價任務(wù)的組織模式評價任務(wù)可以由管理部門（各級財政部門和預(yù)算部門）組織實施，也可根據(jù)需要委托外部專業(yè)機構(gòu)或?qū)＜疫M行，并與其簽訂委托合同。無論采取哪種方式，管理部門都應(yīng)指派一名評價管理者，并要組建合格的評價小組實施績效評價。3.2 評價管理者的職責評價管理者應(yīng)為熟悉被評項目的管理人員，應(yīng)履行以下職責：編寫績效評價任務(wù)大綱；與評價小組進行充分溝通，使其完全理解評價任務(wù)大綱的每一項內(nèi)容；為評價活動提供必要的支持和及時的反饋；監(jiān)督評價活動的進展并進行質(zhì)量控制；對評價活動中出現(xiàn)的情況及時做出決策；如委托合同需要變更，應(yīng)與評價

13、小組進行協(xié)商；檢查評價報告初稿是否符合合同和指南的要求；對評價報告初稿提出反饋意見；確保各利益相關(guān)者有機會對評價報告初稿提出意見和建議，并保證這些意見和建議反映在評價報告終稿中；促進評價結(jié)果的使用和擴散。3.3 績效評價小組3.3.1 評價小組應(yīng)具備的知識和技能不管是管理部門自己評價，還是委托外部專業(yè)機構(gòu)或?qū)＜以u價，都需要成立績效評價小組。評價小組是進行績效評價的設(shè)計、實施和報告編寫的團隊。評價小組對于績效評價尤為重要。它是評價任務(wù)能否成功實施的關(guān)鍵因素。雖然績效評價需要的知識和技能因不同項目而異，但以下列出的知識和專業(yè)技能是評價小組必須具備的：績效評價知識和技能：這是一種綜合的能力，包括績效

14、評價理論知識、方法和其他技能，如經(jīng)濟分析、統(tǒng)計分析、社會調(diào)查等。溝通能力：溝通能力十分重要，它有利于與利益相關(guān)者進行友好溝通，促進利益相關(guān)者參與績效評價并提供必要協(xié)助，并向不同用戶有效地報告評價結(jié)果。組織協(xié)調(diào)能力：組織協(xié)調(diào)能力是保證績效評價順利實施的關(guān)鍵，包括組織和調(diào)動各種資源、協(xié)調(diào)評價中不同任務(wù)的進展、控制評價任務(wù)在規(guī)定的時間內(nèi)完成。行業(yè)知識：評價小組要熟悉項目所在的行業(yè)背景、發(fā)展狀況、相關(guān)政策、專業(yè)知識等。了解當?shù)厍闆r：因為項目實施的成功與否有時取決于當?shù)匾蛩兀粤私猱數(shù)厣鐣臀幕尘昂苤匾?。評價小組還需要了解當?shù)氐陌l(fā)展政策、優(yōu)先重點、以及面臨的主要發(fā)展問題。如果項目的目標群體還涉及少數(shù)

15、民族，還應(yīng)該了解并尊重他們的生活習(xí)俗，以便更好地與他們進行溝通。3.3.2 評價小組的構(gòu)成評價小組由若干名評價人員組成。評價小組成員不得與項目管理、實施、 運行等有利益沖突。并不要求評價小組的每名成員都具備上述知識和能力，允許評價人員各具專長，通過互相補充、互相學(xué)習(xí)而使整個評價小組具備上述知識和技能，從而勝任評價任務(wù)。評價小組必須指定一名評價組長。組長應(yīng)該具備以下條件：具有較為深厚的績效評價知識和技能；熟悉被評項目所在領(lǐng)域的相關(guān)政策、技術(shù)、管理等知識；具有較強責任心。評價組長應(yīng)履行以下職責：負責與管理部門溝通；督促并協(xié)調(diào)評價小組成員的工作并管理日常工作；在評價小組出現(xiàn)不同意見時充當協(xié)調(diào)人；確保

16、評價小組按照評價任務(wù)大綱實施評價； 編寫評價報告并負責報告最終定稿。4 編制評價任務(wù)大綱評價任務(wù)大綱(Terms of Reference TOR)是一個書面文件，它載明評價的目的和范圍、評價使用的方法、績效評價或分析針對的標準、需要的資源、時間安排和評價報告要求。每個項目績效評價都必須編寫一個評價任務(wù)大綱。4.1 功能評價任務(wù)大綱體現(xiàn)了管理部門對績效評價的要求，是從評價任務(wù)組織到評價結(jié)果使用與擴散的整個評價活動必須遵循的核心文件。評價任務(wù)大綱對于績效評價至關(guān)重要，主要發(fā)揮以下4 個方面的作用：將年度評價計劃中的任務(wù)轉(zhuǎn)化成可操作的評價工作；為評價小組進行具體評價設(shè)計和實施提供基礎(chǔ)；為各利益相關(guān)

17、方對評價任務(wù)形成共識提供基礎(chǔ)；為評價管理者進行績效評價質(zhì)量控制、核查評價小組任務(wù)完成情況提供依據(jù)。4.2 編寫步驟評價任務(wù)大綱由評價管理者根據(jù)確定的評價任務(wù)進行編寫，編寫評價任務(wù)大綱一般包括4 個步驟：前期準備、起草評價任務(wù)大綱初稿、與利益相關(guān)者溝通、形成最終評價任務(wù)大綱。4.2.1 前期準備編寫之前要對項目進行必要的研究和分析，要明確評價目的，熟悉項目目標、特點、 實施和完成情況，了解項目實施的社會經(jīng)濟背景，掌握項目現(xiàn)有數(shù)據(jù)信息情況。4.2.2 起草評價任務(wù)大綱初稿在前期準備和估算用于評價的資源（包括經(jīng)費、人員和時間）等基礎(chǔ)上，編寫評價任務(wù)大綱初稿。4.2.3 與利益相關(guān)者溝通評價任務(wù)大綱初

18、稿要與項目主管部門、項目實施及運行機構(gòu)、行業(yè)專家等主要利益相關(guān)者進行溝通，聽取他們的意見和建議。4.2.4 形成最終評價任務(wù)大綱在考慮利益相關(guān)者的建議和意見基礎(chǔ)上，修訂完善評價任務(wù)大綱初稿，形成最終評價任務(wù)大綱。4.3 內(nèi)容高質(zhì)量的評價任務(wù)大綱應(yīng)該包括以下幾部分內(nèi)容：評價目的、項目描述、評價范圍、涉及的利益相關(guān)者、關(guān)鍵評價問題、方法、預(yù)期成果、評價小組、實施計劃、費用與支付、管理部門責任等。4.3.1 評價目的評價任務(wù)大綱的第一部分要明確評價目的。評價目的要具體寫明為什么要開展此項評價，評價結(jié)果將如何使用，以及由誰使用。4.3.2 項目描述對項目背景、項目目標、項目投入與活動、實施情況等方面進

19、行簡要描述，以便評價人員能夠迅速了解項目基本情況項目背景：項目實施的國家層面和地方層面的社會經(jīng)濟發(fā)展狀況，項目所屬的領(lǐng)域，所要解決的主要問題，如基本醫(yī)療衛(wèi)生服務(wù)不足問題、城市交通發(fā)展瓶頸問題、環(huán)境污染問題等。項目目標：項目的預(yù)期產(chǎn)出和成效，如果項目設(shè)定了具體目標，還應(yīng)描述其具體目標。項目投入與活動：項目投入金額和構(gòu)成，為了實現(xiàn)項目目標而設(shè)置的項目組成（Component及其開展的活動（Activities）。實施情況：項目的實施周期（從開工到完工）， 實施地點，實施組織情況。4.3.3 評價范圍評價范圍確定了績效評價的廣度和深度，包括時間范圍、地域范圍和收益群體范圍。評價范圍往往與評價目的有關(guān)

20、。4.3.4 涉及的利益相關(guān)者項目往往涉及多個利益相關(guān)者，包括管理部門、項目實施機構(gòu)、項目運行機構(gòu)、目標群體、社區(qū)等。要說明希望他們參與績效評價的形式。上述描述是為了使評價人員了解項目的利益相關(guān)者，并盡可能從他們那里收集到績效評價的有用信息。4.3.5 關(guān)鍵評價問題這部分要列出績效評價想要回答的關(guān)鍵問題。關(guān)鍵評價問題是針對評價目的，在評價準則基礎(chǔ)上進行開發(fā)的。本指南列出了12 個必須回答的關(guān)鍵評價問題（見第5.2.1節(jié)） 。管理部門根據(jù)需要，可以突出其中若干個問題，或補充其他問題4.3.6 方法描述證據(jù)收集可能用到的方法，比如案卷研究、面訪、實地調(diào)研、問卷調(diào)查、 座談會等。不同方法的成本不同，

21、在選擇使用何種方法時要考慮績效評價的預(yù)算。具體方法由評價小組進行開發(fā)。4.3.7 預(yù)期成果通過績效評價管理部門想要獲得的成果， 如績效評價報告、評價進展報告及 其提交時間。如果評價成果要用于擴散（如研討會），那么這部分還要描述評價 人員在成果擴散中應(yīng)發(fā)揮哪些作用。4.3.8 評價小組這部分要描述評價小組所需要的知識、能力和經(jīng)驗，以及其他相關(guān)能力，如語言能力；還要描述建議的評價小組人數(shù)。4.3.9 實施計劃這部分說明評價任務(wù)將要開展的活動及時間安排，尤其是評價成果的提交時問節(jié)點。這里主要列出評價任務(wù)實施的關(guān)鍵時間節(jié)點和任務(wù)負責人，詳細的實施計劃由評價小組開發(fā)。實施計劃模板（見表4-1）。表4-1

22、評價任務(wù)大綱評價任務(wù)實施計劃模板序號活動描述時間安排負責人1簽訂任務(wù)合同XX年XX月XX管理部門、評價小組2開發(fā)績效評價框架XX年XX月評價小組3形成評價方案XX 年 XX-XX 月評價小組4評價實施XX 年 XX-XX 月評價小組5提交報告初稿XX年XX月評價小組6利益相關(guān)者反饋XX年XX月XX管理部門及其他利益相關(guān)者7評價報告終稿XX年XX月評價小組注：如果由財政部門自己開展績效評價，這個步驟則省略。費用與支付這部分說明評價任務(wù)的預(yù)算費用和支付方式。管理部門責任評價任務(wù)大綱要寫明管理部門在績效評價中的責任， 包括管理部門要提供相 關(guān)項目文檔，為評價小組提供必要的協(xié)調(diào)，參與績效評價實施過程中

23、的某些活動， 如實地調(diào)研、座談會和討論，對績效評價進行質(zhì)量控制等。由于評價任務(wù)大綱對績效評價的成功實施至關(guān)重要，因此在公布最終評價任 務(wù)大綱之前，管理部門要對其質(zhì)量進行檢查（見專欄 4-1）。專欄4-1高質(zhì)量評價任務(wù)大綱的核查問題清單為什么要開展此項評價？評價涉及了哪些利益相關(guān)者？所提出的評價問題是否明確？是否所有問題都能被回答？評價任務(wù)大綱是否提出了關(guān)于評價方法或評價程序的硬性要求？這些要求是否合理？是否有足夠的資源和時間來完成評價任務(wù)？在評價實施過程中，管理部門和其他利益相關(guān)者將為評價小組提供哪些必要支持? 管理部門對于評價報告的要求是否清晰？評價小組能否根據(jù)評價任務(wù)大綱深化評價設(shè)計和實施

24、評價任務(wù)？評價任務(wù)大綱格式見附件1。5績效評價設(shè)計僅僅有高質(zhì)量的評價任務(wù)大綱還不能保證績效評價的成功實施。因為評價任務(wù)大綱由評價管理者負責設(shè)計，主要對績效評價的關(guān)鍵要素進行說明， 是績效評 價實施的綱領(lǐng)性文件。但是，績效評價任務(wù)由評價小組負責具體實施， 這就要求 評價小組要在對評價任務(wù)理解的基礎(chǔ)上， 將評價任務(wù)大綱轉(zhuǎn)化為可操作的實施方 案，這才能保證績效評價的成功實施。 因此，績效評價的設(shè)計要基于評價任務(wù)大 綱，并主要滿足評價任務(wù)大綱的要求?？冃гu價設(shè)計的主要產(chǎn)出就是績效評價框 架和績效評價實施方案?？冃гu價設(shè)計流程見圖 5-1。在績效評價設(shè)計的每 個步驟中，評價小組都要與管理部門進行溝通。圖

25、前期準備熟悉項目文件與管理部門溝通理解評價任務(wù)大綱內(nèi)容完成項目基礎(chǔ)信息表5-1績效評價設(shè)計流程開發(fā)評價指標 選擇證據(jù)收集方法 形成績效評價框架開發(fā)績效評價f 完成評價實施方） 評價任務(wù)分解評價小組分工 實施時間安排 設(shè)計面訪、座談會、 實地調(diào)研問題清 單、調(diào)查問卷等 形成評價實施方案5.1 前期準備前期準備包括盡量收集并熟悉現(xiàn)有的項目文件， 與管理部門（或委托方）進行溝通，了解他們的意圖并理解評價任務(wù)大綱的內(nèi)容。 前期準備要查閱的項目文件包括項目立項文件、項目實施計劃、項目進展報告、項目中期檢查報告、項目 完工報告、項目工作總結(jié)等。前期準備要形成績效評價過程文件之一 項目基礎(chǔ) 信息表（見表5-

26、1）表5-1項目基礎(chǔ)信息表一、項目概況項目名稱項目類型根據(jù)項目預(yù)算管理辦法對項目的分類填寫投資金額其中：中央財政省級財政地方配套金額以人民幣為單位實施周期按項目完工se告中實施周期填寫實施地點按XX省XX市XX縣的格式填寫項目發(fā)展目標按項目立項文件中的目標填寫， 若項目目標 經(jīng)過調(diào)整且經(jīng)過財政部門同意， 還應(yīng)填寫調(diào) 整后的目標項目組成按項目立項文件中的項目組成簡要填寫項目實施單位二、項目背景重點從以下幾方面描述項目的背景，但不限于這幾點，注意提取關(guān)鍵數(shù)據(jù)和事實：- 項目的提出針對國家社會經(jīng)濟發(fā)展的哪些特定需求？（例如：與相關(guān)戰(zhàn)略、政策或具他重大項目的關(guān)系等）- 項目的提出針對所在行業(yè)的哪些關(guān)鍵

27、問題？（例如：解決空白問題、瓶頸問題、還是在現(xiàn)有條件下改進提高）- 確定項目的具體內(nèi)容以及選擇項目實施地點的理由，或有哪些考慮？（例如：該地區(qū)最貧困，或具備實施條件，或估計影響較大等）三、項目目標和活動內(nèi)容分別簡述每一個項目組成部分的目標、投入、產(chǎn)出和實施地點。5.2 開發(fā)績效評價框架績效評價框架是開展績效評價的核心。 績效評價框架包括評價準則、關(guān)鍵評價問題、評價指標、證據(jù)、證據(jù)來源、證據(jù)收集方法等（見表5-2）。表5-2績效評價框架結(jié)構(gòu)評價準則關(guān)鍵評價問題評價指標證據(jù)證據(jù)來源證據(jù)收集方法相關(guān)性效率效果可持續(xù)性績效評價框架中的術(shù)語解釋如下：評價準則：即第2章第2.3節(jié)提到的相關(guān)性、效率、效果和

28、可持續(xù)性 4個評價準則。關(guān)鍵評價問題：用來將績效評價聚焦于若干有限的關(guān)鍵方面，進而分析和評判準則的工具，一個評價準則下可以有多個關(guān)鍵問題。評價指標：定量或定性的因素或變量，是用來衡量成果、反映變化的手段；這里，評價指標是用來回答關(guān)鍵問題的一種工具，一個關(guān)鍵問題下可能有多個評價指標。證據(jù)：用來對評價指標進行評判的各種信息，包括項目數(shù)據(jù)、事實、利益相關(guān)者觀點等。證據(jù)來源：說明證據(jù)的出處，以便評價人員能夠收集到所要的證據(jù)。證據(jù)收集方法：績效評價中用于收集各種證據(jù)的手段，如案卷研究、實地調(diào)研、面訪、問卷調(diào)查等。本指南的宗旨是既要為評價人員提供操作性的指導(dǎo)， 又要發(fā)揮評價人員 的積極性和專業(yè)技能，根據(jù)不

29、同項目特點開發(fā)合適的評價框架。基于這種考慮，指南根據(jù)4個評價準則設(shè)計出12個關(guān)鍵評價問題。這12個關(guān)鍵評價問題是 每個項目績效評價的共性問題，而評價指標留待評價人員根據(jù)不同項目具體開 發(fā)。這樣，統(tǒng)一的關(guān)鍵評價問題保證了不同評價都涉及了共同的關(guān)鍵績效內(nèi)容， 而個性的評價指標則體現(xiàn)了不同項目的特點。如果管理部門還提出了其他的關(guān)鍵評價問題， 評價小組可以根據(jù)問題的性質(zhì) 歸入評價準則當中；如果不能歸入，可以放在評價報告第4章需要說明的事項中 進行說明。以下按照圖5-2的流程一步一步介紹如何開發(fā)績效評價框架。圖5-2設(shè)計階段績效評價框架開發(fā)流程5.2.1關(guān)鍵評價問題本指南針對每個評價準則共設(shè)計出 12個

30、關(guān)鍵評價問題，具體如下：相關(guān)性相關(guān)性包括2個關(guān)鍵評價問題：問題1.1:在評價之時，項目是否符合政府的發(fā)展規(guī)劃、優(yōu)先發(fā)展重點？問題12項目是否針對某一實際問題和需求？問題1.1是評價項目的政策相關(guān)性。即項目與當前國家、行業(yè)發(fā)展戰(zhàn)略、優(yōu)先重點的相符程度。問題1.2是評價項目與面臨的問題和需求的相關(guān)性。它考察兩方面內(nèi)容。首先，在設(shè)計之時項目活動是否針對當時的實際問題。比如某農(nóng)業(yè)發(fā) 展項目，當時當?shù)剞r(nóng)業(yè)發(fā)展面臨的主要問題是農(nóng)業(yè)用水嚴重缺乏（水源性 缺水）需要引水灌溉，那么要評價這個項目設(shè)計的活動（比如建設(shè)水渠和 水庫）是否針對了上述問題。其次，在進行績效評價之時，項目完工后提 供的產(chǎn)出是否能夠滿足當前

31、的需求。仍然以上述項目為例，如果當?shù)剞r(nóng)業(yè) 灌溉問題已經(jīng)由水源性缺水變成水質(zhì)性缺水（即引過來的水嚴重污染而無 法用于灌溉），那么項目建設(shè)的水渠和水庫仍然無法滿足當?shù)剞r(nóng)業(yè)用水需 求。這說明項目與當前當?shù)氐膯栴}相關(guān)性不強。效率效率包括4個關(guān)鍵評價問題：問題2.1:項目是否按照計劃的資金預(yù)算實施？問題22項目是否按照計劃的時間周期實施并完工？問題2.3:項目是否實現(xiàn)了所有的預(yù)期產(chǎn)出？問題2.4:項目完工后是否達到預(yù)期的經(jīng)濟內(nèi)部收益率？問題2.1是評價項目的資金使用情況。它考察項目資金是否按照預(yù)算 使用，使用是否節(jié)約。對于完工項目，實際投入以項目完工報告中的為準； 對于正在實施的項目，實際投入以項目年度

32、進展報告中的為準。問題2.2是評價項目實施的時間效率。它考察兩方面內(nèi)容，一是項目是否按預(yù)期的開工時間開工，二是項目是否在計劃的時間周期內(nèi)完工。項目的預(yù)計開工時間和預(yù)計實施周期以項目評估文件/設(shè)計文件或項目實施計劃中的時間為準，實際時間以項目完工報告中的為準。問題2.3評價項目產(chǎn)出的實現(xiàn)情況。一般項目會分成若干個組成部分，每個組成部分包括一些具體活動。通過實施這些活動，才能保證項目實現(xiàn)預(yù)期產(chǎn)出（如產(chǎn)品、服務(wù)、設(shè)施等），而通過產(chǎn)出的使用，實現(xiàn)預(yù)期目標。這里要評價項目是否按質(zhì)按量實現(xiàn)了所有預(yù)期產(chǎn)出。問題2.4考察項目的經(jīng)濟內(nèi)部收益率。該問題并非對所有項目都適用。如果項目評估文件或項目完工報告中寫明經(jīng)

33、濟內(nèi)部收益率對該項目不適用，那么績效評價就不對其進行評價。效果效果包括2個關(guān)鍵評價問題：問題3.1:項目是否實現(xiàn)了預(yù)期目標？問題32項目的實際受益者是否是項目的目標受益群體？問題3.1是評價效果最核心的內(nèi)容。如果項目目標經(jīng)過修改并且獲得財政部 門的批準，則應(yīng)采用修改后的目標。問題3.2是評價項目瞄準度問題，只有項目的實際受益群體是項目計劃的目 標受益群體，項目的效果才能充分體現(xiàn)出來，也才能說項目實施是成功的?？沙掷m(xù)性可持續(xù)性包括4個關(guān)鍵評價問題：問題4.1:項目的管理和/或運行機構(gòu)的設(shè)置、人力資源、技術(shù)能否滿足項目持續(xù)運行的需要？問題4.2:項目的產(chǎn)出能否得到持續(xù)地提供、維護和利用？問題4.3

34、:項目運行所依賴的政策、制度能否得到持續(xù)地實施？問題4.4:項目財務(wù)是否可持續(xù)？問題4.1考察的是項目完工后，項目的管理機構(gòu)和/或運行機構(gòu)能否保證項 目的持續(xù)運行問題4.2中的產(chǎn)出是指通過項目實施獲得的基礎(chǔ)設(shè)施、設(shè)備、教室、醫(yī)院等 實物產(chǎn)出，以及培訓(xùn)、服務(wù)、技術(shù)支持等軟產(chǎn)出。這個問題考察的是項目產(chǎn)出能 否持續(xù)地提供、維護和利用，以保障項目持續(xù)發(fā)揮作用。問題4.3是考察制度或政策對項目持續(xù)性的保障程度，比如用水制度對水資源保護和利用項目十分重要，如果用水制度沒有得到持續(xù)地執(zhí)行， 那么項目的效 果也就無法持續(xù)。問題4.4是考察項目投入運行后的收支情況或經(jīng)費保障情況。上述12個關(guān)鍵評價問題是針對一個

35、完工項目而設(shè)計的；而對于正在實施的項目有些問題不適用。當然，對正在實施項目的評價，評價小組也可以對其中一 些問題進行預(yù)測性回答，并說明預(yù)測的理由，以提醒管理者注意，采取必要措施 保證項目的成功實施。表5-3列出了所有關(guān)鍵評價問題，并說明其適用的項目類型。表5-3關(guān)鍵評價問題的適用性關(guān)鍵評價問題適用的項目完工 項目正在實 施項目相關(guān)性1.1 在評價之時，項目是否符合政府的發(fā)展規(guī)劃、優(yōu)先發(fā) 展重點？1.2 項目是否針對某一實際問題和需求?VVVV效率2.1 項目是否按照計劃的資金預(yù)算實施？2.2 項目是否按照計劃的時間周期實施并完工？2.3 項目是否實現(xiàn)了所有的預(yù)期產(chǎn)出？2.4 項目完工后是否達到

36、預(yù)期的經(jīng)濟內(nèi)部收益率？VVV*V*效果3.1 項目是否實現(xiàn)了預(yù)期目標？3.2 項目的實際受益者是否項目的目標受益群體？VV*可持續(xù)性4.1 項目的管理和/或運行機構(gòu)的設(shè)置、人力資源、技術(shù)能 否滿足項目持續(xù)運行的需要？4.2 項目的產(chǎn)出能否得到持續(xù)地提供、維護和利用？4.3 項目運行所依賴的政策、制度能否得到持續(xù)地實施？4.4 項目財務(wù)是否可持續(xù)？注：帶的問題對完工項目和正在實施的項目都適合，帶“ *”的問題表示對于正在實施的項目可以通 過現(xiàn)有的事實和利益相關(guān)者的觀點進行預(yù)測評價，帶“ * ”的問題表示如果項目設(shè)計之時對經(jīng)濟內(nèi)部收益 率沒有計算，則對該項目不適用。5.2.2開發(fā)評價指標評價指標是

37、針對關(guān)鍵評價問題而開發(fā)的，評價指標是回答關(guān)鍵評價問題的工 具。二者的關(guān)系如下：（1）有的關(guān)鍵評價問題包含了多項評價內(nèi)容，需要用不同 的指標加以區(qū)分，所以有的關(guān)鍵評價問題會包含若干個評價指標；（2）通過指標 收集回答關(guān)鍵評價問題的相關(guān)證據(jù)， 避免收集過多的無關(guān)證據(jù)；（3）通過指標可 以體現(xiàn)具體項目的特點；（4）通過指標能夠直觀地對關(guān)鍵評價問題進行分析，從 而得出關(guān)鍵評價問題的評價結(jié)果。評價指標的開發(fā)至關(guān)重要，它影響到其后證據(jù)及其來源的確定、證據(jù)收集方 法的選擇和評價分析等活動。專欄5-1列出了評價指標開發(fā)要遵循的原則。如果 評價指標沒有滿足這些原則，將會影響到績效評價的質(zhì)量，進而評價結(jié)果的應(yīng)用

38、也將大打折扣。專欄5-1開發(fā)評價指標的原則開發(fā)評價指標的SMART原則：具體的（Specific）:指標定義清晰，不產(chǎn)生歧義；可衡量的（Measurable：有確定的評價基準對其進行衡量和分析；可實現(xiàn)的（Achievable）:在現(xiàn)實條件下可以收集到相關(guān)證據(jù)；相關(guān)的（Relevant：指標與對應(yīng)的關(guān)鍵評價問題要相關(guān)，能夠為管理提供有用的信息；時限的（Time-bound）:具有確定的時間范圍。下面以遼寧城市交通項目（見專欄 5-2）為例介紹評價指標的開發(fā)。在本征求意見稿中使用的案例，將隨著研究和試點評價的深入開展而進行完善?？紤]到指南的權(quán)威 性和指導(dǎo)性，最終的指南可能會對案例進行修改，甚至采用

39、新的更加完善和適合的案例。此處僅僅為 開發(fā)評價指標提供示例。專欄5-2遼寧城市交通項目簡介遼寧城市交通項目的發(fā)展目標是提高城市交通系統(tǒng)的生產(chǎn)力，促進遼寧省沈陽市、撫順市和鞍山市的經(jīng)濟和社會發(fā)展。具體目標包括：（1）通過擴展高等級道路設(shè)施、改善次干道和鐵路交叉口、打通斷頭路和道路拓寬，來改善道路基礎(chǔ)設(shè)施瓶頸路段；（2）通過建設(shè)公交走廊和乘客設(shè)施、引進先進公交維護設(shè)備，提高公交服務(wù)的效率和效果；（3）通過開發(fā)先進的、可持續(xù)的路面管理系統(tǒng)，改進道路維修養(yǎng)護的投資狀況；（4）通過制定機動車尾氣排放控制策略（MVECS）,持續(xù)改善項目的投資環(huán)境；（5）通過交通示范項目的渠化、修建非機動車設(shè)施、設(shè)置信號和

40、其他交通管理措施，改善道路系統(tǒng)的運營效率和安全性；（6）通過考察、技術(shù)援助和有針對性的培訓(xùn)，加強城市交通系統(tǒng)管理能力。項目從1999年12月28日開始生效，于2005年12月31日結(jié)束。項目總投入33795萬美元，其中世行實際貸款金額 14760萬美元。項目包括4個分項目（component）:沈陽分項目、撫順分項目、鞍山分項目和技術(shù)援助（TA）分項目。沈陽、撫順、鞍山分項目都包含公共交通、交通管理、道路基礎(chǔ)設(shè)計和道路養(yǎng)護 4個分子項目（subcomponent）。具體資金使用如F表所不。項目實際使用經(jīng)費統(tǒng)計表單位：百萬美元分項沈陽鞍山撫順小計公共交通2.318.001.9812.29交通管理

41、18.035.515.9729.51道路基礎(chǔ)設(shè)施33.2197.9264.12195.25道路維修養(yǎng)護49.6324.0621.7295.41技術(shù)援助1.571.171.253.99先征費0.650.450.401.50合計105.40137.1195.44337.95注：截止到2005年12月的項目經(jīng)費實際使用情況數(shù)據(jù)來源：項目完工報告相關(guān)性開發(fā)相關(guān)性的評價指標之前，要檢查項目目標是否經(jīng)過修改，修改后的目標 是否得到批準。如果項目目標經(jīng)過修改且獲得批準， 那么應(yīng)以修改后的項目目標 來開發(fā)評價指標。表5-4相關(guān)性評價指標開發(fā)-以遼寧城市交通項目為例準則關(guān)鍵評價問題評價指標1.1在評價之時，項目

42、是否符合政項目與當前城市交通發(fā)展政策的相相關(guān)府發(fā)展政策或優(yōu)先發(fā)展重點？符程度性1.2項目是否針對當?shù)氐膶嶋H問題項目與當時項目市城市交通發(fā)展問和需求？題的針對程度準則關(guān)鍵評價問題評價指標項目對當前項目市城市交通發(fā)展需求的滿足程度效率針對效率的4個關(guān)鍵評價問題，評價小組首先要明確項目的計劃和實際的實施周期、項目的資金預(yù)算及使用情況、 項目預(yù)期要開展的和實際開展的活動、 項 目的預(yù)期和實際產(chǎn)出、項目是否測算其經(jīng)濟內(nèi)部收益率、 如有預(yù)期值是多少。然 后基于這些內(nèi)容開發(fā)評價指標。對于問題2.3要盡量使用項目評估文件或設(shè)計文件中的產(chǎn)出目標，如果評價 小組認為項目設(shè)計的產(chǎn)出目標存在重大缺陷， 無法對產(chǎn)出進行

43、客觀地衡量，可以 設(shè)計新的產(chǎn)出目標，但要與管理部門、項目單位協(xié)商，并考慮證據(jù)收集的難度和 成本。同時，要在評價報告第 4章需要說明的事項中加以說明。表5-5效率評價指標開發(fā)-以遼寧城市交通項目為例準則關(guān)鍵評價問題評價指標效率2.1項目是否按照計劃的資金預(yù)算實施？項目資金使用與預(yù)算的一致性2.2項目是否按照計劃的時間周期實施并完工？項目預(yù)期和實際的實施周期相符程度2.3項目是否實現(xiàn)了所有的預(yù)期產(chǎn)出？項目公共交通部分產(chǎn)出的實現(xiàn)程度項目交通管理部分產(chǎn)出的實現(xiàn)程度項目道路基礎(chǔ)設(shè)施部分產(chǎn)出的實現(xiàn)程度項目道路維修養(yǎng)護部分產(chǎn)出的實現(xiàn)程度項目技術(shù)援助部分產(chǎn)出的實現(xiàn)程度2.4項目完工后是否達到預(yù)期的經(jīng)濟內(nèi)部收益

44、率？項目經(jīng)濟內(nèi)部收益率（EIRR）的實現(xiàn)程度注：該項目包括公共交通、交通管理、道路基礎(chǔ)設(shè)施、道路維修養(yǎng)護和技 術(shù)援助5項活動，因此，針對這 5方面內(nèi)容設(shè)置產(chǎn)出指標。效果開發(fā)效果評價指標之前，要明確項目目標和目標受益群體是誰。對于問題3.1要盡量使用項目評估文件或項目設(shè)計文件中的效果目標。如果評價小組認為項目設(shè)計的效果目標存在重大缺陷， 無法對目標實現(xiàn)程度進行客觀地衡量， 可以 設(shè)計新的效果目標，但要與管理部門、項目單位協(xié)商，并考慮證據(jù)收集的難度和 成本。同時，要在評價報告第 4章需要說明的事項中加以說明。本項目效果目標分為若干個具體目標 （Specific Objectives,并且每個具體目

45、 標都設(shè)有評價指標，那么可以將問題 3.1按具體目標分解成若干個子問題，然后 根據(jù)子問題設(shè)計效果評價指標。表5-6效果評價指標開發(fā)-以遼寧城市交通項目為例準則關(guān)鍵評價問題評價指標效果3.1項目是否實現(xiàn)了預(yù)期目標？3.1.1項目是否實現(xiàn)減少基礎(chǔ)設(shè)施瓶頸路段的目標？交通走廊出行時間3.1.2項目是否實現(xiàn)改進道路維修養(yǎng)護投資狀況的目標？路面狀況維修養(yǎng)護預(yù)算維修養(yǎng)護平均費用3.1.3項目是否實現(xiàn)持續(xù)改善 項目的投資環(huán) 境的目標？大點質(zhì)量標準機動車尾氣排放控制戰(zhàn)略的制定機動車尾氣排放控制戰(zhàn)略的米用和實施3.1.4項目是否實現(xiàn)提高道路 系統(tǒng)的運營效 率和運營安全 的目標？對通過交通屏蔽線的各種交通模式的交

46、通流量、出行時間和占后率進行調(diào)查以衡量系統(tǒng)的運營能力與行人和自行車有關(guān)的事故總數(shù)、總死亡人數(shù)及百分比3.1.5項目是否實現(xiàn)提高公交服務(wù)的效率和效果的目標？年度補貼年均單位里程的運營費用每年客運量可運營的公交數(shù)量營運線路數(shù)量3.1.6項目是否實現(xiàn)加強城市交通系統(tǒng)管理能力的目標？當?shù)啬芰Φ募訌姾蜎Q策的改善3.2項目的實際受益群體是否是項目的目標受益群體？目標受益群體覆蓋率可持續(xù)性對于問題4.1,評價小組要明確項目完工后的管理機構(gòu)和/或運行機構(gòu)有哪些，它們的機構(gòu)設(shè)置是否合理，人力資源是否充足、是否具備必需的管理和技術(shù) 能力等。對于問題4.2,評價小組要分析項目的哪些產(chǎn)出對項目持續(xù)發(fā)揮成效是 關(guān)鍵的，

47、比如對于高速公路項目，高速公路的維護和利用是保證項目發(fā)揮效益的 關(guān)鍵；對于扶貧項目，對貧困人口進行持續(xù)地生產(chǎn)和勞動技能培訓(xùn)是項目實現(xiàn)扶 貧效果的關(guān)鍵。對于問題 4.3,評價小組要明確項目制定的政策以及國家、行業(yè) 和當?shù)叵嚓P(guān)的政策有哪些，這些政策對項目持續(xù)運行發(fā)揮什么作用，如果沒有這些政策，項目能否持續(xù)下去。對于問題4.4,評價小組要考慮機構(gòu)獲得的經(jīng)費等能否滿足項目運行的各項成本支出。表5-7介紹可持續(xù)性的關(guān)鍵評價問題的指標開發(fā)。表5-7可持續(xù)性評價指標開發(fā)-以遼寧城市交通項目為例準則關(guān)鍵評價問題評價指標4.1項目的管理和/或運行機構(gòu)的項目巾巾政道路養(yǎng)護處的人力可持設(shè)置、人力資源、技術(shù)能否滿足資

48、源和技術(shù)對道路持續(xù)養(yǎng)護的續(xù)性項目持續(xù)運行的需要？滿足程度項目市交管部門的人力資源和 管理對持續(xù)開展交通管理的滿 足程度4.2項目的產(chǎn)出能否得到持續(xù)地提供、維護和利用？道路基礎(chǔ)設(shè)施的持續(xù)利用程度道路基礎(chǔ)設(shè)施維護的持續(xù)性交通管理的持續(xù)性4.3項目運行所依賴的政策、制度能否得到持續(xù)地實施？項目所依賴的優(yōu)先發(fā)展公共交通政策的持續(xù)性4.4項目財務(wù)是否可持續(xù)？項目收支情況5.2.3證據(jù)及其來源證據(jù)是用來測量評價指標、回答關(guān)鍵問題、支持評價結(jié)論等的數(shù)據(jù)、事實和 觀點。在開發(fā)評價指標時就要考慮證據(jù)及其來源。評價小組要盡量收集高質(zhì)量的 證據(jù)。高質(zhì)量的證據(jù)具備以下特點：相關(guān)性：所收集的證據(jù)要與指標相關(guān)、并且是最重

49、要的信息，比如要測 量貧困地區(qū)適齡女童的小學(xué)入學(xué)情況，那么就要收集女童而不 是男童的入學(xué)率數(shù)據(jù)。有效性：所收集的證據(jù)要能真實反映指標內(nèi)容，比如要測量某個省的貧 困地區(qū)適齡女童的小學(xué)入學(xué)情況，那么要收集全省的適齡女童 入學(xué)率數(shù)據(jù)，而不是縣級的數(shù)據(jù)。可靠性：測量相同指標的證據(jù)可以通過相同方法進行收集并驗證，比如適齡女童入學(xué)率數(shù)據(jù)每年都可以通過“某地區(qū)適齡女童入學(xué)人數(shù)/某地區(qū)適齡女童人數(shù)*100%”來獲得。準確性：所收集的證據(jù)要準確，特別是對于收集的利益相關(guān)者觀點要注意其代表性，比如對于“社區(qū)環(huán)境是否改善”這一問題，有 8名居民認為環(huán)境得到改善，而只有2名居民認為環(huán)境沒有改善，那么要采用8名居民的觀

50、點?？冃гu價證據(jù)來源主要有以下3類，見專欄5-3。專欄5-3績效評價證據(jù)來源第一類：制度、政策和法規(guī)國家相關(guān)法律、法規(guī)、規(guī)章；國家發(fā)展規(guī)劃和相關(guān)部門行業(yè)發(fā)展規(guī)劃及政策，地方政府制定的發(fā)展規(guī)劃和政策；貸款方的有關(guān)制度規(guī)定。第二類：項目文件和相關(guān)報告項目文件和報告，主要包括：立項評估報告、項目進展報告、完工報告等；國家發(fā)展改革部門的項目立項批復(fù)報告；項目單位的項目執(zhí)行文件和報告，主要包括：項目可行性研究報告、環(huán)境影響評價報告，項目執(zhí)行過程中的有關(guān)財務(wù)會計資料、工作總結(jié)、監(jiān)測報告、項目進度報告、項目竣工驗收報告等；財政、審計部門對項目執(zhí)行情況的專項檢查報告、專項審計報告；研究機構(gòu)或咨詢機構(gòu)提供的與項

51、目相關(guān)的研究資料、分析報告和咨詢報上登口尋。第三類：評價小組直接收集相關(guān)利益者座談會；對相關(guān)人員的面訪；實地調(diào)研；問卷調(diào)查；評價小組采用其他方法收集的數(shù)據(jù)。5.2.4證據(jù)收集方法證據(jù)收集方法是用以收集所需證據(jù)的方法和技術(shù)。證據(jù)收集方法有很多種， 如案卷研究、面訪、座談會、問卷調(diào)查、實地調(diào)研、案例研究等。大多數(shù)績效評 價都可能使用其中一種或多種。表 5-8列出了不同證據(jù)收集方法的優(yōu)點和缺點， 評價人員可以根據(jù)現(xiàn)實情況選擇適合的方法。 選擇證據(jù)收集方法還要考慮評價的 經(jīng)費預(yù)算、人力資源和時間等因素。表5-8證據(jù)收集方法的優(yōu)缺點方法優(yōu)點缺點案卷研究成本低，并且能從現(xiàn)有資料中獲得大量有用證據(jù)很難對現(xiàn)有

52、資料中的證據(jù)進行核實面訪成本較低且較容易實施，能夠 收集有用且豐富的信息，特別 是利益相關(guān)者的觀點、建議、 以及解釋項目成功或失敗的原 因受訪人的主觀偏見使證據(jù)的客 觀性受到影響，給評價人員的 分析和判斷帶來困難座談會成本較局，能夠收集更多不同 相關(guān)利益者的觀點、判斷、以 及解釋項目成功或失敗的原因座談會上可能會收集到許多績 效評價無關(guān)的信息，有時座談 會參與人可能更多地談?wù)撍P(guān) 注的問題而非評價小組關(guān)注的 問題，同時參與人的主觀偏見 也會影響證據(jù)的客觀性問卷調(diào)查提供大量結(jié)構(gòu)化的證據(jù)，覆蓋面廣成本高，有時問卷回收時間過長給后續(xù)分析帶來困難實地調(diào)研能夠獲得詳細的證據(jù)，在項目已有信息缺乏情況卜米用

53、能夠獲得項目的一手證據(jù)成本身案例研究提供詳細和深入的證據(jù)很難獲得整體的綜合信息通過上述步驟將形成一個完整的項目績效評價框架， 用于指導(dǎo)績效評價工作的開展。5.3完成績效評價實施方案5.3.1 面訪、座談會和實地調(diào)研問題設(shè)計面訪、座談會和實地調(diào)研是收集評價證據(jù)的重要方法，績效評價一般都會采 用。為了更好地從面訪、座談會和實地調(diào)研中收集到有用的信息，必須設(shè)計問題清單。設(shè)計問題清單要以績效評價框架為基礎(chǔ)。問題按照其作用可分為4類：（1）用于收集評價指標需要的證據(jù)；（2）用于核實案卷研究和其他方法收集的證據(jù) ；(3)用于收集指標實現(xiàn)或沒有實現(xiàn)的原因;(4)用于收集利益相關(guān)者的觀點必須強調(diào)的是，這里的問題清單是用來收集相關(guān)評價證據(jù)，而本指南的12個關(guān)鍵評價問題是用來評價項目績效，兩者作用不同。開發(fā)問題清單應(yīng)該注意：(1)問題要有針對性，避免設(shè)計過多無關(guān)的問題；(2)問題要精煉、清晰,避免產(chǎn)生歧義；(3)問題涵蓋的內(nèi)容要單一，不要將不同內(nèi)容放在同一個問題中；(4)要預(yù)先估計問題是否能夠得到回答，如果不