建設(shè)國家重大項(xiàng)目以結(jié)果為導(dǎo)向的

TA4581:DevelopingaNationalResult-Based

M&ESystemForKeyProjects

建設(shè)國家重大項(xiàng)目以結(jié)果為導(dǎo)向的

監(jiān)測與評估系統(tǒng)

Evaluation

評估March20072007年3月項(xiàng)目建成3－5年后領(lǐng)導(dǎo)們想知道：項(xiàng)目建設(shè)的正確嗎？項(xiàng)目是否實(shí)現(xiàn)預(yù)期的運(yùn)營結(jié)果？在運(yùn)營階段是否有需改進(jìn)的方面以優(yōu)化結(jié)果？項(xiàng)目產(chǎn)生的結(jié)果是否在項(xiàng)目提交物運(yùn)行的全生命周期內(nèi)有持續(xù)性？項(xiàng)目是否已經(jīng)實(shí)現(xiàn)了預(yù)期的長期影響？我們將來是否應(yīng)該再實(shí)施類似的項(xiàng)目？我們從此項(xiàng)目中學(xué)到什么經(jīng)驗(yàn)教訓(xùn)，這些經(jīng)驗(yàn)教訓(xùn)如何應(yīng)用到未來的項(xiàng)目中？Evaluation評估系統(tǒng)地、客觀地對項(xiàng)目、大型計(jì)劃和戰(zhàn)略進(jìn)行評估－我們的討論將限制在項(xiàng)目的范圍內(nèi)；評估包括對可行性研究、設(shè)計(jì)、實(shí)施和結(jié)果的評估；

評估可在項(xiàng)目實(shí)施前，實(shí)施中及實(shí)施后進(jìn)行，但我們最常關(guān)注的是后評價(jià)；僅對選擇的主要項(xiàng)目進(jìn)行深入徹底的評估。直接結(jié)果和長期影響如果缺乏正式的評估，項(xiàng)目完成后其直接結(jié)果和長期影響通常不能進(jìn)行測量。直接結(jié)果評估研究的是項(xiàng)目投入運(yùn)行后馬上可以產(chǎn)生的結(jié)果：如財(cái)務(wù)方面的，使用情況，及其他直觀的結(jié)果

。長期影響評估研究項(xiàng)目所帶來的更廣泛的經(jīng)濟(jì)、社會(huì)和環(huán)境效果。項(xiàng)目評估的目的評估項(xiàng)目的相關(guān)性、設(shè)計(jì)和實(shí)施；

決定項(xiàng)目所帶來的直接結(jié)果和長期影響：在財(cái)務(wù)、經(jīng)濟(jì)、社會(huì)和環(huán)境指標(biāo)上的影響；包括預(yù)期和未預(yù)期的影響評估項(xiàng)目結(jié)果的持續(xù)性：項(xiàng)目所產(chǎn)生的結(jié)果是否可持續(xù)到將來？服務(wù)于將來的項(xiàng)目：其它選擇的可能性經(jīng)驗(yàn)教訓(xùn)

什么時(shí)候進(jìn)行評估評估的時(shí)間取決于想從評估中獲得什么：在項(xiàng)目實(shí)施之前和實(shí)施中的評估更關(guān)注項(xiàng)目對需解決問題的相關(guān)性，及項(xiàng)目方案及設(shè)計(jì)能否滿足解決原設(shè)定問題的初衷。項(xiàng)目在完成后一年內(nèi)進(jìn)行評估主要關(guān)注的是項(xiàng)目的提交物情況及項(xiàng)目投入運(yùn)行初期產(chǎn)生的直接結(jié)果。

在項(xiàng)目建設(shè)完成1至3年間的評估主要關(guān)注項(xiàng)目所帶來的直接結(jié)果，同時(shí)也可以看作早期的長期影響。

項(xiàng)目建設(shè)完成3至5年后，評估更關(guān)注長期影響。評估基本內(nèi)容相關(guān)性項(xiàng)目長期影響和直接結(jié)果與國家發(fā)展戰(zhàn)略的一致性

項(xiàng)目方案和設(shè)計(jì)滿足需求效果實(shí)現(xiàn)直接結(jié)果的程度效率相關(guān)資源轉(zhuǎn)化為結(jié)果的經(jīng)濟(jì)性及效率可持續(xù)性項(xiàng)目資源（人力、組織、制度，財(cái)務(wù)）是否可以滿足項(xiàng)目在其經(jīng)濟(jì)周期內(nèi)持續(xù)帶來影響產(chǎn)生結(jié)果。后評估“后”評估目的是為了評價(jià)項(xiàng)目所帶來的結(jié)果

評估的四個(gè)準(zhǔn)則：相關(guān)性效果效率

可持續(xù)性長期影響指標(biāo)通過項(xiàng)目提交物的運(yùn)營持續(xù)直接產(chǎn)生相應(yīng)的結(jié)果，這些結(jié)果的積累帶來更廣泛更長期的影響；長期影響指標(biāo)用于評估。Impactindicators–examples

長期效應(yīng)—舉例數(shù)量歸于該項(xiàng)目原因的凈增就業(yè)量質(zhì)量特殊疾病死亡率的減少量傳染病死亡率（例如工程區(qū)域嬰兒死亡率，與項(xiàng)目建設(shè)前相比每個(gè)地區(qū)至少了xx％）

財(cái)務(wù)由項(xiàng)目帶來的經(jīng)濟(jì)收益－例如：因?yàn)楦咚俟讽?xiàng)目沿線地區(qū)國民生產(chǎn)總值(GDP)的增加。效果分析要求分析反應(yīng)項(xiàng)目的”真實(shí)“效果對照“之前”和“之后”“實(shí)現(xiàn)的”和“目標(biāo)設(shè)置的”“有項(xiàng)目”和“沒有項(xiàng)目”.兩種類型：定量定性之前/之后時(shí)間實(shí)施項(xiàng)目運(yùn)營期變化結(jié)果其他因素的影響時(shí)間實(shí)施提交物周期因?yàn)轫?xiàng)目原因產(chǎn)生的變化因?yàn)槠渌蛩匕l(fā)生的變化結(jié)果定量分析－使用“反事實(shí)”法將項(xiàng)目受益群體或地區(qū)與非項(xiàng)目受益群體或地區(qū)的直接結(jié)果指標(biāo)進(jìn)行比較;要求謹(jǐn)慎設(shè)置研究方法；使用實(shí)驗(yàn)的、“準(zhǔn)實(shí)驗(yàn)的”或者“非實(shí)驗(yàn)的”設(shè)計(jì)。使用反事實(shí)法時(shí)間實(shí)施提交物運(yùn)營周期因?yàn)轫?xiàng)目原因產(chǎn)生的差別因?yàn)槠渌蛩禺a(chǎn)生的差別“項(xiàng)目”組“非項(xiàng)目”組結(jié)果對比組可能從不同的基線開始時(shí)間實(shí)施提交物運(yùn)行周期“項(xiàng)目”組“非項(xiàng)目”組D2D1因?yàn)轫?xiàng)目原因產(chǎn)生的差別=D2–D1結(jié)果定量方法隨機(jī)實(shí)驗(yàn)設(shè)計(jì)準(zhǔn)實(shí)驗(yàn)設(shè)計(jì)非實(shí)驗(yàn)設(shè)計(jì)隨機(jī)實(shí)驗(yàn)設(shè)計(jì)類似醫(yī)學(xué)研究－對控制組（非項(xiàng)目）組與實(shí)驗(yàn)組（受項(xiàng)目影響）進(jìn)行比較。實(shí)際應(yīng)用有局限性隨機(jī)實(shí)驗(yàn)設(shè)計(jì)隨機(jī)將個(gè)人或團(tuán)體分入從項(xiàng)目中受益的“處理”組或不在項(xiàng)目中受益的“控制”組；盡可能從開始就如此分組；兩組應(yīng)該經(jīng)歷相同的項(xiàng)目之外的事件；對各組的直接結(jié)果進(jìn)行測量；兩組直接結(jié)果之間的差異是因?yàn)轫?xiàng)目的原因產(chǎn)生的，而其他客觀原因?qū)山M差別的影響應(yīng)該微乎其微。項(xiàng)目/非項(xiàng)目比較的“準(zhǔn)實(shí)驗(yàn)”設(shè)計(jì)

與實(shí)驗(yàn)設(shè)計(jì)的原理相同，但是：沒有隨機(jī)分為控制組和處理組；使用與自然情況相對應(yīng)的方法分組比較，而非隨機(jī)分組；要求更多的數(shù)據(jù)排除二義性的解釋。包括：非等價(jià)比較設(shè)計(jì)；時(shí)間中斷設(shè)計(jì)；關(guān)聯(lián)設(shè)計(jì)非實(shí)驗(yàn)方年法…使用統(tǒng)具計(jì)學(xué)方柏式進(jìn)行烤模擬包括：prop盲ensi犁tys陳core廊mat疑chin存g，(D2-D1),regr永essi聽ond地isco模ntin疏uity捉des挽ign，inst沾rume江ntal忠var灶iabl柄es。需要謹(jǐn)炎慎避免隙評價(jià)偏擱見選擇定量食方法需考慮濁平衡：對結(jié)果精故準(zhǔn)度要求成本實(shí)用性定性分析一些重要尖的長期影濟(jì)響可能不丘易進(jìn)行定祥量監(jiān)測，陳或更好采臺(tái)用定性評繼估。有些定絡(luò)性的信缸息會(huì)加加深對定勢量數(shù)據(jù)材的理解鋒。包括：觀察有組織的綁面談?wù){(diào)查（定性的勤問題）目標(biāo)群贏體日志和池自我報(bào)捏告專家判老斷長期影響艙定性評估不使用反漁事實(shí)分析仰；通過使愚用定性壟方法，巨如過程財(cái)評審、袋面談、譜調(diào)查、晃二手?jǐn)?shù)授據(jù)分析乘，得出荷推論；雖然沒有攀像定量方嚷法那樣嚴(yán)環(huán)格，但是鄙通常也可消提供有用航的信息；通過使用朋深入的定荷性評估，步引進(jìn)一些憶復(fù)雜情景蜜條件，以組增進(jìn)對定墓量結(jié)果的落認(rèn)識(shí)。定量Vs定性分析定量分析網(wǎng)更權(quán)威但杜是需要投乒入更多的煤努力也更護(hù)嚴(yán)格。雖然有定名量數(shù)據(jù)，鴨但是定性悄評估仍可總對定量的畝評估起到攜補(bǔ)充和加乞強(qiáng)的作用哨。評估設(shè)計(jì)在項(xiàng)目投識(shí)別和艦準(zhǔn)備期徒間決定是慈否要執(zhí)插行評估明晰評詠估的目駱標(biāo)調(diào)查數(shù)共據(jù)實(shí)用殼性選擇評估死方法組成評雙估組如果需黎要收集符數(shù)據(jù)，描那么設(shè)計(jì)和附取樣形成問朽卷召集現(xiàn)慨場工作鐮人員并蹈進(jìn)行培炭訓(xùn)預(yù)備調(diào)查在項(xiàng)目剖實(shí)施期雀間和之逢后引入基線渴和反復(fù)調(diào)紗查分析數(shù)伏據(jù)匯報(bào)結(jié)果鉆，與利益冰相關(guān)方進(jìn)滴行討論將評估羊結(jié)果融如入將來變的項(xiàng)目壁策劃中評估資注源分配基于評估封方法的選址擇；非常詳細(xì)感的評估研召究可能需患花費(fèi)多至100萬元人民蜻幣;如果從項(xiàng)幕目啟動(dòng)時(shí)慣就設(shè)置好晴監(jiān)測系統(tǒng)鈔來收集關(guān)河于項(xiàng)目結(jié)始果的數(shù)據(jù)號(hào)，則花費(fèi)副要少得多轉(zhuǎn)。實(shí)際考慮對于規(guī)關(guān)模巨大宮的基建瀉項(xiàng)目長斧期影響迅的測量劍會(huì)很困掙難，因亮為項(xiàng)目板影響到垃的人群唯是很大宇的；有些項(xiàng)目桐需要更長斜時(shí)間才能財(cái)產(chǎn)生長期移影響。例燦如：如果與投資在交蠢通、水電照的商業(yè)項(xiàng)眾目，它們字的使用還炕需重新建起立相應(yīng)的短通道或準(zhǔn)井入，則項(xiàng)療目所帶來姻的對經(jīng)濟(jì)鑄增長的影豈響可能會(huì)箏比項(xiàng)目滯常后多年。案例－河慮北公路評估組設(shè)計(jì)&監(jiān)測框頸架現(xiàn)場數(shù)據(jù)各收集報(bào)告總結(jié)評估組郊組成評估官員交通經(jīng)賊濟(jì)學(xué)家貸－國際勒人員交通專家劑－中國國煙內(nèi)人員社會(huì)經(jīng)斜濟(jì)/移民專家剝－中國國赤內(nèi)人員設(shè)計(jì)&監(jiān)測框護(hù)架設(shè)計(jì)總結(jié)指標(biāo)和目標(biāo)數(shù)據(jù)/匯報(bào)機(jī)制長期影響增長經(jīng)濟(jì)，減少河北省貧困受影響市縣在2000年至2010年的經(jīng)濟(jì)增長要達(dá)到政府經(jīng)濟(jì)增長目標(biāo)。到2005年在9個(gè)貧困縣的每戶收入要高于貧困線（人民幣1，100元）由業(yè)務(wù)評估團(tuán)(OEM)調(diào)查，數(shù)據(jù)取自河北省交通廳(HPCD).直接結(jié)果1.通過提高供應(yīng)能力，改善道路設(shè)施，為客、貨運(yùn)輸提供更為有效、安全的環(huán)境。2.改善進(jìn)入貧困縣村的道路

3.建立corporatize和高速公路單位的能力交通高峰主路的平均速度從每小時(shí)40公里提高到每小時(shí)60公里到2005年每10,000vehicle-km死亡率降低至少10%。減少現(xiàn)有道路（230公里）交通擁堵，到2005年現(xiàn)有道路年平均日交通流量(AADT)增長了30%。到2003年項(xiàng)目所在地區(qū)農(nóng)業(yè)運(yùn)輸時(shí)間減少了至少15%。國際道路粗糙指數(shù)(IRI)減少至<3米/公里。到2003年，道路收費(fèi)增長了至少5％。

2000年，河北省交通廳改組，高速公路運(yùn)營實(shí)現(xiàn)計(jì)算機(jī)管理。業(yè)務(wù)評估團(tuán)使用GPS設(shè)備調(diào)查速度交警統(tǒng)計(jì)數(shù)據(jù)

交通數(shù)據(jù)來自河北省交通廳和業(yè)務(wù)評估團(tuán)的交通調(diào)查。平均點(diǎn)到點(diǎn)的交通時(shí)間來自交通調(diào)查和河北省交通廳的數(shù)據(jù)。由業(yè)務(wù)評估團(tuán)ridesurvey評估－視察&乘車質(zhì)量。河北省交通廳預(yù)算數(shù)據(jù)。河北省交通廳文檔評港審亞行項(xiàng)目餐文件；項(xiàng)目可賣行性研紡究（1997值,河北省交嫁通工程設(shè)夏計(jì)院）項(xiàng)目后評欲價(jià)研究（2004戶,中國道脆路建設(shè)戰(zhàn)咨詢管踏理公司濤）京滬高速碎公里社會(huì)胞經(jīng)濟(jì)評估傅（200伶5年3月,河北社償會(huì)研究南院）滄州貧困關(guān)改善監(jiān)測要報(bào)告（2004年4月,河北社拖會(huì)研究濾院）京滬高速煙公路移民答安置報(bào)告顯（200響3年11月,河北社會(huì)海研究院）項(xiàng)目收入申表、現(xiàn)金花流、資產(chǎn)阿負(fù)債表（鴉從199信8-2翅013啟,京滬高挎速公路季管理辦剪公室）組織結(jié)構(gòu)起（200顧6,京滬高納速公路穴管理辦液公室）收費(fèi)站穗的年交迅通量（險(xiǎn)高速公寬路管理表辦公室迫）河北年鑒虜（200改5,河北統(tǒng)鉗計(jì)局）現(xiàn)場數(shù)捐據(jù)收集計(jì)算5條連接縣確級道路的素車流；60份問卷－涼基于與9個(gè)村利益尖相關(guān)方關(guān)扁于縣級連睬接道路影雅響的面談巾；通過高速住公路和原104國道，測絮量道路粗錄糙度和檢主查道路；與項(xiàng)目可堪行性研究寧報(bào)告作者狡面談；與項(xiàng)目運(yùn)眾營者面談按（辦公室眨領(lǐng)導(dǎo)，財(cái)盼務(wù)、維護(hù)育、法規(guī)部件門領(lǐng)導(dǎo)，蹤蝶一個(gè)收費(fèi)啟站領(lǐng)導(dǎo)、銹處理超載揚(yáng)事務(wù)部門緞?lì)I(lǐng)導(dǎo)）；與業(yè)主蜻面談（冶辦公室域總工程腳師，項(xiàng)燃目辦公袖室財(cái)務(wù)肅、規(guī)劃品和維護(hù)徒部門，眨河北省訴交通廳脹）；與政府媽負(fù)責(zé)農(nóng)撈村地區(qū)件發(fā)展相葡關(guān)的官然員面談與河北生社會(huì)研由究院專雅家面談什；與縣級交級通部門面寫談；與村長面妹談；與一所當(dāng)待地小學(xué)的踏教師面談巨。指標(biāo)和目標(biāo)受影響市縣在2000年至2010年的經(jīng)濟(jì)增長要達(dá)到政府經(jīng)濟(jì)增長目標(biāo)。到2005年在9個(gè)貧困縣的每戶收入要高于貧困線（人民幣1，100元）。經(jīng)濟(jì)有所增長但是在評估時(shí)沒有給出目標(biāo)。

實(shí)現(xiàn)。9個(gè)貧困縣每戶收入從1998年的212元增長到2004年的958.3元（每年增長28.6%)。交通高峰主路的平均速度從每小時(shí)40公里提高到每小時(shí)60公里到2005年每10,000vehicle-km死亡率降低至少10%。減少現(xiàn)有道路（230公里）交通擁堵，到2005年現(xiàn)有道路年平均日交通流量(AADT)增長了30%。到2003年項(xiàng)目所在地區(qū)農(nóng)業(yè)運(yùn)輸時(shí)間減少了至少15%。國際道路粗糙指數(shù)(IRI)減少至<3米/公里。到2003年，道路收費(fèi)增長了至少5％。2000年，河北省交通廳改組，高速公路運(yùn)營流程實(shí)現(xiàn)計(jì)算機(jī)管理。實(shí)現(xiàn)。在高速公路建成后，104國道的平均速度從每小時(shí)40公里提高到每小時(shí)60公里。由于高速公路分流，現(xiàn)有104國道的交通減少30％。這樣交擁堵得以減少。

實(shí)現(xiàn)。事故率從2001年的0.00140每10,000veh-km減少至2004年的0.00048。

實(shí)現(xiàn)?？h級連接道路能力從4級上升至2級，道路從原來4米拓寬為8米。高速公路在2001年至2005年之間，年平均日交通流量每年以34％的速度增長。

交通時(shí)間明顯減少。例如，在Qingxian至Wuqiao&Nanpi&Haixing，時(shí)間縮短了50％。

實(shí)現(xiàn)。高速公路的國際道路粗糙指數(shù)(IRI)減少至2米/公里。在2005年對維護(hù)縣級連接道路的維護(hù)費(fèi)用預(yù)算高達(dá)10億人民幣，預(yù)計(jì)2006年維護(hù)費(fèi)達(dá)到15億人民幣。這個(gè)預(yù)算費(fèi)用，若以長度計(jì)算，每公里道路維護(hù)費(fèi)用高達(dá)12，900元人民幣（大約每公里1600美元）。維護(hù)預(yù)算費(fèi)用用由中央政府、市財(cái)務(wù)預(yù)算和縣財(cái)務(wù)預(yù)算提供。高速公路單位仍然不能完全corporatized。河北省交通廳改組，高速公路管理和運(yùn)營流程實(shí)現(xiàn)計(jì)算機(jī)化。評估的紙主要內(nèi)袍容（直瞞接結(jié)果村）相關(guān)性藝：專家評嚴(yán)審了關(guān)夏于項(xiàng)目軍文件、技政府和揭亞行戰(zhàn)幼略及優(yōu)顧先排序間的文件獸。效果：實(shí)現(xiàn)主從要目標(biāo)山的數(shù)據(jù)烤：減少了粥車輛運(yùn)悄營成本(VO膽C)減少交堡通擁堵懲；推動(dòng)城市啄間交通通映行；降低了項(xiàng)此目地區(qū)的毅貧困狀況慕。效率：顯示效塵率的數(shù)樓據(jù)：經(jīng)濟(jì)內(nèi)部莫收益率(EI具RR)柔.可持續(xù)誤性顯示可持簡續(xù)性的數(shù)適據(jù)：項(xiàng)目資辨產(chǎn)（道循路、其敲它設(shè)施故）的可彎持續(xù)性駱；財(cái)務(wù)可套持續(xù)性勺（稅收筑、重新皂評估財(cái)黑務(wù)內(nèi)部故收益率墾，F(xiàn)IRR）；充足的按維護(hù)（懂目前和山計(jì)劃的冤）人力資考源的保往證評估的主汽要內(nèi)容（燒長期影響襯）…對組織種機(jī)構(gòu)的桌影響定性評估減：河北省交撈通廳(HP鹿CD)村;京滬高順?biāo)俟窅偣芾斫M擇織(JH杏EMO山)對移民造至成的影響肯：定量的對蔽移民影響精進(jìn)行了評百測，專家揭還對安置禽過程的和鋒監(jiān)測進(jìn)行鬼了評審。社會(huì)經(jīng)濟(jì)懇影響比較項(xiàng)術(shù)目地區(qū)南和非項(xiàng)貫?zāi)康貐^(qū)僻經(jīng)濟(jì)增銅長情況趙；評估社會(huì)耕經(jīng)濟(jì)影響役，包括每蛇戶收入、像生活質(zhì)量貓、使用健叔康、教育膛、信用和談其他服務(wù)揪的條件、撲對農(nóng)業(yè)的鉛影響和對柳婦女及少菌數(shù)民族的梢影響。報(bào)告相關(guān)性:項(xiàng)目定儲(chǔ)級為非化常相關(guān)舅。項(xiàng)目所妙有構(gòu)成雨－高速豈公路、羊縣級連創(chuàng)接公路反、村級