健康教育評價

健康教育評價1第一頁，共六十九頁，編輯于2023年，星期五目的與要求：了解評價在健康教育項目中的意義；掌握健康教育評價的種類和內(nèi)容；熟悉評價設(shè)計方案和評價結(jié)果的影響因素；熟悉成本效益和成本效果分析方法第二頁，共六十九頁，編輯于2023年，星期五健康教育工作的一般程序計劃實(shí)施項目計劃實(shí)施效果目的性？科學(xué)性？可行性？是否按計劃執(zhí)行？計劃是否符合客觀實(shí)際、是否需要修改、如何修改？目標(biāo)人群是否滿意？……如何？3第三頁，共六十九頁，編輯于2023年，星期五第一節(jié)評價概述4第四頁，共六十九頁，編輯于2023年，星期五概念評價

客觀實(shí)際預(yù)期目標(biāo)Vs第五頁，共六十九頁，編輯于2023年，星期五

評價(evaluation)：將客觀實(shí)際與預(yù)期目標(biāo)進(jìn)行比較是系統(tǒng)收集、分析、表達(dá)資料的過程目的在于確定健康教育計劃和干預(yù)的價值，為健康教育計劃的進(jìn)一步實(shí)施和以后的項目決策提供依據(jù)。不僅能使我們了解健康教育項目效果如何，還能全面檢測、控制，最大限度地保障計劃的先進(jìn)性和實(shí)施的質(zhì)量，從而也成為取得預(yù)期效果的關(guān)鍵措施。6第六頁，共六十九頁，編輯于2023年，星期五一、評價的性質(zhì)評價是管理的重要組成部分，貫穿于計劃和實(shí)施的全過程

始于計劃，對計劃的科學(xué)性、可行性、適宜性進(jìn)行評價，并對計劃實(shí)施的進(jìn)度和質(zhì)量進(jìn)行評估。對于干預(yù)措施執(zhí)行后是否達(dá)到了預(yù)期效果，達(dá)到目標(biāo)程度的評定，是質(zhì)量監(jiān)測與控制的重要內(nèi)容。7第七頁，共六十九頁，編輯于2023年，星期五一、評價的性質(zhì)評價的基本原理是比較

只有通過比較，才能鑒別，找出差異，分析原因，總結(jié)規(guī)律，完善管理，提高效率。8第八頁，共六十九頁，編輯于2023年，星期五確定價值標(biāo)準(zhǔn)是評價的前提

一、評價的性質(zhì)評價是對某一特定目標(biāo)與一個可接受標(biāo)準(zhǔn)做比較。要在一定的價值體系下做出判斷，它是一種主觀活動，這種價值可以是一種標(biāo)準(zhǔn)，或自身的基線水平，或他人的結(jié)果。9第九頁，共六十九頁，編輯于2023年，星期五測量是評價的重要手段，準(zhǔn)確的信息是評價成功的保障

一、評價的性質(zhì)只有通過對評價指標(biāo)的定性、定量測量，評價才能得出準(zhǔn)確結(jié)論。因此，需要有完善的信息系統(tǒng)的支持，需要建立一套科學(xué)可行的指標(biāo)體系及各項指標(biāo)的測量標(biāo)準(zhǔn)與方法。10第十頁，共六十九頁，編輯于2023年，星期五二、評價的目的和意義評價的目的1.明確健康教育計劃的先進(jìn)性與合理性2.確定計劃的執(zhí)行情況3.確定健康教育活動是否達(dá)到預(yù)期目標(biāo)4.總結(jié)健康教育項目的成功與不足之處，提出進(jìn)一步的研究假設(shè)5.向公眾和項目資金提供者說明項目結(jié)果，擴(kuò)大影響，獲取更多支持11第十一頁，共六十九頁，編輯于2023年，星期五評價的意義1、保證計劃設(shè)計和實(shí)施的質(zhì)量。2、科學(xué)地說明計劃的價值。3、改善計劃的手段。4、向公眾和資金提供者說明項目實(shí)施所取得的結(jié)果。5、豐富和充實(shí)理論知識二、評價的目的和意義12第十二頁，共六十九頁，編輯于2023年，星期五第二節(jié)評價的種類與內(nèi)容13第十三頁，共六十九頁，編輯于2023年，星期五形成評價過程評價近期效果評價中期效果評價遠(yuǎn)期效果評價計劃實(shí)施效果效應(yīng)評價健康教育過程健康教育評價結(jié)局評價效果評價14第十四頁，共六十九頁，編輯于2023年，星期五對項目計劃本身進(jìn)行的評價，包括目標(biāo)人群的選擇、策略確定、方法設(shè)計等，主要發(fā)生在計劃設(shè)計階段，部分職能將延續(xù)到實(shí)施階段。一、形成評價（formativeevaluation）15第十五頁，共六十九頁，編輯于2023年，星期五

形成評價內(nèi)容1.科學(xué)性：項目計劃的目的是否明確；目標(biāo)是否合理；目標(biāo)和指標(biāo)體系是否一致；實(shí)施方案和干預(yù)框架是否明確；監(jiān)督和考核措施及其實(shí)施方案是否明確；……2.針對性：干預(yù)方案是否適合目標(biāo)人群；目標(biāo)體系和目標(biāo)對象人群特點(diǎn)是否一致；……3.可及性：干預(yù)方式與方法的可及程度和可接受程度；……16第十六頁，共六十九頁，編輯于2023年，星期五任務(wù)：使計劃更科學(xué)、更完善，符合目標(biāo)人群的實(shí)際情況。作用：最大限度地降低項目失敗的風(fēng)險，避免資源的浪費(fèi)。方式：主要的評價方式為查閱資料、專家評估或模擬試驗(yàn)。17第十七頁，共六十九頁，編輯于2023年，星期五評估計劃實(shí)際執(zhí)行情況與計劃要求之間的差異。始于健康教育項目實(shí)施啟動之時，貫穿于計劃執(zhí)行的全過程。作用：即時發(fā)現(xiàn)問題，為計劃的調(diào)整提供科學(xué)依據(jù)。二、過程評價（processevaluation）18第十八頁，共六十九頁，編輯于2023年，星期五過程評價內(nèi)容評估項目活動運(yùn)作情況

干預(yù)是否適合于教育對象、接受程度如何是否按計劃干預(yù)及干預(yù)質(zhì)量教育材料的發(fā)放情況目標(biāo)人群參與情況是否有信息反饋系統(tǒng)，各項記錄完整性和質(zhì)量如何資源利用情況19第十九頁，共六十九頁，編輯于2023年，星期五過程評價內(nèi)容項目計劃的修改

不成功的干預(yù)活動原因分析計劃的修改方案修改方案的可行性分析20第二十頁，共六十九頁，編輯于2023年，星期五

過程評價指標(biāo)1.項目活動進(jìn)度指標(biāo)：項目活動執(zhí)行率干預(yù)活動覆蓋率干預(yù)活動暴露率有效指數(shù)(effectivenessindex，EI)總有效指數(shù)(programeffectivenessindex，PEI)……21第二十一頁，共六十九頁，編輯于2023年，星期五

過程評價指標(biāo)2.目標(biāo)人群滿意指標(biāo)：對干預(yù)活動內(nèi)容滿意度對干預(yù)活動形式滿意度對干預(yù)活動組織滿意度對人際關(guān)系滿意度22第二十二頁，共六十九頁，編輯于2023年，星期五

過程評價指標(biāo)3.資源使用進(jìn)度指標(biāo)：活動費(fèi)用使用率年度費(fèi)用使用率費(fèi)用進(jìn)度比注意的問題：建立完善的質(zhì)量控制和監(jiān)測體系以及準(zhǔn)確的資料收集方法是過程評價的基礎(chǔ)。23第二十三頁，共六十九頁，編輯于2023年，星期五過程評價實(shí)施方法直接觀察各項干預(yù)活動社區(qū)和目標(biāo)人群調(diào)查舉行項目工作者會議：定期舉行計劃設(shè)計者、管理者和執(zhí)行者聯(lián)席會議，對項目進(jìn)展進(jìn)行階段性評估。檔案追蹤：可以了解項目開展情況和組織者及目標(biāo)人群參與情況。24第二十四頁，共六十九頁，編輯于2023年，星期五過程評價中的質(zhì)量控制過程評價要解決的主要問題是確認(rèn)項目活動的數(shù)量與質(zhì)量。只有高質(zhì)量的過程評價才能保證項目目標(biāo)的最終實(shí)現(xiàn)，并為解釋項目結(jié)果提供有價值的信息。25第二十五頁，共六十九頁，編輯于2023年，星期五過程評價中的質(zhì)量控制內(nèi)部質(zhì)控（internalqualitycontrol）：主要依賴于項目工作人員在執(zhí)行項目過程中能準(zhǔn)確記錄項目活動進(jìn)行情況。因此，指標(biāo)的可操作性及其標(biāo)準(zhǔn)至關(guān)重要。外部質(zhì)控（externalqualitycontrol）：一般由項目以外的、有項目評價經(jīng)驗(yàn)的專業(yè)人員以專家小組審查的方式進(jìn)行。26第二十六頁，共六十九頁，編輯于2023年，星期五效應(yīng)評價即近期和中期效果評價。評估健康教育計劃導(dǎo)致的人群健康相關(guān)行為及其影響因素（傾向因素、促成因素、強(qiáng)化因素）的變化。三、效應(yīng)評價（impactevaluation）27第二十七頁，共六十九頁，編輯于2023年，星期五

效應(yīng)評價內(nèi)容11.傾向因素目標(biāo)行為發(fā)生發(fā)展的內(nèi)在基礎(chǔ)，包括個人的知識、態(tài)度、信念，以及行為動機(jī)和意向。項目執(zhí)行前后人群的衛(wèi)生保健知識、健康價值觀、對健康相關(guān)行為的態(tài)度、對疾病易感性和嚴(yán)重性的信念、采納促進(jìn)健康行為的動機(jī)(motivation)、行為意向(behavioralintention)以及自我效能(selfefficacy)等發(fā)生了什么變化。28第二十八頁，共六十九頁，編輯于2023年，星期五

效應(yīng)評價內(nèi)容22.促成因素行為動機(jī)和意愿得以實(shí)現(xiàn)的因素，即實(shí)現(xiàn)或形成某行為所必須的技能、資源和社會條件。目標(biāo)人群實(shí)現(xiàn)促進(jìn)健康行為所需要的個人保健技能、環(huán)境條件、衛(wèi)生保健資源、服務(wù)、技術(shù)等方面的變化。29第二十九頁，共六十九頁，編輯于2023年，星期五3.強(qiáng)化因素那些在行為發(fā)生之后提供持續(xù)的匯報或?yàn)樾袨榈木S持和重復(fù)提供的激勵。與目標(biāo)人群關(guān)系密切的人、公眾等對目標(biāo)人群采納促進(jìn)健康行為的支持程度、個人感受等方面在項目前后的變化，如同伴的評價、家人的理解、公眾輿論等。效應(yīng)評價內(nèi)容330第三十頁，共六十九頁，編輯于2023年，星期五4.健康相關(guān)行為項目實(shí)施前后目標(biāo)人群健康相關(guān)行為發(fā)生了什么樣的改變，各種變化在人群中的分布如何。效應(yīng)評價內(nèi)容431第三十一頁，共六十九頁，編輯于2023年，星期五衛(wèi)生知識：均分；合格率；知曉率（正確率）信念：持有率行為：流行率；改變率環(huán)境、服務(wù)、條件、公眾輿論等方面的改變?nèi)绨踩嬘盟占奥市?yīng)評價常用指標(biāo)32第三十二頁，共六十九頁，編輯于2023年，星期五四、結(jié)局評價（outcomeevaluation）結(jié)局評價即遠(yuǎn)期效果評價，評價健康教育項目導(dǎo)致的人群健康狀態(tài)乃至生活質(zhì)量的變化。評價指標(biāo)：健康狀況和生活質(zhì)量的評價。33第三十三頁，共六十九頁，編輯于2023年，星期五四、結(jié)局評價（outcomeevaluation）注意：進(jìn)行健康教育計劃的結(jié)局評價時，往往難以簡單的把人群健康狀況、生命質(zhì)量的變化歸結(jié)于健康教育干預(yù)的結(jié)果，需精心設(shè)計，有效控制混雜因素才能下此結(jié)論。一般情況下，獲得健康結(jié)局指標(biāo)需在相當(dāng)長時間之后，而此期間社會政治、經(jīng)濟(jì)、文化狀況的變化也將對人群健康產(chǎn)生影響，需客觀評估健康教育做出的貢獻(xiàn)。34第三十四頁，共六十九頁，編輯于2023年，星期五五、總結(jié)評價（summativeevaluation）指形成評價、過程評價、效應(yīng)評價和結(jié)局評價的綜合以及對各方面資料做出總結(jié)性的概括。能全面反映健康教育項目的成功之處與不足，為今后的計劃制定和項目決策提供依據(jù)。35第三十五頁，共六十九頁，編輯于2023年，星期五健康教育計劃評價的種類與內(nèi)容總結(jié)計劃設(shè)計階段項目實(shí)施階段項目結(jié)束階段中間目標(biāo)行為改變健康狀態(tài)生活質(zhì)量評價內(nèi)容評價指標(biāo)評價種類計劃設(shè)計的合理性科學(xué)性適宜性可接受性形成評價計劃實(shí)施情況干預(yù)活動次數(shù)參與人數(shù)干預(yù)活動暴露率有效指數(shù)行為影響因素（傾向、促成、強(qiáng)化）知識知曉率態(tài)度轉(zhuǎn)變率……健康相關(guān)行為行為流行率行為轉(zhuǎn)變率行為意向……健康狀態(tài)生理指標(biāo)疾病指標(biāo)死亡指標(biāo)生活質(zhì)量物理環(huán)境健康狀態(tài)心理狀態(tài)過程評價效應(yīng)評價結(jié)局評價總結(jié)評價第三十六頁，共六十九頁，編輯于2023年，星期五評價設(shè)計方案第三節(jié)37第三十七頁，共六十九頁，編輯于2023年，星期五基本知識實(shí)驗(yàn)研究與準(zhǔn)實(shí)驗(yàn)研究的差異實(shí)驗(yàn)設(shè)計中設(shè)立對照組的意義不設(shè)對照組的前后測試實(shí)驗(yàn)設(shè)計的應(yīng)用條件（無法控制干預(yù)之外的干擾，用于周期較短或資金有限的項目）知情同意書38第三十八頁，共六十九頁，編輯于2023年，星期五R（random）：隨機(jī)化，指采用隨機(jī)抽樣的方法確定干預(yù)組與對照組E（experiment）：指接受健康教育干預(yù)的人群，稱為干預(yù)組或?qū)嶒?yàn)組C（control）：指在健康教育中不對其進(jìn)行干預(yù)，用作參照的人群，稱為對照組O（observation）：指收集資料的過程X：代表干預(yù)措施常用符號39第三十九頁，共六十九頁，編輯于2023年，星期五常用設(shè)計方法

不設(shè)對照組的前后測試

簡單時間系列設(shè)計

非等同比較組設(shè)計

復(fù)合時間系列設(shè)計

實(shí)驗(yàn)研究

40第四十頁，共六十九頁，編輯于2023年，星期五一、不設(shè)對照組的前后測試

onegroupbefore/afterdesignEOXO

通過比較目標(biāo)人群在實(shí)施前后有關(guān)指標(biāo)的情況反映項目效應(yīng)與結(jié)局優(yōu)缺點(diǎn)：設(shè)計和實(shí)施操作簡單；但干預(yù)之外因素的干擾控制較為困難應(yīng)用：周期比較短或資源有限的項目評價注意：干擾因素的控制41第四十一頁，共六十九頁，編輯于2023年，星期五二、簡單時間系列設(shè)計

simpletime－seriesdesignEOOO……XOOO

不設(shè)對照組，在對目標(biāo)人群進(jìn)行多次觀察后，實(shí)施干預(yù)，干預(yù)過程結(jié)束后再進(jìn)行多次觀察。分析方法：比較時間序列數(shù)據(jù)變化規(guī)律，如果干預(yù)后的變化是干預(yù)前的自然延續(xù)，則干預(yù)無效，否則干預(yù)有效。優(yōu)缺點(diǎn)：能較好的控制成熟效應(yīng)的影響。但由于觀察周期長，控制歷史效應(yīng)的能力較弱；觀察點(diǎn)多，耗費(fèi)人力、財力較大。42第四十二頁，共六十九頁，編輯于2023年，星期五三、非等同比較組設(shè)計

nonequivalentcomparisongroupdesignEOXO是類實(shí)驗(yàn)設(shè)計的一種，又稱為沒有隨機(jī)分配的平行對照設(shè)計。設(shè)立與接受干預(yù)的目標(biāo)人群（干預(yù)組）相匹配的對照組，通過對干預(yù)組、對照組在項目實(shí)施前后變化的比較，來評價健康教育項目的效應(yīng)和結(jié)局。優(yōu)點(diǎn)：通過與對照組的比較可以消除時間因素、測量因素和觀察因素等對評價結(jié)果正確性的影響。缺點(diǎn)：兩組之間齊同性差，不能消除選擇因素的影響注意：兩組的可比性、觀察時間和方法的一致性43第四十三頁，共六十九頁，編輯于2023年，星期五四、復(fù)合時間系列設(shè)計

multipletime－seriesdesignEOOOXOOOCOOOOOO

融合了簡單時間系列設(shè)計和非等同比較組設(shè)計，既設(shè)立了對照組，又進(jìn)行多點(diǎn)觀察。優(yōu)缺點(diǎn)：上述兩種方法的優(yōu)缺點(diǎn)44第四十四頁，共六十九頁，編輯于2023年，星期五五、實(shí)驗(yàn)研究

classicalexperimentaldesignREOXORCOO隨機(jī)化分組，充分保證齊同性，不存在選擇因素的影響，也克服了歷史因素、測量和觀察的影響。理論上是一種比較理想的方案，但實(shí)際健康教育項目中不易操作，主要是因?yàn)殡S即化難以實(shí)現(xiàn)。缺點(diǎn)：現(xiàn)場操作難度較大，主要是隨機(jī)化不易實(shí)現(xiàn)。45第四十五頁，共六十九頁，編輯于2023年，星期五第四節(jié)影響評價的主要因素46第四十六頁，共六十九頁，編輯于2023年，星期五時間因素測試或觀察的因素回歸因素選擇因素失訪47第四十七頁，共六十九頁，編輯于2023年，星期五歷史性因素歷史性因素，又稱時間因素。指在項目實(shí)施期間所發(fā)生的干預(yù)之外的事件，導(dǎo)致參與者發(fā)生某些可能對結(jié)果有影響的變化。如與健康相關(guān)的公共政策的出臺、重大生活條件的改變、自然災(zāi)害等。此外，隨著社會經(jīng)濟(jì)的發(fā)展，經(jīng)濟(jì)、文化等因素的變化，人群的行為、健康狀況也會發(fā)生相應(yīng)的改變。48第四十八頁，共六十九頁，編輯于2023年，星期五測試或觀察因素1測量者因素來自于實(shí)驗(yàn)者的因素包括主觀因素和客觀因素兩大類客觀因素：

主觀因素：

原因：調(diào)查人員的熟練程度；調(diào)查者的誘導(dǎo)、暗示控制方法：調(diào)查人員培訓(xùn)，統(tǒng)一調(diào)查內(nèi)容、方式原因：主觀故意，設(shè)計、實(shí)施和評價階段均可出現(xiàn)控制方法：建立完善的外部評價體系；加強(qiáng)科研道德、建立良好的學(xué)術(shù)風(fēng)氣；盲法49第四十九頁，共六十九頁，編輯于2023年，星期五2測量工具的因素實(shí)驗(yàn)工具的信度與效度物理測量工具的信度與效度問題調(diào)查表的信度與效度問題50第五十頁，共六十九頁，編輯于2023年，星期五3測量對象霍桑效應(yīng)：測量對象的成熟度人們被選擇作為干預(yù)或評價對象時，由于感受到正在被研究或評價而表現(xiàn)的行為異乎尋常。例如在營養(yǎng)調(diào)查中，被調(diào)查者由于意識到自己正在被研究，從而改變以往的飲食習(xí)慣，趨向于表現(xiàn)出社會期望的、計劃期望的、或自己認(rèn)為正確的行為。51第五十一頁，共六十九頁，編輯于2023年，星期五回歸因素指由于偶然因素，個別被測試對象的某特征水平過高或過低，在以后又回復(fù)到實(shí)際水平的現(xiàn)象。52第五十二頁，共六十九頁，編輯于2023年，星期五選擇因素如果對照組的主要指標(biāo)特征與干預(yù)組的特征不一致，則不能有效發(fā)揮對照組的作用，這種選擇對照組產(chǎn)生的偏差稱為選擇偏倚。53第五十三頁，共六十九頁，編輯于2023年，星期五失訪在健康教育計劃執(zhí)行或評價階段，目標(biāo)人群由于各種原因而不能被干預(yù)或評價。在科研中對失訪有確切的要求嗎？你認(rèn)為對失訪的科學(xué)態(tài)度是什么？

努力減少失訪，對應(yīng)答者和失訪者進(jìn)行結(jié)構(gòu)分析，鑒別是否非隨機(jī)失訪。沒有，但比例不能過高，低于10％隨機(jī)54第五十四頁，共六十九頁，編輯于2023年，星期五成本效益與成本效果分析第五節(jié)

55第五十五頁，共六十九頁，編輯于2023年，星期五成本效益與成本效果分析在制定方案、選擇方案和評價效果時，常常要考慮的一個問題是：如何最大限度地合理分配和使用資源，以最小的投入獲取最大的收益。評價一個項目的優(yōu)劣除考慮其先進(jìn)性、可行性和科學(xué)性外，還要考慮其適用性和經(jīng)濟(jì)效益。方法：成本效益分析（cost－benefitanalysis，CBA）和成本效果分析（cost－effectivenessanalysis，CEA）56第五十六頁，共六十九頁，編輯于2023年，星期五CBA和CEA最早產(chǎn)生于軍事領(lǐng)域，以后則應(yīng)用于包括衛(wèi)生保健在內(nèi)的諸多社會經(jīng)濟(jì)領(lǐng)域。成本效益（效果）分析在衛(wèi)生領(lǐng)域的應(yīng)用，對制定衛(wèi)生事業(yè)規(guī)劃、選擇優(yōu)先項目、促進(jìn)衛(wèi)生事業(yè)的合理投資起到了積極的作用。57第五十七頁，共六十九頁，編輯于2023年，星期五健康教育是隨著醫(yī)學(xué)模式轉(zhuǎn)變應(yīng)運(yùn)而生的一門年輕學(xué)科，是一切衛(wèi)生工作的基礎(chǔ)，其投資最小，收益最大。但其潛在的巨大效益在我國鮮為人知，且資源也相當(dāng)貧乏，據(jù)統(tǒng)計，我國每年、每人健康教育經(jīng)費(fèi)平均不足1角錢，只占全國衛(wèi)生事業(yè)投資的0.5%。58第五十八頁，共六十九頁，編輯于2023年，星期五因而，每一個健康教育者都應(yīng)懂得并善于應(yīng)用成本效益（效果）分析方法選擇最優(yōu)的教育規(guī)劃，加強(qiáng)規(guī)劃評價，提供最有說服力的成本效益（效果）分析結(jié)果來改變領(lǐng)導(dǎo)者（決策者）的觀念，爭取更多的資源，促進(jìn)我國健康教育事業(yè)的發(fā)展。59第五十九頁，共六十九頁，編輯于2023年，星期五成本效益（效果）分析的意義1.在項目計劃階段進(jìn)行方案可行性評價或選擇出單位成本效益（效果）最大的方案2.在項目實(shí)施和評價階段，評價項目單位成本的實(shí)際效益（效果）60第六十頁，共六十九頁，編輯于2023年，星期五（一）基本概念簡單地說，成本效益（效果）分析就是通過對各種規(guī)劃項目所費(fèi)資源與健康收益進(jìn)行比較，以選擇投入低而產(chǎn)出高的方案的一種比較分析方法。成本效益（效果）分析的兩個基本要素是成本和收益（效益或效果）。61第六十一頁，共六十九頁，編輯于2023年，星期五成本（cost）也稱作費(fèi)用，即開展一項規(guī)劃所投入的資源，包括從事項目活動所有資源的經(jīng)濟(jì)價值，含金錢與非金錢的投入（即人力、物力和財力的投入），從整個社會角度以貨幣值計量。在實(shí)際應(yīng)用中有多種分類方法62第六十二頁，共六十九頁，編輯于2023年，星期五成本的分類直接成本、間接成本、無形成本固定成本、可變成本投資成本、經(jīng)營成本可控成本、不可控成本63第六十三頁，共六十九頁，編輯于2023年，星期五健康教育項目中的直接成本直接成本（dir