健康教育評價

健康教育評價1第1頁，課件共69頁，創(chuàng)作于2023年2月目的與要求：了解評價在健康教育項目中的意義；掌握健康教育評價的種類和內(nèi)容；熟悉評價設(shè)計方案和評價結(jié)果的影響因素；熟悉成本效益和成本效果分析方法第2頁，課件共69頁，創(chuàng)作于2023年2月健康教育工作的一般程序計劃實施項目計劃實施效果目的性？科學性？可行性？是否按計劃執(zhí)行？計劃是否符合客觀實際、是否需要修改、如何修改？目標人群是否滿意？……如何？3第3頁，課件共69頁，創(chuàng)作于2023年2月第一節(jié)評價概述4第4頁，課件共69頁，創(chuàng)作于2023年2月概念評價

客觀實際預(yù)期目標Vs第5頁，課件共69頁，創(chuàng)作于2023年2月

評價(evaluation)：將客觀實際與預(yù)期目標進行比較是系統(tǒng)收集、分析、表達資料的過程目的在于確定健康教育計劃和干預(yù)的價值，為健康教育計劃的進一步實施和以后的項目決策提供依據(jù)。不僅能使我們了解健康教育項目效果如何，還能全面檢測、控制，最大限度地保障計劃的先進性和實施的質(zhì)量，從而也成為取得預(yù)期效果的關(guān)鍵措施。6第6頁，課件共69頁，創(chuàng)作于2023年2月一、評價的性質(zhì)評價是管理的重要組成部分，貫穿于計劃和實施的全過程

始于計劃，對計劃的科學性、可行性、適宜性進行評價，并對計劃實施的進度和質(zhì)量進行評估。對于干預(yù)措施執(zhí)行后是否達到了預(yù)期效果，達到目標程度的評定，是質(zhì)量監(jiān)測與控制的重要內(nèi)容。7第7頁，課件共69頁，創(chuàng)作于2023年2月一、評價的性質(zhì)評價的基本原理是比較

只有通過比較，才能鑒別，找出差異，分析原因，總結(jié)規(guī)律，完善管理，提高效率。8第8頁，課件共69頁，創(chuàng)作于2023年2月確定價值標準是評價的前提

一、評價的性質(zhì)評價是對某一特定目標與一個可接受標準做比較。要在一定的價值體系下做出判斷，它是一種主觀活動，這種價值可以是一種標準，或自身的基線水平，或他人的結(jié)果。9第9頁，課件共69頁，創(chuàng)作于2023年2月測量是評價的重要手段，準確的信息是評價成功的保障

一、評價的性質(zhì)只有通過對評價指標的定性、定量測量，評價才能得出準確結(jié)論。因此，需要有完善的信息系統(tǒng)的支持，需要建立一套科學可行的指標體系及各項指標的測量標準與方法。10第10頁，課件共69頁，創(chuàng)作于2023年2月二、評價的目的和意義評價的目的1.明確健康教育計劃的先進性與合理性2.確定計劃的執(zhí)行情況3.確定健康教育活動是否達到預(yù)期目標4.總結(jié)健康教育項目的成功與不足之處，提出進一步的研究假設(shè)5.向公眾和項目資金提供者說明項目結(jié)果，擴大影響，獲取更多支持11第11頁，課件共69頁，創(chuàng)作于2023年2月評價的意義1、保證計劃設(shè)計和實施的質(zhì)量。2、科學地說明計劃的價值。3、改善計劃的手段。4、向公眾和資金提供者說明項目實施所取得的結(jié)果。5、豐富和充實理論知識二、評價的目的和意義12第12頁，課件共69頁，創(chuàng)作于2023年2月第二節(jié)評價的種類與內(nèi)容13第13頁，課件共69頁，創(chuàng)作于2023年2月形成評價過程評價近期效果評價中期效果評價遠期效果評價計劃實施效果效應(yīng)評價健康教育過程健康教育評價結(jié)局評價效果評價14第14頁，課件共69頁，創(chuàng)作于2023年2月對項目計劃本身進行的評價，包括目標人群的選擇、策略確定、方法設(shè)計等，主要發(fā)生在計劃設(shè)計階段，部分職能將延續(xù)到實施階段。一、形成評價（formativeevaluation）15第15頁，課件共69頁，創(chuàng)作于2023年2月

形成評價內(nèi)容1.科學性：項目計劃的目的是否明確；目標是否合理；目標和指標體系是否一致；實施方案和干預(yù)框架是否明確；監(jiān)督和考核措施及其實施方案是否明確；……2.針對性：干預(yù)方案是否適合目標人群；目標體系和目標對象人群特點是否一致；……3.可及性：干預(yù)方式與方法的可及程度和可接受程度；……16第16頁，課件共69頁，創(chuàng)作于2023年2月任務(wù)：使計劃更科學、更完善，符合目標人群的實際情況。作用：最大限度地降低項目失敗的風險，避免資源的浪費。方式：主要的評價方式為查閱資料、專家評估或模擬試驗。17第17頁，課件共69頁，創(chuàng)作于2023年2月評估計劃實際執(zhí)行情況與計劃要求之間的差異。始于健康教育項目實施啟動之時，貫穿于計劃執(zhí)行的全過程。作用：即時發(fā)現(xiàn)問題，為計劃的調(diào)整提供科學依據(jù)。二、過程評價（processevaluation）18第18頁，課件共69頁，創(chuàng)作于2023年2月過程評價內(nèi)容評估項目活動運作情況

干預(yù)是否適合于教育對象、接受程度如何是否按計劃干預(yù)及干預(yù)質(zhì)量教育材料的發(fā)放情況目標人群參與情況是否有信息反饋系統(tǒng)，各項記錄完整性和質(zhì)量如何資源利用情況19第19頁，課件共69頁，創(chuàng)作于2023年2月過程評價內(nèi)容項目計劃的修改

不成功的干預(yù)活動原因分析計劃的修改方案修改方案的可行性分析20第20頁，課件共69頁，創(chuàng)作于2023年2月

過程評價指標1.項目活動進度指標：項目活動執(zhí)行率干預(yù)活動覆蓋率干預(yù)活動暴露率有效指數(shù)(effectivenessindex，EI)總有效指數(shù)(programeffectivenessindex，PEI)……21第21頁，課件共69頁，創(chuàng)作于2023年2月

過程評價指標2.目標人群滿意指標：對干預(yù)活動內(nèi)容滿意度對干預(yù)活動形式滿意度對干預(yù)活動組織滿意度對人際關(guān)系滿意度22第22頁，課件共69頁，創(chuàng)作于2023年2月

過程評價指標3.資源使用進度指標：活動費用使用率年度費用使用率費用進度比注意的問題：建立完善的質(zhì)量控制和監(jiān)測體系以及準確的資料收集方法是過程評價的基礎(chǔ)。23第23頁，課件共69頁，創(chuàng)作于2023年2月過程評價實施方法直接觀察各項干預(yù)活動社區(qū)和目標人群調(diào)查舉行項目工作者會議：定期舉行計劃設(shè)計者、管理者和執(zhí)行者聯(lián)席會議，對項目進展進行階段性評估。檔案追蹤：可以了解項目開展情況和組織者及目標人群參與情況。24第24頁，課件共69頁，創(chuàng)作于2023年2月過程評價中的質(zhì)量控制過程評價要解決的主要問題是確認項目活動的數(shù)量與質(zhì)量。只有高質(zhì)量的過程評價才能保證項目目標的最終實現(xiàn)，并為解釋項目結(jié)果提供有價值的信息。25第25頁，課件共69頁，創(chuàng)作于2023年2月過程評價中的質(zhì)量控制內(nèi)部質(zhì)控（internalqualitycontrol）：主要依賴于項目工作人員在執(zhí)行項目過程中能準確記錄項目活動進行情況。因此，指標的可操作性及其標準至關(guān)重要。外部質(zhì)控（externalqualitycontrol）：一般由項目以外的、有項目評價經(jīng)驗的專業(yè)人員以專家小組審查的方式進行。26第26頁，課件共69頁，創(chuàng)作于2023年2月效應(yīng)評價即近期和中期效果評價。評估健康教育計劃導(dǎo)致的人群健康相關(guān)行為及其影響因素（傾向因素、促成因素、強化因素）的變化。三、效應(yīng)評價（impactevaluation）27第27頁，課件共69頁，創(chuàng)作于2023年2月

效應(yīng)評價內(nèi)容11.傾向因素目標行為發(fā)生發(fā)展的內(nèi)在基礎(chǔ)，包括個人的知識、態(tài)度、信念，以及行為動機和意向。項目執(zhí)行前后人群的衛(wèi)生保健知識、健康價值觀、對健康相關(guān)行為的態(tài)度、對疾病易感性和嚴重性的信念、采納促進健康行為的動機(motivation)、行為意向(behavioralintention)以及自我效能(selfefficacy)等發(fā)生了什么變化。28第28頁，課件共69頁，創(chuàng)作于2023年2月

效應(yīng)評價內(nèi)容22.促成因素行為動機和意愿得以實現(xiàn)的因素，即實現(xiàn)或形成某行為所必須的技能、資源和社會條件。目標人群實現(xiàn)促進健康行為所需要的個人保健技能、環(huán)境條件、衛(wèi)生保健資源、服務(wù)、技術(shù)等方面的變化。29第29頁，課件共69頁，創(chuàng)作于2023年2月3.強化因素那些在行為發(fā)生之后提供持續(xù)的匯報或為行為的維持和重復(fù)提供的激勵。與目標人群關(guān)系密切的人、公眾等對目標人群采納促進健康行為的支持程度、個人感受等方面在項目前后的變化，如同伴的評價、家人的理解、公眾輿論等。效應(yīng)評價內(nèi)容330第30頁，課件共69頁，創(chuàng)作于2023年2月4.健康相關(guān)行為項目實施前后目標人群健康相關(guān)行為發(fā)生了什么樣的改變，各種變化在人群中的分布如何。效應(yīng)評價內(nèi)容431第31頁，課件共69頁，創(chuàng)作于2023年2月衛(wèi)生知識：均分；合格率；知曉率（正確率）信念：持有率行為：流行率；改變率環(huán)境、服務(wù)、條件、公眾輿論等方面的改變?nèi)绨踩嬘盟占奥市?yīng)評價常用指標32第32頁，課件共69頁，創(chuàng)作于2023年2月四、結(jié)局評價（outcomeevaluation）結(jié)局評價即遠期效果評價，評價健康教育項目導(dǎo)致的人群健康狀態(tài)乃至生活質(zhì)量的變化。評價指標：健康狀況和生活質(zhì)量的評價。33第33頁，課件共69頁，創(chuàng)作于2023年2月四、結(jié)局評價（outcomeevaluation）注意：進行健康教育計劃的結(jié)局評價時，往往難以簡單的把人群健康狀況、生命質(zhì)量的變化歸結(jié)于健康教育干預(yù)的結(jié)果，需精心設(shè)計，有效控制混雜因素才能下此結(jié)論。一般情況下，獲得健康結(jié)局指標需在相當長時間之后，而此期間社會政治、經(jīng)濟、文化狀況的變化也將對人群健康產(chǎn)生影響，需客觀評估健康教育做出的貢獻。34第34頁，課件共69頁，創(chuàng)作于2023年2月五、總結(jié)評價（summativeevaluation）指形成評價、過程評價、效應(yīng)評價和結(jié)局評價的綜合以及對各方面資料做出總結(jié)性的概括。能全面反映健康教育項目的成功之處與不足，為今后的計劃制定和項目決策提供依據(jù)。35第35頁，課件共69頁，創(chuàng)作于2023年2月健康教育計劃評價的種類與內(nèi)容總結(jié)計劃設(shè)計階段項目實施階段項目結(jié)束階段中間目標行為改變健康狀態(tài)生活質(zhì)量評價內(nèi)容評價指標評價種類計劃設(shè)計的合理性科學性適宜性可接受性形成評價計劃實施情況干預(yù)活動次數(shù)參與人數(shù)干預(yù)活動暴露率有效指數(shù)行為影響因素（傾向、促成、強化）知識知曉率態(tài)度轉(zhuǎn)變率……健康相關(guān)行為行為流行率行為轉(zhuǎn)變率行為意向……健康狀態(tài)生理指標疾病指標死亡指標生活質(zhì)量物理環(huán)境健康狀態(tài)心理狀態(tài)過程評價效應(yīng)評價結(jié)局評價總結(jié)評價第36頁，課件共69頁，創(chuàng)作于2023年2月評價設(shè)計方案第三節(jié)37第37頁，課件共69頁，創(chuàng)作于2023年2月基本知識實驗研究與準實驗研究的差異實驗設(shè)計中設(shè)立對照組的意義不設(shè)對照組的前后測試實驗設(shè)計的應(yīng)用條件（無法控制干預(yù)之外的干擾，用于周期較短或資金有限的項目）知情同意書38第38頁，課件共69頁，創(chuàng)作于2023年2月R（random）：隨機化，指采用隨機抽樣的方法確定干預(yù)組與對照組E（experiment）：指接受健康教育干預(yù)的人群，稱為干預(yù)組或?qū)嶒灲MC（control）：指在健康教育中不對其進行干預(yù)，用作參照的人群，稱為對照組O（observation）：指收集資料的過程X：代表干預(yù)措施常用符號39第39頁，課件共69頁，創(chuàng)作于2023年2月常用設(shè)計方法

不設(shè)對照組的前后測試

簡單時間系列設(shè)計

非等同比較組設(shè)計

復(fù)合時間系列設(shè)計

實驗研究

40第40頁，課件共69頁，創(chuàng)作于2023年2月一、不設(shè)對照組的前后測試

onegroupbefore/afterdesignEOXO

通過比較目標人群在實施前后有關(guān)指標的情況反映項目效應(yīng)與結(jié)局優(yōu)缺點：設(shè)計和實施操作簡單；但干預(yù)之外因素的干擾控制較為困難應(yīng)用：周期比較短或資源有限的項目評價注意：干擾因素的控制41第41頁，課件共69頁，創(chuàng)作于2023年2月二、簡單時間系列設(shè)計

simpletime－seriesdesignEOOO……XOOO

不設(shè)對照組，在對目標人群進行多次觀察后，實施干預(yù)，干預(yù)過程結(jié)束后再進行多次觀察。分析方法：比較時間序列數(shù)據(jù)變化規(guī)律，如果干預(yù)后的變化是干預(yù)前的自然延續(xù)，則干預(yù)無效，否則干預(yù)有效。優(yōu)缺點：能較好的控制成熟效應(yīng)的影響。但由于觀察周期長，控制歷史效應(yīng)的能力較弱；觀察點多，耗費人力、財力較大。42第42頁，課件共69頁，創(chuàng)作于2023年2月三、非等同比較組設(shè)計

nonequivalentcomparisongroupdesignEOXO是類實驗設(shè)計的一種，又稱為沒有隨機分配的平行對照設(shè)計。設(shè)立與接受干預(yù)的目標人群（干預(yù)組）相匹配的對照組，通過對干預(yù)組、對照組在項目實施前后變化的比較，來評價健康教育項目的效應(yīng)和結(jié)局。優(yōu)點：通過與對照組的比較可以消除時間因素、測量因素和觀察因素等對評價結(jié)果正確性的影響。缺點：兩組之間齊同性差，不能消除選擇因素的影響注意：兩組的可比性、觀察時間和方法的一致性43第43頁，課件共69頁，創(chuàng)作于2023年2月四、復(fù)合時間系列設(shè)計

multipletime－seriesdesignEOOOXOOOCOOOOOO

融合了簡單時間系列設(shè)計和非等同比較組設(shè)計，既設(shè)立了對照組，又進行多點觀察。優(yōu)缺點：上述兩種方法的優(yōu)缺點44第44頁，課件共69頁，創(chuàng)作于2023年2月五、實驗研究

classicalexperimentaldesignREOXORCOO隨機化分組，充分保證齊同性，不存在選擇因素的影響，也克服了歷史因素、測量和觀察的影響。理論上是一種比較理想的方案，但實際健康教育項目中不易操作，主要是因為隨即化難以實現(xiàn)。缺點：現(xiàn)場操作難度較大，主要是隨機化不易實現(xiàn)。45第45頁，課件共69頁，創(chuàng)作于2023年2月第四節(jié)影響評價的主要因素46第46頁，課件共69頁，創(chuàng)作于2023年2月時間因素測試或觀察的因素回歸因素選擇因素失訪47第47頁，課件共69頁，創(chuàng)作于2023年2月歷史性因素歷史性因素，又稱時間因素。指在項目實施期間所發(fā)生的干預(yù)之外的事件，導(dǎo)致參與者發(fā)生某些可能對結(jié)果有影響的變化。如與健康相關(guān)的公共政策的出臺、重大生活條件的改變、自然災(zāi)害等。此外，隨著社會經(jīng)濟的發(fā)展，經(jīng)濟、文化等因素的變化，人群的行為、健康狀況也會發(fā)生相應(yīng)的改變。48第48頁，課件共69頁，創(chuàng)作于2023年2月測試或觀察因素1測量者因素來自于實驗者的因素包括主觀因素和客觀因素兩大類客觀因素：

主觀因素：

原因：調(diào)查人員的熟練程度；調(diào)查者的誘導(dǎo)、暗示控制方法：調(diào)查人員培訓(xùn)，統(tǒng)一調(diào)查內(nèi)容、方式原因：主觀故意，設(shè)計、實施和評價階段均可出現(xiàn)控制方法：建立完善的外部評價體系；加強科研道德、建立良好的學術(shù)風氣；盲法49第49頁，課件共69頁，創(chuàng)作于2023年2月2測量工具的因素實驗工具的信度與效度物理測量工具的信度與效度問題調(diào)查表的信度與效度問題50第50頁，課件共69頁，創(chuàng)作于2023年2月3測量對象霍桑效應(yīng)：測量對象的成熟度人們被選擇作為干預(yù)或評價對象時，由于感受到正在被研究或評價而表現(xiàn)的行為異乎尋常。例如在營養(yǎng)調(diào)查中，被調(diào)查者由于意識到自己正在被研究，從而改變以往的飲食習慣，趨向于表現(xiàn)出社會期望的、計劃期望的、或自己認為正確的行為。51第51頁，課件共69頁，創(chuàng)作于2023年2月回歸因素指由于偶然因素，個別被測試對象的某特征水平過高或過低，在以后又回復(fù)到實際水平的現(xiàn)象。52第52頁，課件共69頁，創(chuàng)作于2023年2月選擇因素如果對照組的主要指標特征與干預(yù)組的特征不一致，則不能有效發(fā)揮對照組的作用，這種選擇對照組產(chǎn)生的偏差稱為選擇偏倚。53第53頁，課件共69頁，創(chuàng)作于2023年2月失訪在健康教育計劃執(zhí)行或評價階段，目標人群由于各種原因而不能被干預(yù)或評價。在科研中對失訪有確切的要求嗎？你認為對失訪的科學態(tài)度是什么？

努力減少失訪，對應(yīng)答者和失訪者進行結(jié)構(gòu)分析，鑒別是否非隨機失訪。沒有，但比例不能過高，低于10％隨機54第54頁，課件共69頁，創(chuàng)作于2023年2月成本效益與成本效果分析第五節(jié)

55第55頁，課件共69頁，創(chuàng)作于2023年2月成本效益與成本效果分析在制定方案、選擇方案和評價效果時，常常要考慮的一個問題是：如何最大限度地合理分配和使用資源，以最小的投入獲取最大的收益。評價一個項目的優(yōu)劣除考慮其先進性、可行性和科學性外，還要考慮其適用性和經(jīng)濟效益。方法：成本效益分析（cost－benefitanalysis，CBA）和成本效果分析（cost－effectivenessanalysis，CEA）56第56頁，課件共69頁，創(chuàng)作于2023年2月CBA和CEA最早產(chǎn)生于軍事領(lǐng)域，以后則應(yīng)用于包括衛(wèi)生保健在內(nèi)的諸多社會經(jīng)濟領(lǐng)域。成本效益（效果）分析在衛(wèi)生領(lǐng)域的應(yīng)用，對制定衛(wèi)生事業(yè)規(guī)劃、選擇優(yōu)先項目、促進衛(wèi)生事業(yè)的合理投資起到了積極的作用。57第57頁，課件共69頁，創(chuàng)作于2023年2月健康教育是隨著醫(yī)學模式轉(zhuǎn)變應(yīng)運而生的一門年輕學科，是一切衛(wèi)生工作的基礎(chǔ)，其投資最小，收益最大。但其潛在的巨大效益在我國鮮為人知，且資源也相當貧乏，據(jù)統(tǒng)計，我國每年、每人健康教育經(jīng)費平均不足1角錢，只占全國衛(wèi)生事業(yè)投資的0.5%。58第58頁，課件共69頁，創(chuàng)作于2023年2月因而，每一個健康教育者都應(yīng)懂得并善于應(yīng)用成本效益（效果）分析方法選擇最優(yōu)的教育規(guī)劃，加強規(guī)劃評價，提供最有說服力的成本效益（效果）分析結(jié)果來改變領(lǐng)導(dǎo)者（決策者）的觀念，爭取更多的資源，促進我國健康教育事業(yè)的發(fā)展。59第59頁，課件共69頁，創(chuàng)作于2023年2月成本效益（效果）分析的意義1.在項目計劃階段進行方案可行性評價或選擇出單位成本效益（效果）最大的方案2.在項目實施和評價階段，評價項目單位成本的實際效益（效果）60第60頁，課件共69頁，創(chuàng)作于2023年2月（一）基本概念簡單地說，成本效益（效果）分析就是通過對各種規(guī)劃項目所費資源與健康收益進行比較，以選擇投入低而產(chǎn)出高的方案的一種比較分析方法。成本效益（效果）分析的兩個基本要素是成本和收益（效益或效果）。61第61頁，課件共69頁，創(chuàng)作于2023年2月成本（cost）也稱作費用，即開展一項規(guī)劃所投入的資源，包括從事項目活動所有資源的經(jīng)濟價值，含金錢與非金錢的投入（即人力、物力和財力的投入），從整個社會角度以貨幣值計量。在實際應(yīng)用中有多種分類方法62第62頁，課件共69頁，創(chuàng)作于2023年2月成本的分類直接成本、間接成本、無形成本固定成本、可變成本投資成本、經(jīng)營成本可控成本、不可控成本63第63頁，課件共69頁，創(chuàng)作于2023年2月健康教育項目中的直接成本直接成本（di