第七章 健康教育評價2

1健康教育評價目的與要求：了解評價在健康教育項目中的意義；掌握健康教育評價的種類和內容；熟悉評價設計方案和評價結果的影響因素；熟悉成本效益和成本效果分析方法3健康教育工作的一般程序計劃實施項目計劃實施效果目的性？科學性？可行性？是否按計劃執(zhí)行？計劃是否符合客觀實際、是否需要修改、如何修改？目標人群是否滿意？……如何？4第一節(jié)評價概述概念評價

客觀實際預期目標Vs6

評價(evaluation)：將客觀實際與預期目標進行比較是系統(tǒng)收集、分析、表達資料的過程目的在于確定健康教育計劃和干預的價值，為健康教育計劃的進一步實施和以后的項目決策提供依據。不僅能使我們了解健康教育項目效果如何，還能全面檢測、控制，最大限度地保障計劃的先進性和實施的質量，從而也成為取得預期效果的關鍵措施。7一、評價的性質評價是管理的重要組成部分，貫穿于計劃和實施的全過程

始于計劃，對計劃的科學性、可行性、適宜性進行評價，并對計劃實施的進度和質量進行評估。對于干預措施執(zhí)行后是否達到了預期效果，達到目標程度的評定，是質量監(jiān)測與控制的重要內容。8一、評價的性質評價的基本原理是比較

只有通過比較，才能鑒別，找出差異，分析原因，總結規(guī)律，完善管理，提高效率。9確定價值標準是評價的前提

一、評價的性質評價是對某一特定目標與一個可接受標準做比較。要在一定的價值體系下做出判斷，它是一種主觀活動，這種價值可以是一種標準，或自身的基線水平，或他人的結果。10測量是評價的重要手段，準確的信息是評價成功的保障

一、評價的性質只有通過對評價指標的定性、定量測量，評價才能得出準確結論。因此，需要有完善的信息系統(tǒng)的支持，需要建立一套科學可行的指標體系及各項指標的測量標準與方法。11二、評價的目的和意義評價的目的1.明確健康教育計劃的先進性與合理性2.確定計劃的執(zhí)行情況3.確定健康教育活動是否達到預期目標4.總結健康教育項目的成功與不足之處，提出進一步的研究假設5.向公眾和項目資金提供者說明項目結果，擴大影響，獲取更多支持12評價的意義1、保證計劃設計和實施的質量。2、科學地說明計劃的價值。3、改善計劃的手段。4、向公眾和資金提供者說明項目實施所取得的結果。5、豐富和充實理論知識二、評價的目的和意義13第二節(jié)評價的種類與內容14形成評價過程評價近期效果評價中期效果評價遠期效果評價計劃實施效果效應評價健康教育過程健康教育評價結局評價效果評價15對項目計劃本身進行的評價，包括目標人群的選擇、策略確定、方法設計等，主要發(fā)生在計劃設計階段，部分職能將延續(xù)到實施階段。一、形成評價（formativeevaluation）16

形成評價內容1.科學性：項目計劃的目的是否明確；目標是否合理；目標和指標體系是否一致；實施方案和干預框架是否明確；監(jiān)督和考核措施及其實施方案是否明確；……2.針對性：干預方案是否適合目標人群；目標體系和目標對象人群特點是否一致；……3.可及性：干預方式與方法的可及程度和可接受程度；……17任務：使計劃更科學、更完善，符合目標人群的實際情況。作用：最大限度地降低項目失敗的風險，避免資源的浪費。方式：主要的評價方式為查閱資料、專家評估或模擬試驗。18評估計劃實際執(zhí)行情況與計劃要求之間的差異。始于健康教育項目實施啟動之時，貫穿于計劃執(zhí)行的全過程。作用：即時發(fā)現(xiàn)問題，為計劃的調整提供科學依據。二、過程評價（processevaluation）19過程評價內容評估項目活動運作情況

干預是否適合于教育對象、接受程度如何是否按計劃干預及干預質量教育材料的發(fā)放情況目標人群參與情況是否有信息反饋系統(tǒng)，各項記錄完整性和質量如何資源利用情況20過程評價內容項目計劃的修改

不成功的干預活動原因分析計劃的修改方案修改方案的可行性分析21

過程評價指標1.項目活動進度指標：項目活動執(zhí)行率干預活動覆蓋率干預活動暴露率有效指數(effectivenessindex，EI)總有效指數(programeffectivenessindex，PEI)……22

過程評價指標2.目標人群滿意指標：對干預活動內容滿意度對干預活動形式滿意度對干預活動組織滿意度對人際關系滿意度23

過程評價指標3.資源使用進度指標：活動費用使用率年度費用使用率費用進度比注意的問題：建立完善的質量控制和監(jiān)測體系以及準確的資料收集方法是過程評價的基礎。24過程評價實施方法直接觀察各項干預活動社區(qū)和目標人群調查舉行項目工作者會議：定期舉行計劃設計者、管理者和執(zhí)行者聯(lián)席會議，對項目進展進行階段性評估。檔案追蹤：可以了解項目開展情況和組織者及目標人群參與情況。25過程評價中的質量控制過程評價要解決的主要問題是確認項目活動的數量與質量。只有高質量的過程評價才能保證項目目標的最終實現(xiàn)，并為解釋項目結果提供有價值的信息。26過程評價中的質量控制內部質控（internalqualitycontrol）：主要依賴于項目工作人員在執(zhí)行項目過程中能準確記錄項目活動進行情況。因此，指標的可操作性及其標準至關重要。外部質控（externalqualitycontrol）：一般由項目以外的、有項目評價經驗的專業(yè)人員以專家小組審查的方式進行。27效應評價即近期和中期效果評價。評估健康教育計劃導致的人群健康相關行為及其影響因素（傾向因素、促成因素、強化因素）的變化。三、效應評價（impactevaluation）28

效應評價內容11.傾向因素目標行為發(fā)生發(fā)展的內在基礎，包括個人的知識、態(tài)度、信念，以及行為動機和意向。項目執(zhí)行前后人群的衛(wèi)生保健知識、健康價值觀、對健康相關行為的態(tài)度、對疾病易感性和嚴重性的信念、采納促進健康行為的動機(motivation)、行為意向(behavioralintention)以及自我效能(selfefficacy)等發(fā)生了什么變化。29

效應評價內容22.促成因素行為動機和意愿得以實現(xiàn)的因素，即實現(xiàn)或形成某行為所必須的技能、資源和社會條件。目標人群實現(xiàn)促進健康行為所需要的個人保健技能、環(huán)境條件、衛(wèi)生保健資源、服務、技術等方面的變化。303.強化因素那些在行為發(fā)生之后提供持續(xù)的匯報或為行為的維持和重復提供的激勵。與目標人群關系密切的人、公眾等對目標人群采納促進健康行為的支持程度、個人感受等方面在項目前后的變化，如同伴的評價、家人的理解、公眾輿論等。效應評價內容3314.健康相關行為項目實施前后目標人群健康相關行為發(fā)生了什么樣的改變，各種變化在人群中的分布如何。效應評價內容432衛(wèi)生知識：均分；合格率；知曉率（正確率）信念：持有率行為：流行率；改變率環(huán)境、服務、條件、公眾輿論等方面的改變如安全飲用水普及率效應評價常用指標33四、結局評價（outcomeevaluation）結局評價即遠期效果評價，評價健康教育項目導致的人群健康狀態(tài)乃至生活質量的變化。評價指標：健康狀況和生活質量的評價。34四、結局評價（outcomeevaluation）注意：進行健康教育計劃的結局評價時，往往難以簡單的把人群健康狀況、生命質量的變化歸結于健康教育干預的結果，需精心設計，有效控制混雜因素才能下此結論。一般情況下，獲得健康結局指標需在相當長時間之后，而此期間社會政治、經濟、文化狀況的變化也將對人群健康產生影響，需客觀評估健康教育做出的貢獻。35五、總結評價（summativeevaluation）指形成評價、過程評價、效應評價和結局評價的綜合以及對各方面資料做出總結性的概括。能全面反映健康教育項目的成功之處與不足，為今后的計劃制定和項目決策提供依據。健康教育計劃評價的種類與內容總結計劃設計階段項目實施階段項目結束階段中間目標行為改變健康狀態(tài)生活質量評價內容評價指標評價種類計劃設計的合理性科學性適宜性可接受性形成評價計劃實施情況干預活動次數參與人數干預活動暴露率有效指數行為影響因素（傾向、促成、強化）知識知曉率態(tài)度轉變率……健康相關行為行為流行率行為轉變率行為意向……健康狀態(tài)生理指標疾病指標死亡指標生活質量物理環(huán)境健康狀態(tài)心理狀態(tài)過程評價效應評價結局評價總結評價37評價設計方案第三節(jié)38基本知識實驗研究與準實驗研究的差異實驗設計中設立對照組的意義不設對照組的前后測試實驗設計的應用條件（無法控制干預之外的干擾，用于周期較短或資金有限的項目）知情同意書39R（random）：隨機化，指采用隨機抽樣的方法確定干預組與對照組E（experiment）：指接受健康教育干預的人群，稱為干預組或實驗組C（control）：指在健康教育中不對其進行干預，用作參照的人群，稱為對照組O（observation）：指收集資料的過程X：代表干預措施常用符號40常用設計方法

不設對照組的前后測試

簡單時間系列設計

非等同比較組設計

復合時間系列設計

實驗研究

41一、不設對照組的前后測試

onegroupbefore/afterdesignEOXO

通過比較目標人群在實施前后有關指標的情況反映項目效應與結局優(yōu)缺點：設計和實施操作簡單；但干預之外因素的干擾控制較為困難應用：周期比較短或資源有限的項目評價注意：干擾因素的控制42二、簡單時間系列設計

simpletime－seriesdesignEOOO……XOOO

不設對照組，在對目標人群進行多次觀察后，實施干預，干預過程結束后再進行多次觀察。分析方法：比較時間序列數據變化規(guī)律，如果干預后的變化是干預前的自然延續(xù)，則干預無效，否則干預有效。優(yōu)缺點：能較好的控制成熟效應的影響。但由于觀察周期長，控制歷史效應的能力較弱；觀察點多，耗費人力、財力較大。43三、非等同比較組設計

nonequivalentcomparisongroupdesignEOXO是類實驗設計的一種，又稱為沒有隨機分配的平行對照設計。設立與接受干預的目標人群（干預組）相匹配的對照組，通過對干預組、對照組在項目實施前后變化的比較，來評價健康教育項目的效應和結局。優(yōu)點：通過與對照組的比較可以消除時間因素、測量因素和觀察因素等對評價結果正確性的影響。缺點：兩組之間齊同性差，不能消除選擇因素的影響注意：兩組的可比性、觀察時間和方法的一致性44四、復合時間系列設計

multipletime－seriesdesignEOOOXOOOCOOOOOO

融合了簡單時間系列設計和非等同比較組設計，既設立了對照組，又進行多點觀察。優(yōu)缺點：上述兩種方法的優(yōu)缺點45五、實驗研究

classicalexperimentaldesignREOXORCOO隨機化分組，充分保證齊同性，不存在選擇因素的影響，也克服了歷史因素、測量和觀察的影響。理論上是一種比較理想的方案，但實際健康教育項目中不易操作，主要是因為隨即化難以實現(xiàn)。缺點：現(xiàn)場操作難度較大，主要是隨機化不易實現(xiàn)。46第四節(jié)影響評價的主要因素47時間因素測試或觀察的因素回歸因素選擇因素失訪48歷史性因素歷史性因素，又稱時間因素。指在項目實施期間所發(fā)生的干預之外的事件，導致參與者發(fā)生某些可能對結果有影響的變化。如與健康相關的公共政策的出臺、重大生活條件的改變、自然災害等。此外，隨著社會經濟的發(fā)展，經濟、文化等因素的變化，人群的行為、健康狀況也會發(fā)生相應的改變。49測試或觀察因素1測量者因素來自于實驗者的因素包括主觀因素和客觀因素兩大類客觀因素：

主觀因素：

原因：調查人員的熟練程度；調查者的誘導、暗示控制方法：調查人員培訓，統(tǒng)一調查內容、方式原因：主觀故意，設計、實施和評價階段