健康教育與健康促進計劃評價

健康教育與健康促進計劃評價第1頁，共37頁，2023年，2月20日，星期日評價概述（1）一、評價的概念評價是客觀實際與預期目標進行的比較。

評價貫穿于整個健康教育與健康促進項目管理過程的始終。第2頁，共37頁，2023年，2月20日，星期日評價概述（2）二、評價的作用1、了解健康教育與健康促進項目的效果如何。2、對項目全面檢測、控制。3、最大限度地保障計劃的先進性和實施質(zhì)量。第3頁，共37頁，2023年，2月20日，星期日評價概述（3）三、評價的目的1、確定健康教育與健康促進計劃的合理性和先進性。2、確定計劃的執(zhí)行情況，包括干預活動的數(shù)量與質(zhì)量，以確定干預活動是否適合目標人群，各項活動是否按計劃執(zhí)行，以及資源利用情況。3、確定健康教育/健康促進計劃是否達到預期目標，其可持續(xù)性如何。4、項目的產(chǎn)出是否有混雜因素的影響，影響程度如何。5、向公眾和投資者說明項目結(jié)果，擴大項目影響，改善公共關(guān)系，以取得目標人群、社區(qū)、投資者的更廣泛支持與合作。6、總結(jié)健康教育/健康促進項目的成功經(jīng)驗與不足之處，提出進一步的項目方向。第4頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（1）一、形成評價（1）1、形成評價的概念：形成評價是一個為健康教育計劃設(shè)計和發(fā)展提供信息的過程，包括為指定干預計劃所做的需求評估及為計劃設(shè)計和執(zhí)行提供所需的基礎(chǔ)材料。其目的在于使健康教育計劃符合目標人群的實際情況，使計劃更科學、更完善。2、形成評價的具體內(nèi)容：1）了解目標人群的各種基本特征。2）了解目標人群對干預的看法。3）了解教育材料發(fā)放系統(tǒng)，包括生產(chǎn)、貯存、批發(fā)、零售以及發(fā)放渠道。4）對問卷進行預調(diào)查及修改。5）了解哪些健康教育干預策略適用于目標人群，健康教育材料預實驗，確定其適宜性。6）針對計劃執(zhí)行的早期階段可能出現(xiàn)的問題，根據(jù)新的情況對計劃做適度調(diào)整。第5頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（2）一、形成評價（2）3、形成評價的方法與指標1）方法文獻、檔案、資料的回顧；專家咨詢；專題小組討論；目標人群調(diào)查；現(xiàn)場觀察；試點研究等。2）指標計劃的科學性；政策的支持性；技術(shù)上的適宜性；目標人群對策略和活動的接受程度等。第6頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（3）二、過程評價（1）1、過程評價的作用（1）可以概括為兩大方面：評估項目運作和修正項目計劃。1）評估項目運作情況教育干預是否適合于教育對象，并為他們所接受？教育干預是否按既定的活動類型、時間、頻率加以實施，干預的質(zhì)量如何？教育材料是否全部發(fā)放給目標人群？教育的覆蓋面如何？目標人群參與是否積極？不愿參與的原因何在？教育服務(wù)利用情況（如展覽、咨詢等服務(wù)項目），利用率低的原因何在？是否建立完整的信息反饋體系？各項記錄的完整性、質(zhì)量如何？在項目實施期間有無重大的環(huán)境變化（如各種重大事件），對項目執(zhí)行的影響如何？工作人員的職業(yè)技能、工作態(tài)度、責任心及與教育對象、工作人員之間的配合工作情況。2）修正項目計劃第7頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（4）二、過程評價（2）2、過程評價的實施方法1）直接觀察各項干預活動。2）社區(qū)及目標人群調(diào)查?？筛鶕?jù)隨機原則，在少量目標人群中進行抽樣調(diào)查、中心地區(qū)調(diào)查、網(wǎng)絡(luò)調(diào)查、專題小組討論等。3）舉行項目工作者會議。定期舉行計劃設(shè)計者、管理者及執(zhí)行者的聯(lián)席會議，討論來自各方面的反饋信息，對項目進行階段性評估。4）追蹤了解情況。以記錄檔案的形式對各項活動開展的日期、內(nèi)容、目的、地點、持續(xù)時間、活動組織者、目標人群及參與情況進行追蹤了解。為了有效的評價項目的運作，及時收集各方面的反饋信息，必須建立過程追蹤系統(tǒng)。其人員組成為：健康教育計劃的設(shè)計者；健康教育專業(yè)人員；項目合作者；目標人群代表；社區(qū)衛(wèi)生機構(gòu)、新聞機構(gòu)代表等。第8頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（5）二、過程評價（3）3、過程評價指標經(jīng)費執(zhí)行率項目執(zhí)行率干預活動類型、干預次數(shù)、持續(xù)時間媒介擁有率干預活動覆蓋率干預活動暴露率有效指數(shù)第9頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（6）二、過程評價（4）4、過程評估中的質(zhì)量控制1）內(nèi)部質(zhì)量控制：主要是項目內(nèi)部工作人員在對項目進行過程評估時，嚴格掌握評價標準，把好評價質(zhì)量關(guān)。2）外部質(zhì)量控制：一般由項目以外的、有項目評價經(jīng)驗的人對過程進行的質(zhì)量控制，常用的方法是專家小組審查。第10頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（7）三、效應(yīng)評價（1）效應(yīng)評價是要評估健康教育計劃導致的目標人群健康相關(guān)行為及其影響因素（傾向因素、促成因素、強化因素）的變化。效應(yīng)評價也成為近期和中期效果評價。1、效應(yīng)評價的內(nèi)容1）傾向因素：如目標人群的衛(wèi)生保健知識，健康價值觀，對某一健康相關(guān)行為或疾病的態(tài)度，對自身易感性、疾病潛在威脅的信念等。2）促成因素：衛(wèi)生服務(wù)或?qū)嵭薪】敌袨榈馁Y源的可及性。從健康促進角度，有關(guān)政策、法規(guī)制定情況，行政對健康教育的干預程度、效果也可以說是更強有力的一種促成因素。3）強化因素：與目標人群關(guān)系密切的人對健康相關(guān)行為或疾病的看法，目標人群采納某健康相關(guān)行為時獲得的社會支持，及其采納該行為后自身的感受。4）健康相關(guān)行為：干預前后目標人群的健康相關(guān)行為是否發(fā)生變化，改變量是多少，各種變化在人群中的分布如何。第11頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（8）三、效應(yīng)評價（2）2、常用效應(yīng)評價指標1）衛(wèi)生知識均分；2）衛(wèi)生知識合格率；3）衛(wèi)生知識知曉率（正確率）；4）信念流行率；5）行為流行率；6）行為改變率。第12頁，共37頁，2023年，2月20日，星期日過程評價與效應(yīng)評價分組練習具體目標6個月內(nèi)陜南燃煤型氟砷中毒病區(qū)80%的家庭主婦知道改爐灶與健康關(guān)系的知識較干預前提高30%策略步驟1收集基線數(shù)據(jù)步驟2實施策略/過程評價步驟3效應(yīng)評價第13頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（9）四、結(jié)局評價（遠期效果評價）1、健康狀況1）生理和心理健康指標：如身高、體重、體質(zhì)指數(shù)、血壓、血色素等生理指標在干預后的變化；心理健康指標如人格、抑郁等方面的變化。2）疾病與死亡指標：如疾病發(fā)病率、患病率、死亡率、嬰兒死亡率、5歲以下兒童死亡率、孕產(chǎn)婦死亡率、平均期望壽命、減壽人年數(shù)（PYLL）等。2、生活質(zhì)量1）生活質(zhì)量指數(shù)，即PQLI指數(shù)；2）美國社會健康協(xié)會指數(shù)，即ASHA指數(shù)；3）日?；顒恿勘?，即ADL量表；4）生活滿意度指數(shù)量表，即LSI量表。第14頁，共37頁，2023年，2月20日，星期日評價的種類和內(nèi)容（10）五、總結(jié)評價是指形成評價、過程評價、效應(yīng)評價、結(jié)局評價的綜合以及對各方面資料做出總結(jié)性的概括。它全面反映計劃的成敗。通過總結(jié)評價對各項計劃的完成情況、對成本—效益等做出總的判斷，以總結(jié)經(jīng)驗教訓，為今后計劃的決策提出準確的科學依據(jù)。第15頁，共37頁，2023年，2月20日，星期日健康教育計劃評價的種類與內(nèi)容

計劃設(shè)計計劃實施階段階段中間目的行為改變健康狀況生活質(zhì)量評價內(nèi)容

計劃設(shè)計劃實健康相關(guān)行為的影健康相關(guān)健康狀況生活質(zhì)量

計的合施情況響因素（傾向因素、行為理性促成因素、強化因素）評價指標科學性干預活動次數(shù)知識知曉率行為流行率生理指標PQLI

適宜性參加人數(shù)信念流行率行為轉(zhuǎn)變率疾病指標生活滿意度可接受性干預活動暴露率資源分配死亡指標有效指標社會支持評價種類形成評價過程評價效應(yīng)評價結(jié)局評價總結(jié)評價評價階段第16頁，共37頁，2023年，2月20日，星期日評價設(shè)計方案（1）一、不設(shè)對照組的前后測試二、簡單時間系列設(shè)計三、非等同比較組設(shè)計四、復合時間系列設(shè)計五、實驗研究第17頁，共37頁，2023年，2月20日，星期日評價設(shè)計方案（2）一、不設(shè)對照組的前后測試1、概念：這是評價方案中最簡單的一種，通過比較目標人群在項目實施前后有關(guān)指標的情況反映項目效應(yīng)與結(jié)局。2、優(yōu)點：方案設(shè)計與實際操作相對簡單，能節(jié)省人力、物力資源。3、不足：無法控制干預措施以外其他因素的影響。4、用途：周期比較短或資源有限的健康教育與健康促進計劃的設(shè)計第18頁，共37頁，2023年，2月20日，星期日評價方案設(shè)計（3）二、簡單時間系列設(shè)計1、概念：簡單時間系列設(shè)計同樣不設(shè)對照組，特點是在對目標人群進行多次觀察后，再實施干預，并且在干預過程后再進行多次觀察。2、優(yōu)點：是可以確定干預的效果的變化趨勢，有助于推斷因果關(guān)系。3、不足：由于觀察時間點多，增加了實施難度，實施周期長，耗費的資源也相應(yīng)增加。第19頁，共37頁，2023年，2月20日，星期日評價設(shè)計方案（4）三、非等同比較組設(shè)計1、概念：是類實驗設(shè)計的一種，設(shè)計思想是設(shè)立與接受干預的目標人群（干預組）相匹配的對照組，通過對干預組、對照組在項目事實前后變化的比較，來評價健康教育與健康促進項目的效應(yīng)和結(jié)局。2、優(yōu)點：通過干預組與對照組的比較，能有效地消除或克服多種混雜因素對評價效果正確性的影響。3、注意事項：應(yīng)選擇主要特征十分接近干預組的人群作為對照組，以保證可比性，避免選擇因素對結(jié)果的影響。此外，要保證對照組與干預組的觀察時間一致，并應(yīng)用與觀察干預組完全相同的方法、內(nèi)容觀察對照組。第20頁，共37頁，2023年，2月20日，星期日評價設(shè)計方案（5）四、復合時間系列設(shè)計1、概念：融合了簡單時間系列設(shè)計和非等同比較組設(shè)計，既設(shè)立了對照組，又進行多點觀察。2、優(yōu)勢：在控制混雜因素對評價結(jié)果的影響及觀察變化趨勢方面。3、不足：由于觀察點多，特別是對對照組進行多點觀察，增加了資源的消耗，也增加對照組失訪的可能性，操作復雜，難度較大，在實際中應(yīng)用不多。第21頁，共37頁，2023年，2月20日，星期日評價設(shè)計方案（6）五、實驗研究1、概念：實驗研究的根本特點是將研究對象隨機分為干預組和對照組，比較項目實施前后的變化，來評價健康教育與健康促進項目的結(jié)局。2、優(yōu)點：由于干預組和對照組是隨機得來的，有效保證了干預與對照兩組間的齊同行，避免了選擇的影響。同時由于設(shè)置對照組，還可以克服歷史因素、回歸因素、測量與觀察因素等的影響。因此，在理論上是比較完美的評價設(shè)計方案。3、不足：在社區(qū)干預中，盡管以個體為單位的隨機抽樣可以實現(xiàn)，但干預實施中容易出現(xiàn)對照組的“信息污染”，不易操作。第22頁，共37頁，2023年，2月20日，星期日影響評價結(jié)果的因素（1）一、時間因素二、測試或觀察因素三、回歸因素四、選擇因素五、失訪第23頁，共37頁，2023年，2月20日，星期日影響評價結(jié)果的因素（2）一、時間因素又稱歷史因素，指在健康教育與健康促進計劃執(zhí)行或評價期間發(fā)生的重大的、可能對目標人群健康相關(guān)行為及其影響因素產(chǎn)生影響的因素，如新的衛(wèi)生政策的頒布、食物供應(yīng)的變化、自然災(zāi)害等。歷史因素不在干預活動之內(nèi)，但可能對目標人群有積極或消極的影響，以致加強或減弱健康教育與健康促進項目本身的效果。此外，隨著社會的發(fā)展，經(jīng)濟、文化等因素的變化，人們的行為與健康狀況也會有所改變。因此，當健康教育與健康促進項目周期較長時，這種自然的變化也作為一種時間因素影響評價結(jié)果的真實性。通?？梢酝ㄟ^設(shè)立對照組，來克服歷史因素的影響。第24頁，共37頁，2023年，2月20日，星期日影響評價結(jié)果的因素（3）二、測試或觀察因素1、測量者的因素：1）暗示效應(yīng)：健康教育者先入為主的態(tài)度是目標人群的行為向其意向發(fā)展。如健康教育者認為家庭條件差的學生個人衛(wèi)生習慣差，學生受到這種態(tài)度的暗示，就會真的不在意個人衛(wèi)生。這并非健康教育項目的真實結(jié)果。2）項目工作人員的成熟性：隨著項目的持續(xù)進展，項目工作人員能越來越熟練地運用有關(guān)的知識和技能，有可能使觀察到的項目效果優(yōu)于其實際結(jié)果。3）評定錯誤：在評價過程中有意無意地放松評價標準對待干預組，而以原標準評價對照組，最終使評價結(jié)果偏離真實情況。2、測量工具因素：測量工具包括問卷、儀器、藥品、試劑等，其有效性和準確性也直接影響評價結(jié)果的真實性。因此，在進行評價測量前，首先要選擇適宜的測量方法和工具，然后檢驗工具的可靠性，才能獲得真實、可信的評價結(jié)果。3、測量對象因素：1）測量對象的成熟性：目標人群在項目初期并不十分了解項目目標，隨著其對項目的參與或被重復調(diào)查某些內(nèi)容，可能引發(fā)其對有關(guān)內(nèi)容的關(guān)注，增加了學習興趣，使測量結(jié)果好于項目干預的真實結(jié)果。2）霍桑效應(yīng)：人們被選擇作為干預或評價對象時，由于感受到正在被研究或評價而表現(xiàn)的行為異乎尋常。第25頁，共37頁，2023年，2月20日，星期日影響評價結(jié)果的因素（4）三、回歸因素回歸因素指的是由于偶然因素，個別被測試對象的某些特征水平過高或過低，在以后又回復到實際水平的現(xiàn)象。回歸因素的影響不像其他因素一樣比較容易被識別，可采用重復測量、設(shè)立對照組等方法減少回歸因素對項目效果的影響。第26頁，共37頁，2023年，2月20日，星期日影響評價結(jié)果的因素（5）四、選擇因素設(shè)立對照組的目的在于克服時間因素、測量因素、回歸因素等對項目效果的影響。但如果對照組的主要特征指標與干預組的特征不一致，則不能有效發(fā)揮對照組的作用，這種選擇對照組產(chǎn)生的偏差稱為選擇偏差。第27頁，共37頁，2023年，2月20日，星期日影響評價結(jié)果的因素（6）五、失訪失訪指在健康教育與健康促進計劃執(zhí)行或評價過程中，目標人群由于各種原因不能被干預或評價。當目標人群失訪比例高（超過10%）或是非隨機失訪，即只是其中有某些特征的人失訪時，會影響評價效果。應(yīng)努力減少失訪，并鑒別是否為非隨機失訪，從而估計失訪是否會引起偏倚及偏倚程度。第28頁，共37頁，2023年，2月20日，星期日成本—效益分析與成本—效果分析（1）成本—效益分析是通過比較項目的總成本和總收益（均以貨幣值表示）來確定投入一定（單位）成本的產(chǎn)出。然而，衛(wèi)生領(lǐng)域中的很多效益難以轉(zhuǎn)化為貨幣值，如心理健康的改善，疼痛的減輕等。為此，使用成本—效果分析的概念，即項目成本以貨幣值體現(xiàn)，而項目效益改用效果指標表示，如技能水平、發(fā)病率等，進而進行成本與效果的比較，以確定項目的價值。第29頁，共37頁，2023年，2月20日，星期日成本—效益分析與成本—效果分析（2）

投入產(chǎn)出

CBA

效益：用貨幣值表示

各種成本全部收益（以貨幣值表示）效果：有效果指標表示