項目計劃實施與評價ma課件

1、行為干預項目主要步驟相關(guān)理論和方法周歡項目實施與評價討論：干預活動實施的內(nèi)容？實施準備現(xiàn)場執(zhí)行 實施準備工作基本環(huán)節(jié)回顧目標、細分人群、確定干預場所制定實施時間表，對策略、活動、資源分配 進行整合建立實施計劃的組織機構(gòu)、網(wǎng)絡(luò)和工作制度配備與培訓工作人員傳播材料制作配備和購置所需設(shè)備物件 現(xiàn)場執(zhí)行基本環(huán)節(jié) 根據(jù)實施計劃展開各項活動 對實施過程進行督導，歸納整理 檔案資料 對實施效果、效益進行評價項目實施進一步將干預計劃具體化（分解干預計劃）建立組織網(wǎng)絡(luò) 分級分類培訓人員 明確任務(wù)、責權(quán)利建立管理制度基線調(diào)查 篩選/引進/制作傳播材料準備其他器材 實施現(xiàn)場干預 動員各種力量參與 質(zhì)量控制目標、對象

2、、場所質(zhì)量控制調(diào)查誤差的種類非抽樣誤差：由各種人為因素或偶然 因素造成的抽樣誤差：在抽樣調(diào)查中會產(chǎn)生抽樣 誤差，其誤差是不可避免 的，但有一定規(guī)律，可以 控制，可作出估計 （增大樣本含量降低抽樣誤差）抽樣誤差的控制 主要在設(shè)計階段力求使抽取的樣本具有代表性具有一定數(shù)量的樣本量在抽樣時盡可能隨機抽樣非抽樣誤差的控制設(shè)計階段調(diào)查階段分析階段設(shè)計階段的質(zhì)量控制非抽樣誤差的來源:調(diào)查指標選擇不當 （如：發(fā)病率與病死率）調(diào)查對象的范圍劃分不當 如：某地居民患病率調(diào)查項目的定義不明確周歲年齡的計算不準確調(diào)查階段的質(zhì)量控制非抽樣誤差可能來自:調(diào)查人員的工作態(tài)度、業(yè)務(wù)水平 調(diào)查員的選拔與培訓調(diào)查對象因故不在、

3、回避調(diào)查、拒絕回答、有意隱瞞、記憶不清等 開展廣泛宣傳，爭取群眾積極配合 敏感問題調(diào)查法，知情人幫助回憶等分析階段的質(zhì)量控制非抽樣誤差可能來自編碼、錄入、匯總、計算等方面 嚴格進行資料整理和檢驗評價形成評價內(nèi) 容：對項目計劃本身進行的評價， 其任務(wù)是評估計劃設(shè)計是否符 合實際。作 用：最大限度地降低項目失敗的風 險，避免資源的浪費。評價方式：專家評估或模擬試驗。 過程評價內(nèi) 容：評估計劃實際執(zhí)行情況與計劃要求之間的 差異。開始于健康教育項目實施啟動之 時，貫穿于計劃執(zhí)行的全過程。 作 用：即時發(fā)現(xiàn)問題，為計劃的調(diào)整提供科學 依據(jù)。評價方式：定性與定量調(diào)查評價指標：項目活動執(zhí)行率；干預活動覆蓋率

4、； 活動暴露率； 有效指數(shù)； 目標人群滿意度效應(yīng)評價效應(yīng)評價：即近期和中期效果評價。 評估健康教育計劃導致的人群 健康相關(guān)行為及其影響因素 的變化。評價指標：行為危險因素（知識、信念、態(tài)度） 行為（行為改變率、行為流行率）結(jié)局評價結(jié)局評價：遠期效果評價。 評價健康教育項目導致的人群 健康狀態(tài)乃至生活質(zhì)量的變化。評價指標： 健康狀態(tài) 生理指標（身高、體重、血壓等） 疾病與死亡指標（發(fā)病率、死亡率等） 生活質(zhì)量 生活質(zhì)量指數(shù)；日常活動量表； 生活滿意度指數(shù)量表 總結(jié)評價內(nèi)容：指形成評價、過程評價、效應(yīng)評價 和結(jié)局評價的綜合以及對各方面資 料做出總結(jié)性概括。作用：全面反映健康教育項目的成功與不足，

5、為今后的計劃制定和項目決策提供依 據(jù)。健康教育計劃評價的種類與內(nèi)容計劃設(shè)計階段項目實施階段項目結(jié)束階段 中間目標 行為改 變健康狀態(tài) 生活質(zhì) 量評 價內(nèi) 容評 價指標評 價種類計劃設(shè) 計的合理性科學性適宜性可接受性形成評價 計 劃實 施情 況干預活動次數(shù)參與人數(shù)干預活動暴露率有效指數(shù)行為影響因素（傾向、促成、強 化）知識知曉 率態(tài)度轉(zhuǎn)變率健康 相關(guān)行為行為流行 率行為轉(zhuǎn)變率行為意向 健康 狀態(tài)生理指標疾病指標死亡指標生 活質(zhì)量物理環(huán)境健康狀態(tài)心理狀態(tài)過程評價效應(yīng)評價 結(jié)局評價總結(jié)評價評價設(shè)計方案不設(shè)對照組的前后測試簡單時間系列設(shè)計非等同比較組設(shè)計 （類實驗設(shè)計） 為干預組選擇一組匹配的對照組復

6、合時間系列設(shè)計 設(shè)有對照組且進行多個時間點的觀察實驗研究 將研究對象隨機分組一、不設(shè)對照組的前后測試方案內(nèi)容：常用評價方案中設(shè)計最為簡單的一種，通過比較目標人群在健康教育項目實施前與實施后的相關(guān)知識、行為及健康狀況的變化情況，從而反映健康教育項目的效果。23不設(shè)對照組的前后測試方案優(yōu)點：該測試方案不設(shè)對照組，研究方案設(shè)計簡單，實際操作相對便捷，能較大地節(jié)省人力、物力資源缺點：前后測試方案無法控制影響結(jié)局的混雜因素，從而會影響評價效果的準確性。24二、簡單時間系列方案內(nèi)容：對健康教育目標人群在干預實施前與實施后連續(xù)進行多次觀察，比較目標人群在干預前后的相關(guān)知識、行為及健康狀況的變化情況，從而反映

7、健康教育項目的效果。25簡單時間系列方案優(yōu)點：可發(fā)現(xiàn)目標人群的健康相關(guān)行為的自然變化情況，并且有可能獲得干預措施與行為變化之間的“劑量反應(yīng)”關(guān)系。缺點：在干預實施前后需要進行多個觀察點的測試，需要較長的時間，對觀察測試的穩(wěn)定性、可靠性要求很高，其結(jié)果容易受到失訪、觀察測試水準不一致等因素的影響。同時，因為時間跨度較大，要求觀察測試的次數(shù)多，故需要較大的人力、物力支持。26舉例：評估兩個不同縣的資源分配的效果增加對照組后三、非等同比較組方案內(nèi)容：設(shè)置對照組，并保證對照組的健康教育目標人群的主要特征與干預組目標人群的近似，通過比較干預組與對照組的目標人群在干預前后的相關(guān)知識、行為及健康狀況的變化情

8、況，從而反映健康教育項目的效果。非等同比較組方案在本質(zhì)上屬于類實驗設(shè)計。29優(yōu)點：通過設(shè)置對照組，在一定程度上排除了時間、客觀環(huán)境、觀測等混雜因素的影響，從而更準確地評價健康教育項目對目標人群相關(guān)知識、行為及健康結(jié)局的影響。缺點：在非等同比較組設(shè)計中，當對照組選擇不恰當時，即對照組與干預組的主要特征不匹配，就會產(chǎn)生選擇偏倚，從而影響健康教育項目評價的真實效果。非等同比較組方案的優(yōu)缺點30準確地評價項目干預活動的凈效應(yīng)，一般需要設(shè)立對照組。注意：四、復合時間系列方案內(nèi)容：融合了簡單時間系列方案與非等同比較組方案，既設(shè)立對照組，又進行多時點觀察與測量。32復合時間系列方案的優(yōu)缺點優(yōu)點：同時具備了簡

9、單時間系列方案與非等同比較組方案的優(yōu)點，可在一定程度上排除混雜因素的影響，也可以獲得健康教育項目干預與行為改變之間的“劑量反應(yīng)”關(guān)系。 缺點：復合時間系列方案由于觀察時點多，延長了觀察時間，不僅增加了人力物力資源的消耗，也增加了干預組與對照組的目標人群失訪的可能性。33五、 隨機對照試驗方案內(nèi)容：引入隨機化原則，目標人群被隨機分為干預組和對照組。通過比較干預組和對照組的目標人群在健康教育項目干預實施前與實施后相關(guān)知識、行為及健康狀況的變化情況，來反映健康教育項目的效果。34 隨機對照試驗方案的優(yōu)缺點優(yōu)點：隨機化原則充分保證了干預組和對照組間的一致性，避免了選擇因素的影響。同時也避免了測試或觀察

10、因素乃至回歸因素的影響。缺點 ：隨機對照試驗方案的設(shè)計、實施較為復雜，實際操作難度較大，在實際現(xiàn)場操作過程中，不易實現(xiàn)真正的隨機化原則。35閱讀材料并討論該項目運用了哪些干預策略/手段？是否合理？該項目在哪些方面做了質(zhì)量控制？是否足夠？該項目運用了哪些評價方法？有哪些評價指標？是否合適？有哪些因素可能影響了評價效果？指出項目的優(yōu)缺點。影響評價的主要因素時間因素及沾染時間因素：指在項目實施期間所發(fā)生的干預 之外的事件，導致參與者發(fā)生某 些可能對結(jié)果有影響的變化。沾 染：由于設(shè)計不當，使對照組實驗對象 接受了健康教育的干預，從而使干 預后實驗組和對照組間的差異減少。 常常由于組間物理距離過分靠近造 成。來自于測量者的因素客觀因素：調(diào)查人員的熟練程度 調(diào)查者的誘導、暗示控制方法：調(diào)查人員培訓，統(tǒng)一調(diào)查內(nèi)容、方式主觀因素：設(shè)計、實施和評價階段均可出現(xiàn)控制方法：建立更完善的外部評價體系； 加強科研道德、建立良好的學術(shù)風氣； 盲法，等。 來自于實驗工具的因素 實驗工具的信度與效度 物理測量工具的信度與效度問題 調(diào)查表的信度與效度問題來自于實驗對象的因素霍桑效應(yīng)：人們得知自己正在被研究或 觀察而表現(xiàn)出的行為異乎尋 常的現(xiàn)