項目計劃實施與評價master2015

,行為干預(yù)項目主要步驟,相關(guān)理論和方法,周歡,項目實施與評價,討論：,干預(yù)活動實施的內(nèi)容？,實施準(zhǔn)備現(xiàn)場執(zhí)行,實施準(zhǔn)備工作基本環(huán)節(jié)回顧目標(biāo)、細(xì)分人群、確定干預(yù)場所制定實施時間表，對策略、活動、資源分配 進(jìn)行整合建立實施計劃的組織機構(gòu)、網(wǎng)絡(luò)和工作制度配備與培訓(xùn)工作人員傳播材料制作配備和購置所需設(shè)備物件,現(xiàn)場執(zhí)行基本環(huán)節(jié),根據(jù)實施計劃展開各項活動 對實施過程進(jìn)行督導(dǎo)，歸納整理 檔案資料 對實施效果、效益進(jìn)行評價,項目實施,進(jìn)一步將干預(yù)計劃具體化（分解干預(yù)計劃）,建立組織網(wǎng)絡(luò),分級分類培訓(xùn)人員,明確任務(wù)、責(zé)權(quán)利建立管理制度,基線調(diào)查,篩選/引進(jìn)/制作傳播材料,準(zhǔn)備其他器材,實施現(xiàn)場干預(yù),動員各種力量參與,質(zhì)量控制,目標(biāo)、對象、場所,質(zhì)量控制,調(diào)查誤差的種類,非抽樣誤差：由各種人為因素或偶然 因素造成的抽樣誤差：在抽樣調(diào)查中會產(chǎn)生抽樣 誤差，其誤差是不可避免 的，但有一定規(guī)律，可以 控制，可作出估計 （增大樣本含量降低抽樣誤差）,抽樣誤差的控制,主要在設(shè)計階段力求使抽取的樣本具有代表性具有一定數(shù)量的樣本量在抽樣時盡可能隨機抽樣,非抽樣誤差的控制,設(shè)計階段調(diào)查階段分析階段,設(shè)計階段的質(zhì)量控制,非抽樣誤差的來源:調(diào)查指標(biāo)選擇不當(dāng) （如：發(fā)病率與病死率）調(diào)查對象的范圍劃分不當(dāng) 如：某地居民患病率調(diào)查項目的定義不明確周歲年齡的計算不準(zhǔn)確,調(diào)查階段的質(zhì)量控制,非抽樣誤差可能來自:調(diào)查人員的工作態(tài)度、業(yè)務(wù)水平 調(diào)查員的選拔與培訓(xùn)調(diào)查對象因故不在、回避調(diào)查、拒絕回答、有意隱瞞、記憶不清等 開展廣泛宣傳，爭取群眾積極配合 敏感問題調(diào)查法，知情人幫助回憶等,分析階段的質(zhì)量控制,非抽樣誤差可能來自編碼、錄入、匯總、計算等方面 嚴(yán)格進(jìn)行資料整理和檢驗,評價,形成評價,內(nèi) 容：對項目計劃本身進(jìn)行的評價， 其任務(wù)是評估計劃設(shè)計是否符 合實際。作 用：最大限度地降低項目失敗的風(fēng) 險，避免資源的浪費。評價方式：專家評估或模擬試驗。,過程評價,內(nèi) 容：評估計劃實際執(zhí)行情況與計劃要求之間的 差異。開始于健康教育項目實施啟動之 時，貫穿于計劃執(zhí)行的全過程。 作 用：即時發(fā)現(xiàn)問題，為計劃的調(diào)整提供科學(xué) 依據(jù)。評價方式：定性與定量調(diào)查評價指標(biāo)：項目活動執(zhí)行率；干預(yù)活動覆蓋率； 活動暴露率； 有效指數(shù)； 目標(biāo)人群滿意度,效應(yīng)評價,效應(yīng)評價：即近期和中期效果評價。 評估健康教育計劃導(dǎo)致的人群 健康相關(guān)行為及其影響因素 的變化。評價指標(biāo)：行為危險因素（知識、信念、態(tài)度） 行為（行為改變率、行為流行率）,結(jié)局評價,結(jié)局評價：遠(yuǎn)期效果評價。 評價健康教育項目導(dǎo)致的人群 健康狀態(tài)乃至生活質(zhì)量的變化。評價指標(biāo)： 健康狀態(tài) 生理指標(biāo)（身高、體重、血壓等） 疾病與死亡指標(biāo)（發(fā)病率、死亡率等） 生活質(zhì)量 生活質(zhì)量指數(shù)；日常活動量表； 生活滿意度指數(shù)量表,總結(jié)評價,內(nèi)容：指形成評價、過程評價、效應(yīng)評價 和結(jié)局評價的綜合以及對各方面資 料做出總結(jié)性概括。作用：全面反映健康教育項目的成功與不足， 為今后的計劃制定和項目決策提供依 據(jù)。,健康教育計劃評價的種類與內(nèi)容,計劃設(shè)計階段,項目實施階段,項目結(jié)束階段,中間目標(biāo),行為改 變,健康狀態(tài),生活質(zhì) 量,評 價內(nèi) 容,評 價指標(biāo),評 價種類,計劃設(shè) 計的合理性,科學(xué)性適宜性可接受性,形成評價,計 劃實 施情 況,干預(yù)活動次數(shù)參與人數(shù)干預(yù)活動暴露率有效指數(shù),行為影響因素（傾向、促成、強 化）,知識知曉 率態(tài)度轉(zhuǎn)變率,健康 相關(guān)行為,行為流行 率行為轉(zhuǎn)變率行為意向 ,健康 狀態(tài),生理指標(biāo)疾病指標(biāo)死亡指標(biāo),生 活質(zhì)量,物理環(huán)境健康狀態(tài)心理狀態(tài),過程評價,效應(yīng)評價,結(jié)局評價,總結(jié)評價,評價設(shè)計方案,不設(shè)對照組的前后測試簡單時間系列設(shè)計非等同比較組設(shè)計 （類實驗設(shè)計） 為干預(yù)組選擇一組匹配的對照組復(fù)合時間系列設(shè)計 設(shè)有對照組且進(jìn)行多個時間點的觀察實驗研究 將研究對象隨機分組,一、不設(shè)對照組的前后測試方案,內(nèi)容：常用評價方案中設(shè)計最為簡單的一種，通過比較目標(biāo)人群在健康教育項目實施前與實施后的相關(guān)知識、行為及健康狀況的變化情況，從而反映健康教育項目的效果。,23,不設(shè)對照組的前后測試方案,優(yōu)點：該測試方案不設(shè)對照組，研究方案設(shè)計簡單，實際操作相對便捷，能較大地節(jié)省人力、物力資源缺點：前后測試方案無法控制影響結(jié)局的混雜因素，從而會影響評價效果的準(zhǔn)確性。,24,二、簡單時間系列方案,內(nèi)容：對健康教育目標(biāo)人群在干預(yù)實施前與實施后連續(xù)進(jìn)行多次觀察，比較目標(biāo)人群在干預(yù)前后的相關(guān)知識、行為及健康狀況的變化情況，從而反映健康教育項目的效果。,25,簡單時間系列方案,優(yōu)點：可發(fā)現(xiàn)目標(biāo)人群的健康相關(guān)行為的自然變化情況，并且有可能獲得干預(yù)措施與行為變化之間的“劑量反應(yīng)”關(guān)系。缺點：在干預(yù)實施前后需要進(jìn)行多個觀察點的測試，需要較長的時間，對觀察測試的穩(wěn)定性、可靠性要求很高，其結(jié)果容易受到失訪、觀察測試水準(zhǔn)不一致等因素的影響。同時，因為時間跨度較大，要求觀察測試的次數(shù)多，故需要較大的人力、物力支持。,26,舉例：評估兩個不同縣的資源分配的效果,增加對照組后,三、非等同比較組方案,內(nèi)容：設(shè)置對照組，并保證對照組的健康教育目標(biāo)人群的主要特征與干預(yù)組目標(biāo)人群的近似，通過比較干預(yù)組與對照組的目標(biāo)人群在干預(yù)前后的相關(guān)知識、行為及健康狀況的變化情況，從而反映健康教育項目的效果。非等同比較組方案在本質(zhì)上屬于類實驗設(shè)計。,29,優(yōu)點：通過設(shè)置對照組，在一定程度上排除了時間、客觀環(huán)境、觀測等混雜因素的影響，從而更準(zhǔn)確地評價健康教育項目對目標(biāo)人群相關(guān)知識、行為及健康結(jié)局的影響。缺點：在非等同比較組設(shè)計中，當(dāng)對照組選擇不恰當(dāng)時，即對照組與干預(yù)組的主要特征不匹配，就會產(chǎn)生選擇偏倚，從而影響健康教育項目評價的真實效果。,30,非等同比較組方案的優(yōu)缺點,準(zhǔn)確地評價項目干預(yù)活動的凈效應(yīng)，一般需要設(shè)立對照組。,注意：,四、復(fù)合時間系列方案,內(nèi)容：融合了簡單時間系列方案與非等同比較組方案，既設(shè)立對照組，又進(jìn)行多時點觀察與測量。,32,復(fù)合時間系列方案的優(yōu)缺點,優(yōu)點：同時具備了簡單時間系列方案與非等同比較組方案的優(yōu)點，可在一定程度上排除混雜因素的影響，也可以獲得健康教育項目干預(yù)與行為改變之間的“劑量反應(yīng)”關(guān)系。 缺點：復(fù)合時間系列方案由于觀察時點多，延長了觀察時間，不僅增加了人力物力資源的消耗，也增加了干預(yù)組與對照組的目標(biāo)人群失訪的可能性。,33,五、 隨機對照試驗方案,內(nèi)容：引入隨機化原則，目標(biāo)人群被隨機分為干預(yù)組和對照組。通過比較干預(yù)組和對照組的目標(biāo)人群在健康教育項目干預(yù)實施前與實施后相關(guān)知識、行為及健康狀況的變化情況，來反映健康教育項目的效果。,34,隨機對照試驗方案的優(yōu)缺點,優(yōu)點：隨機化原則充分保證了干預(yù)組和對照組間的一致性，避免了選擇因素的影響。同時也避免了測試或觀察因素乃至回歸因素的影響。缺點 ：隨機對照試驗方案的設(shè)計、實施較為復(fù)雜，實際操作難度較大，在實際現(xiàn)場操作過程中，不易實現(xiàn)真正的隨機化原則。,35,閱讀材料并討論,該項目運用了哪些干預(yù)策略/手段？是否合理？該項目在哪些方面做了質(zhì)量控制？是否足夠？該項目運用了哪些評價方法？有哪些評價指標(biāo)？是否合適？有哪些因素可能影響了評價效果？指出項目的優(yōu)缺點。,影響評價的主要因素,時間因素及沾染,時間因素：指在項目實施期間所發(fā)生的干預(yù) 之外的事件，導(dǎo)致參與者發(fā)生某 些可能對結(jié)果有影響的變化。沾 染：由于設(shè)計不當(dāng)，使對照組實驗對象 接受了健康教育的干預(yù)，從而使干 預(yù)后實驗組和對照組間的差異減少。 常常由于組間物理距離過分靠近造 成。,來自于測量者的因素,客觀因素：調(diào)查人員的熟練程度 調(diào)查者的誘導(dǎo)、暗示控制方法：調(diào)查人員培訓(xùn)，統(tǒng)一調(diào)查內(nèi)容、方式主觀因素：設(shè)計、實施和評價階段均可出現(xiàn)控制方法：建立更完善的外部評價體系； 加強科研道德、建立良好的學(xué)術(shù)風(fēng)氣； 盲法，等。,來自于實驗工具的因素,實驗工具的信度與效度,物理測量工具的信度與效度問題 調(diào)查表的信度與效度問題,來自于實驗對象的因素,霍桑效應(yīng)：人們得知自己正在被研究或 觀察而表現(xiàn)出的行為異乎尋 常