健康促進(jìn)規(guī)劃評價課件

1、健康教育計劃評價概述評價（Evaluation）:客觀實際與預(yù)期標(biāo)準(zhǔn)相比較。計劃評價：是全面檢測、控制、保證計劃方案設(shè)計先進(jìn)、實施成功，并取得應(yīng)有效果的關(guān)鍵性措施。貫穿于整個計劃實施的始終。評價的目的：確定健康教育計劃的先進(jìn)性與合理性明確健康教育活動的數(shù)量與質(zhì)量，以確定健康教育活動是否適合目標(biāo)人群，各項活動是否按計劃進(jìn)行及資源的利用情況。確定健康教育計劃達(dá)到預(yù)期目標(biāo)的程度及其影響因素總結(jié)成功與不足，提出進(jìn)一步的研究假設(shè)向公眾介紹項目結(jié)果，擴(kuò)大影響，改善公共關(guān)系，以取得更多的支持與合作向項目資金提供者說明項目結(jié)果，完成合同的要求形成評價formative evaluation 概念：指為健康教育

2、計劃設(shè)計和發(fā)展提供信息的過程。包括為制定干預(yù)計劃所做的需要評估及為計劃設(shè)計和執(zhí)行提供所需的基礎(chǔ)資料。形成評價formative evaluation 目的：使計劃符合目標(biāo)人群實際情況，更科學(xué)、更完善。在計劃實施前，使其具有更大的成功機(jī)會。在計劃實施中，及時糾正偏差，進(jìn)一步保障計劃的成功。形成評價發(fā)生在項目實施之前，部分職能延續(xù)到項目實施的早期階段。過程評價（1）（process evaluation)1、概念： 是在計劃實施過程中，對計劃的設(shè)計、組成、實施過程、管理、工作人員情況等進(jìn)行的評價。貫穿于計劃執(zhí)行的全過程。 評估的是項目活動的質(zhì)量和效率，而不是評估規(guī)劃的結(jié)果和行為效應(yīng)目的,在于控制規(guī)

3、劃的質(zhì)量。因此，又稱為質(zhì)量控制或計劃質(zhì)量保證審查（quality assurance review,QAR）過程評價（2）（process evaluation)2、實施方法：A、直接觀察各項干預(yù)活動。B、社區(qū)及目標(biāo)人群調(diào)查（抽查）C、舉行項目工作者會議。D、追蹤了解情況。即過程追蹤過程評價（4）（process evaluation)3、指標(biāo)：A、干預(yù)活動媒介擁有率干預(yù)活動覆蓋率擁有某種媒介的人數(shù)目標(biāo)人群總?cè)藬?shù)接受某項干預(yù)活動的人數(shù)目標(biāo)人群總?cè)巳?00%100%過程評價（5）（process evaluation)B、目標(biāo)人群參與情況干預(yù)活動暴露率實際參與某項干預(yù)活動的人數(shù)應(yīng)參加該干預(yù)活動的

4、人數(shù)100%過程評價（6）（process evaluation)C、有效指數(shù)（effectiveness index,EI） EI=項目有效指數(shù)（program EI）:即各項干預(yù)活動有效指數(shù)的算術(shù)平均數(shù)。干預(yù)活動暴露率預(yù)期達(dá)到的參與百分比100%過程評價（8）（process evaluation)評估項目運作情況的內(nèi)容包括：A、干預(yù)是否適應(yīng)對象？群眾接受嗎？B、干預(yù)是否按既定的活動類型、時間、頻率加以實施？干預(yù)質(zhì)量如何？C、教育材料是否全部發(fā)放給目標(biāo)人群？教育覆蓋率如何？D、目標(biāo)人群參與是否積極？不原意參加的原因是什么？過程評價（9）（process evaluation)E、教育服務(wù)利

5、用情況（如展覽、咨詢等），利用率低的原因是什么？F、是否建立完整的信息反饋系統(tǒng)？各項記錄的完整性和質(zhì)量如何？G、在項目實施過程中有無重大環(huán)境變化？對項目執(zhí)行的影響如何？H、工作人員的工作情況如何？效應(yīng)評價（1）impact evaluation1、概念：評估健康教育計劃導(dǎo)致目標(biāo)人群健康相關(guān)行為及其影響因素的變化。又稱為近、中期效果評價。效應(yīng)評價（2）2、內(nèi)容：A、傾向因素：知、信、態(tài)度、價值觀B、促成因素C、強(qiáng)化因素D、健康相關(guān)行為。效應(yīng)評價（3）3、評價指標(biāo)（1）：A、衛(wèi)生知識均分 ：B、衛(wèi)生知識知曉率：受調(diào)查者知識得分之和受調(diào)查總?cè)藬?shù)%知曉某知識的人數(shù)被調(diào)查總?cè)藬?shù)%3、評價指標(biāo)（2）：C、

6、信念流行率：D、行為流行率：E、行為改變率：有某種信念的人數(shù)被調(diào)查總?cè)藬?shù)有特定行為的人數(shù)被調(diào)查總?cè)藬?shù)在一定時期內(nèi)某行為發(fā)生改變的人數(shù)觀察開始時有該行為的人數(shù)%結(jié)局評價outcome evaluation） 概念： 評估健康教育項目導(dǎo)致的人群健康狀況及生活質(zhì)量的變化。是否達(dá)到了的目標(biāo)。 內(nèi)容：健康水平指標(biāo)：如患病率、死亡率及平均期望壽命等生命質(zhì)量：生命質(zhì)量指數(shù)（physical quality of life index,PQLI）生活滿意度指數(shù)(life satisfaction index,LSI)社區(qū)衛(wèi)生狀況：如預(yù)防接種、衛(wèi)生檢查合格率結(jié)局評價outcome evaluation健康教育程

7、序接受健康教育者首先填寫問卷調(diào)查表一份，然后進(jìn)行集體授課，其內(nèi)容包括：糖尿病的飲食治療、運動和情緒對血糖的影響、藥物治療與護(hù)理、并發(fā)癥的種類與觀察、自我監(jiān)護(hù)要點等。聽課后一周內(nèi)再填寫同樣一份調(diào)查表，一個月后測空腹血糖1次。問卷調(diào)查表的評分標(biāo)準(zhǔn)設(shè)糖尿病有關(guān)知識為五大部分，每部分知識分值為20分，總分值為100分，60分為及格，及格者為符合標(biāo)準(zhǔn)。本次調(diào)查在授課前后共發(fā)出調(diào)查表242份，收回填寫完整表格232份?？偨Y(jié)評價summative evaluation概念：即綜合形成評價、過程評價、效果評價以及各方面資料作出總結(jié)性的概括。客觀反應(yīng)規(guī)劃的成敗?？偨Y(jié)評價從規(guī)劃的成本效益及各項活動的完成情況，判斷

8、該項目是否有必要推廣、重復(fù)、擴(kuò)大或終止。衛(wèi)生經(jīng)濟(jì)學(xué)評價方法分析方法成本測量結(jié)果測量主要考慮問題最小成本法（CMA）貨幣值可比組間的結(jié)果是相等的效率成本效果法（CEA）貨幣值自然單位（獲得壽命、血糖、血壓等）單一的健康結(jié)果最小的成本達(dá)到預(yù)期的目的成本效用法（CUA）貨幣值質(zhì)量校正的自然單位（QALY）,多種健康結(jié)果比較生命的質(zhì)量成本效益法（CBA）貨幣值貨幣值，可用于多種健康結(jié)果比較最有效地利用有限的資源計劃設(shè)計階段計劃實施階段評價階段 中間目的 行為改變 健康狀況 生活質(zhì)量形成評價 過程評價 效應(yīng)評價 結(jié)局評價 總結(jié)評價評價的層次圖 評價設(shè)計方案分類非實驗設(shè)計：單組前后比較 簡單時間系列準(zhǔn)實驗

9、設(shè)計：非隨機(jī)比較組 復(fù)合時間系列比較實驗設(shè)計單組前后比較(one group pretest and post-test)最簡單的設(shè)計方案1、沒有對照組2、比較干預(yù)前后同一對象的變化3、時間因素影響較大，但短期觀察很有用。4、對象缺乏代表性，因此，結(jié)果解釋困難。非實驗設(shè)計EOXO簡單時間系列(simple time-series design)1、無對照組2、多個時間點的觀察，測量次數(shù)50（推薦）3、應(yīng)滿足的條件：A、可建立能測量的時間周期和結(jié)果變量模式B、結(jié)果應(yīng)穩(wěn)定C、收集資料應(yīng)比較方便D、時間確定在干預(yù)前后的一年內(nèi)進(jìn)行E、干預(yù)可在特定時間進(jìn)行并能突然停止非實驗設(shè)計EOOOXOOO非隨機(jī)比較

10、組(nonequivalent design)1、對象分為實驗組和對照組2、對象進(jìn)入兩組沒有遵循隨機(jī)化原則3、對照的選擇：與干預(yù)相比，除干預(yù)因素外，其它因素相似。4、結(jié)果比較時，兩組應(yīng)進(jìn)行統(tǒng)計學(xué)檢驗以確定兩組具有可比性。優(yōu)點：設(shè)計和實施較容易，省時、省錢，因此，更具有可行性。準(zhǔn)實驗設(shè)計EOXO復(fù)合時間系列比較(multiple time series)與前一設(shè)計相比，要進(jìn)行多個時間點的觀察，其它相同(包括設(shè)立對照組)?？蓽p少一些干擾因素，如歷史性因素的影響。缺點：調(diào)查和追蹤隨訪次數(shù)太多，有時難以完成。對象依從性較差。測量要求高（兩組測量的一致性）準(zhǔn)實驗設(shè)計EOOOXOOO實驗設(shè)計(experi

11、mental design)1、實驗對象分為實驗組、對照組2、實驗對象隨機(jī)地進(jìn)入兩組3、分別觀察兩組干預(yù)前后的指標(biāo)優(yōu)點：最大限度地控制各種影響因素，結(jié)果可靠。缺點：設(shè)計和實行復(fù)雜，有時幾乎無法實現(xiàn)。REOXO影響評價的因素1、時間因素（歷史因素）指計劃執(zhí)行時發(fā)生的重大的、干預(yù)事件以外的、可能對目標(biāo)人群產(chǎn)生某種影響的事件。如政策變化、自然災(zāi)害2、測量或觀察偏倚A、測量者暗示效應(yīng)（self-fulfilling prophecy）指評價或教育者的意向?qū)е虑闆r向其意向性發(fā)展。評定錯誤（rating error）指評價者的意向會影響到評定結(jié)果的高低。如：評價者的主觀愿望總是希望干預(yù)組的知識、信念比對照

12、組高。因此，會有意或無意地放松干預(yù)組的評價標(biāo)準(zhǔn)，使干預(yù)組的成績提高，從而得出陽性結(jié)果。熟練性隨著工作的開展，參與者的知識和工作人員的熟練性會發(fā)生變化。從而影響結(jié)果。如：調(diào)查者因反復(fù)調(diào)查，對調(diào)查內(nèi)容越來越熟悉、技術(shù)越來越熟練、調(diào)查質(zhì)量越來越高。B、測量工具測量工具包括：問卷表、儀器、藥品、試劑等。選擇工具時，應(yīng)注意可靠度和準(zhǔn)確度?？煽慷龋褐貜?fù)測定一相對穩(wěn)定的現(xiàn)象時，多次測量結(jié)果彼此接近的程度。準(zhǔn)確度：指測量結(jié)果與被測量事物實際數(shù)值的符合程度。C、測量對象霍桑效應(yīng)：評價或干預(yù)的對象，由于感受到正在被評價或?qū)嶒?，因此所表現(xiàn)的行為可能異乎尋常。3、回歸因素由于偶然因素，個別被測試對象的某些特征水平可能

13、過高或過低，當(dāng)再次測量時可回復(fù)到原有的水平。4、選擇因素干預(yù)組和對照組的選擇沒有按照隨機(jī)化的原則進(jìn)行，使得兩組在某些特征水平上不一致，從而影響結(jié)果。5、失訪指對象在研究過程丟失。非隨機(jī)失訪或失訪過多（10%）可造成偏倚。6、月暈效應(yīng)（halo effect）：其它因素對被研究因素的影響。如：對象先入為主的觀念。評價實施的過程1、描述問題：明確計劃所要解決的問題及其理論框架。2、熟悉計劃：包括目的、內(nèi)容、目標(biāo)、以及目標(biāo)人群的知、信、行。3、確定評價指標(biāo)：決定評價變量及指標(biāo)；決定所需資料類型和來源。4、確定設(shè)計類型：多用類實驗設(shè)計5、確定資料收集方法：包括抽樣方法。6、確定資料收集工具：問卷表。7、現(xiàn)場調(diào)查及質(zhì)控：參與人員培訓(xùn)和資格審查和質(zhì)量控制。8、資料整理、匯兌、分析：資料在審核、修正、補(bǔ)漏的基礎(chǔ)上，編碼、輸機(jī)、核對、制表、分析。抽樣調(diào)查的方法：隨機(jī)抽樣非隨