1、健康教育與健康促進計劃評價,陜西省健康教育所 王俊儒 2008年7月29日,評價概述（1）,一、評價的概念 評價是客觀實際與預期目標進行的比較。 評價貫穿于整個健康教育與健康促進項目管理過程的始終。,評價概述（2）,二、評價的作用 1、了解健康教育與健康促進項目的效果如何。 2、對項目全面檢測、控制。 3、最大限度地保障計劃的先進性和實施質(zhì)量。,評價概述（3）,三、評價的目的 1、確定健康教育與健康促進計劃的合理性和先進性。 2、確定計劃的執(zhí)行情況，包括干預活動的數(shù)量與質(zhì)量，以確定干預活動是否適合目標人群，各項活動是否按計劃執(zhí)行，以及資源利用情況。 3、確定健康教育/健康促進計劃是否達到預期目

2、標，其可持續(xù)性如何。 4、項目的產(chǎn)出是否有混雜因素的影響，影響程度如何。 5、向公眾和投資者說明項目結(jié)果，擴大項目影響，改善公共關(guān)系，以取得目標人群、社區(qū)、投資者的更廣泛支持與合作。 6、總結(jié)健康教育/健康促進項目的成功經(jīng)驗與不足之處，提出進一步的項目方向。,評價的種類和內(nèi)容（1）,一、形成評價（1） 1、形成評價的概念： 形成評價是一個為健康教育計劃設計和發(fā)展提供信息的過程，包括為指定干預計劃所做的需求評估及為計劃設計和執(zhí)行提供所需的基礎材料。其目的在于使健康教育計劃符合目標人群的實際情況，使計劃更科學、更完善。 2、形成評價的具體內(nèi)容： 1）了解目標人群的各種基本特征。 2）了解目標人群對

3、干預的看法。 3）了解教育材料發(fā)放系統(tǒng)，包括生產(chǎn)、貯存、批發(fā)、零售以及發(fā)放渠道。 4）對問卷進行預調(diào)查及修改。 5）了解哪些健康教育干預策略適用于目標人群，健康教育材料預實驗，確定其適宜性。 6）針對計劃執(zhí)行的早期階段可能出現(xiàn)的問題，根據(jù)新的情況對計劃做適度調(diào)整。,評價的種類和內(nèi)容（2）,一、形成評價（2） 3、形成評價的方法與指標 1）方法 文獻、檔案、資料的回顧； 專家咨詢； 專題小組討論； 目標人群調(diào)查； 現(xiàn)場觀察； 試點研究等。 2）指標 計劃的科學性； 政策的支持性； 技術(shù)上的適宜性； 目標人群對策略和活動的接受程度等。,評價的種類和內(nèi)容（3）,二、過程評價（1） 1、過程評價的作用

4、（1） 可以概括為兩大方面：評估項目運作和修正項目計劃。 1）評估項目運作情況 教育干預是否適合于教育對象，并為他們所接受？ 教育干預是否按既定的活動類型、時間、頻率加以實施，干預的質(zhì)量如何？ 教育材料是否全部發(fā)放給目標人群？教育的覆蓋面如何？ 目標人群參與是否積極？不愿參與的原因何在？ 教育服務利用情況（如展覽、咨詢等服務項目），利用率低的原因何在？ 是否建立完整的信息反饋體系？各項記錄的完整性、質(zhì)量如何？ 在項目實施期間有無重大的環(huán)境變化（如各種重大事件），對項目執(zhí)行的影響如何？ 工作人員的職業(yè)技能、工作態(tài)度、責任心及與教育對象、工作人員之間的配合工作情況。 2）修正項目計劃,評價的種類和

5、內(nèi)容（4）,二、過程評價（2） 2、過程評價的實施方法 1）直接觀察各項干預活動。 2）社區(qū)及目標人群調(diào)查。可根據(jù)隨機原則，在少量目標人群中進行抽樣調(diào)查、中心地區(qū)調(diào)查、網(wǎng)絡調(diào)查、專題小組討論等。 3）舉行項目工作者會議。定期舉行計劃設計者、管理者及執(zhí)行者的聯(lián)席會議，討論來自各方面的反饋信息，對項目進行階段性評估。 4）追蹤了解情況。以記錄檔案的形式對各項活動開展的日期、內(nèi)容、目的、地點、持續(xù)時間、活動組織者、目標人群及參與情況進行追蹤了解。 為了有效的評價項目的運作，及時收集各方面的反饋信息，必須建立過程追蹤系統(tǒng)。其人員組成為：健康教育計劃的設計者；健康教育專業(yè)人員；項目合作者；目標人群代表；

6、社區(qū)衛(wèi)生機構(gòu)、新聞機構(gòu)代表等。,評價的種類和內(nèi)容（5）,二、過程評價（3） 3、過程評價指標 經(jīng)費執(zhí)行率 項目執(zhí)行率 干預活動類型、干預次數(shù)、持續(xù)時間 媒介擁有率 干預活動覆蓋率 干預活動暴露率 有效指數(shù),評價的種類和內(nèi)容（6）,二、過程評價（4） 4、過程評估中的質(zhì)量控制 1）內(nèi)部質(zhì)量控制： 主要是項目內(nèi)部工作人員在對項目進行過程評估時，嚴格掌握評價標準，把好評價質(zhì)量關(guān)。 2）外部質(zhì)量控制： 一般由項目以外的、有項目評價經(jīng)驗的人對過程進行的質(zhì)量控制，常用的方法是專家小組審查。,評價的種類和內(nèi)容（7）,三、效應評價（1） 效應評價是要評估健康教育計劃導致的目標人群健康相關(guān)行為及其影響因素（傾向

7、因素、促成因素、強化因素）的變化。效應評價也成為近期和中期效果評價。 1、效應評價的內(nèi)容 1）傾向因素：如目標人群的衛(wèi)生保健知識，健康價值觀，對某一健康相關(guān)行為或疾病的態(tài)度，對自身易感性、疾病潛在威脅的信念等。 2）促成因素：衛(wèi)生服務或?qū)嵭薪】敌袨榈馁Y源的可及性。從健康促進角度，有關(guān)政策、法規(guī)制定情況，行政對健康教育的干預程度、效果也可以說是更強有力的一種促成因素。 3）強化因素：與目標人群關(guān)系密切的人對健康相關(guān)行為或疾病的看法，目標人群采納某健康相關(guān)行為時獲得的社會支持，及其采納該行為后自身的感受。 4）健康相關(guān)行為：干預前后目標人群的健康相關(guān)行為是否發(fā)生變化，改變量是多少，各種變化在人群中

8、的分布如何。,評價的種類和內(nèi)容（8）,三、效應評價（2） 2、常用效應評價指標 1）衛(wèi)生知識均分； 2）衛(wèi)生知識合格率； 3）衛(wèi)生知識知曉率（正確率）； 4）信念流行率； 5）行為流行率； 6）行為改變率。,過程評價與效應評價分組練習,評價的種類和內(nèi)容（9）,四、結(jié)局評價（遠期效果評價） 1、健康狀況 1）生理和心理健康指標：如身高、體重、體質(zhì)指數(shù)、血壓、血色素等生理指標在干預后的變化；心理健康指標如人格、抑郁等方面的變化。 2）疾病與死亡指標：如疾病發(fā)病率、患病率、死亡率、嬰兒死亡率、5歲以下兒童死亡率、孕產(chǎn)婦死亡率、平均期望壽命、減壽人年數(shù)（PYLL）等。 2、生活質(zhì)量 1）生活質(zhì)量指數(shù)，

9、即PQLI指數(shù)； 2）美國社會健康協(xié)會指數(shù)，即ASHA指數(shù)； 3）日?；顒恿勘?，即ADL量表； 4）生活滿意度指數(shù)量表，即LSI量表。,評價的種類和內(nèi)容（10）,五、總結(jié)評價 是指形成評價、過程評價、效應評價、結(jié)局評價的綜合以及對各方面資料做出總結(jié)性的概括。它全面反映計劃的成敗。通過總結(jié)評價對各項計劃的完成情況、對成本效益等做出總的判斷，以總結(jié)經(jīng)驗教訓，為今后計劃的決策提出準確的科學依據(jù)。,健康教育計劃評價的種類與內(nèi)容,計劃設計 計劃實施 階段 階段 中間目的 行為改變 健康狀況 生活質(zhì)量 評價內(nèi)容 計劃設 計劃實 健康相關(guān)行為的影 健康相關(guān) 健康狀況 生活質(zhì)量 計的合 施情況 響因素（傾向因

10、素、 行為 理性 促成因素、強化因 素） 評價指標 科學性 干預活動次數(shù) 知識知曉率 行為流行率 生理指標 PQLI 適宜性 參加人數(shù) 信念流行率 行為轉(zhuǎn)變率 疾病指標 生活滿意度 可接受性 干預活動暴露率 資源分配 死亡指標 有效指標 社會支持 評價種類 形成評價 過程評價 效應評價 結(jié)局評價 總結(jié)評價,評價階段,評價設計方案（1）,一、不設對照組的前后測試 二、簡單時間系列設計 三、非等同比較組設計 四、復合時間系列設計 五、實驗研究,評價設計方案（2）,一、不設對照組的前后測試 1、概念：這是評價方案中最簡單的一種，通過比較目標人群在項目實施前后有關(guān)指標的情況反映項目效應與結(jié)局。 2、優(yōu)

11、點：方案設計與實際操作相對簡單，能節(jié)省人力、物力資源。 3、不足：無法控制干預措施以外其他因素的影響。 4、用途：周期比較短或資源有限的健康教育與健康促進計劃的設計,評價方案設計（3）,二、簡單時間系列設計 1、概念：簡單時間系列設計同樣不設對照組，特點是在對目標人群進行多次觀察后，再實施干預，并且在干預過程后再進行多次觀察。 2、優(yōu)點：是可以確定干預的效果的變化趨勢，有助于推斷因果關(guān)系。 3、不足：由于觀察時間點多，增加了實施難度，實施周期長，耗費的資源也相應增加。,評價設計方案（4）,三、非等同比較組設計 1、概念：是類實驗設計的一種，設計思想是設立與接受干預的目標人群（干預組）相匹配的對

12、照組，通過對干預組、對照組在項目事實前后變化的比較，來評價健康教育與健康促進項目的效應和結(jié)局。 2、優(yōu)點：通過干預組與對照組的比較，能有效地消除或克服多種混雜因素對評價效果正確性的影響。 3、注意事項：應選擇主要特征十分接近干預組的人群作為對照組，以保證可比性，避免選擇因素對結(jié)果的影響。此外，要保證對照組與干預組的觀察時間一致，并應用與觀察干預組完全相同的方法、內(nèi)容觀察對照組。,評價設計方案（5）,四、復合時間系列設計 1、概念：融合了簡單時間系列設計和非等同比較組設計，既設立了對照組，又進行多點觀察。 2、優(yōu)勢：在控制混雜因素對評價結(jié)果的影響及觀察變化趨勢方面。 3、不足：由于觀察點多，特別

13、是對對照組進行多點觀察，增加了資源的消耗，也增加對照組失訪的可能性，操作復雜，難度較大，在實際中應用不多。,評價設計方案（6）,五、實驗研究 1、概念：實驗研究的根本特點是將研究對象隨機分為干預組和對照組，比較項目實施前后的變化，來評價健康教育與健康促進項目的結(jié)局。 2、優(yōu)點：由于干預組和對照組是隨機得來的，有效保證了干預與對照兩組間的齊同行，避免了選擇的影響。同時由于設置對照組，還可以克服歷史因素、回歸因素、測量與觀察因素等的影響。因此，在理論上是比較完美的評價設計方案。 3、不足：在社區(qū)干預中，盡管以個體為單位的隨機抽樣可以實現(xiàn)，但干預實施中容易出現(xiàn)對照組的“信息污染”，不易操作。,影響評

14、價結(jié)果的因素（1）,一、時間因素 二、測試或觀察因素 三、回歸因素 四、選擇因素 五、失訪,影響評價結(jié)果的因素（2）,一、時間因素 又稱歷史因素，指在健康教育與健康促進計劃執(zhí)行或評價期間發(fā)生的重大的、可能對目標人群健康相關(guān)行為及其影響因素產(chǎn)生影響的因素，如新的衛(wèi)生政策的頒布、食物供應的變化、自然災害等。歷史因素不在干預活動之內(nèi)，但可能對目標人群有積極或消極的影響，以致加強或減弱健康教育與健康促進項目本身的效果。此外，隨著社會的發(fā)展，經(jīng)濟、文化等因素的變化，人們的行為與健康狀況也會有所改變。因此，當健康教育與健康促進項目周期較長時，這種自然的變化也作為一種時間因素影響評價結(jié)果的真實性。通?？梢酝?/p>

15、過設立對照組，來克服歷史因素的影響。,影響評價結(jié)果的因素（3）,二、測試或觀察因素 1、測量者的因素： 1）暗示效應：健康教育者先入為主的態(tài)度是目標人群的行為向其意向發(fā)展。如健康教育者認為家庭條件差的學生個人衛(wèi)生習慣差，學生受到這種態(tài)度的暗示，就會真的不在意個人衛(wèi)生。這并非健康教育項目的真實結(jié)果。 2）項目工作人員的成熟性：隨著項目的持續(xù)進展，項目工作人員能越來越熟練地運用有關(guān)的知識和技能，有可能使觀察到的項目效果優(yōu)于其實際結(jié)果。 3）評定錯誤：在評價過程中有意無意地放松評價標準對待干預組，而以原標準評價對照組，最終使評價結(jié)果偏離真實情況。 2、測量工具因素：測量工具包括問卷、儀器、藥品、試劑

16、等，其有效性和準確性也直接影響評價結(jié)果的真實性。因此，在進行評價測量前，首先要選擇適宜的測量方法和工具，然后檢驗工具的可靠性，才能獲得真實、可信的評價結(jié)果。 3、測量對象因素： 1）測量對象的成熟性：目標人群在項目初期并不十分了解項目目標，隨著其對項目的參與或被重復調(diào)查某些內(nèi)容，可能引發(fā)其對有關(guān)內(nèi)容的關(guān)注，增加了學習興趣，使測量結(jié)果好于項目干預的真實結(jié)果。 2）霍桑效應：人們被選擇作為干預或評價對象時，由于感受到正在被研究或評價而表現(xiàn)的行為異乎尋常。,影響評價結(jié)果的因素（4）,三、回歸因素 回歸因素指的是由于偶然因素，個別被測試對象的某些特征水平過高或過低，在以后又回復到實際水平的現(xiàn)象?；貧w因

17、素的影響不像其他因素一樣比較容易被識別，可采用重復測量、設立對照組等方法減少回歸因素對項目效果的影響。,影響評價結(jié)果的因素（5）,四、選擇因素 設立對照組的目的在于克服時間因素、測量因素、回歸因素等對項目效果的影響。但如果對照組的主要特征指標與干預組的特征不一致，則不能有效發(fā)揮對照組的作用，這種選擇對照組產(chǎn)生的偏差稱為選擇偏差。,影響評價結(jié)果的因素（6）,五、失訪 失訪指在健康教育與健康促進計劃執(zhí)行或評價過程中，目標人群由于各種原因不能被干預或評價。當目標人群失訪比例高（超過10%）或是非隨機失訪，即只是其中有某些特征的人失訪時，會影響評價效果。應努力減少失訪，并鑒別是否為非隨機失訪，從而估計

18、失訪是否會引起偏倚及偏倚程度。,成本效益分析與成本效果分析（1）,成本效益分析是通過比較項目的總成本和總收益（均以貨幣值表示）來確定投入一定（單位）成本的產(chǎn)出。然而，衛(wèi)生領域中的很多效益難以轉(zhuǎn)化為貨幣值，如心理健康的改善，疼痛的減輕等。為此，使用成本效果分析的概念，即項目成本以貨幣值體現(xiàn)，而項目效益改用效果指標表示，如技能水平、發(fā)病率等，進而進行成本與效果的比較，以確定項目的價值。,成本效益分析與成本效果分析（2）,投入 產(chǎn)出 CBA 效益：用貨幣值表示 各種成本 全部收益 （以貨幣值表示） 效果：有效果指標表示 CEA,健康教育計劃,成本效益分析與成本效果分析（3）,一項健康教育項目的直接成本應包括： 1、所有全部工作人員的工資、津貼；專家咨詢費；培訓教師講課費；調(diào)查員勞務費等人員費用。 2、設備、材料費用，如計算機、放像機、健康教育材料等。 3、交通、通訊費用，包括交通、電話、郵件、傳真等。 4、日常消耗費用，如紙張、文具、復印資料、表格印刷、場地租用等。,成本