如何評(píng)價(jià)一個(gè)科研項(xiàng)目.ppt

如何評(píng)價(jià)一個(gè)科研項(xiàng)目,李立明,如何評(píng)價(jià)一個(gè)科研項(xiàng)目,看研究設(shè)計(jì)的科學(xué)性、合理性 看抽樣方法與樣本量 看資料的來(lái)源、收集和利用 看數(shù)據(jù)資料的分析和解說(shuō) 看論文撰寫(xiě)的水平,科學(xué)研究設(shè)計(jì)的分類(lèi),科學(xué)分類(lèi) 觀(guān)察性研究 實(shí)驗(yàn)性研究 醫(yī)學(xué)分類(lèi) 實(shí)驗(yàn)研究(experimental study) 試驗(yàn)研究(trial) 調(diào)查研究(survey),醫(yī)學(xué)科研設(shè)計(jì)的一般原則,明確研究目的和研究總體 確定和選擇正確的研究方法 統(tǒng)計(jì)學(xué)方法 流行病學(xué)方法 合理地選擇研究對(duì)象 資料收集的質(zhì)量是關(guān)鍵 堅(jiān)持代表性、可靠性、可比性和顯著性的原則 可行性研究 設(shè)計(jì)一經(jīng)確定，必須嚴(yán)格執(zhí)行，中途不得任意改動(dòng),研究設(shè)計(jì)的內(nèi)容與步驟,研究選題 文獻(xiàn)綜述 研究設(shè)計(jì)書(shū) 1.題目; 2.立題依據(jù)和意義; 3.研究目的; 4.研究?jī)?nèi)容和方法: 研究對(duì)象、研究變量、資料收集、數(shù)據(jù)處理與分析; 5.質(zhì)量控制; 6.研究進(jìn)度; 7.經(jīng)費(fèi)預(yù)算; 8.本研究具備的條件及存在的問(wèn)題; 9.預(yù)期結(jié)果; 10.參考文獻(xiàn) 可行性論證,抽樣的概念和原理,概念 總體 樣本 樣本單位 原理 認(rèn)識(shí)論基礎(chǔ)上的誤差理論 概率論和大數(shù)法則,抽樣設(shè)計(jì),概率抽樣 SIMPLE RANDOM SAMPLING 單純抽樣 SYSTYMATIC RANDOM SAMPLING 系統(tǒng)抽樣 STRATIFIED SAMPLING 分層抽樣 CLUSTER SAMPLING 整群抽樣 MULTIPLE STAGE SAMPLING 多階段抽樣,抽樣設(shè)計(jì),非概率抽樣 HAPHAZARD SAMPLING 偶然樣本 QUOTA SAMPLING 定額樣本 EXPERT SAMPLING 專(zhuān)家樣本 PURPOSIVE SAMPLING 目的樣本,*概率樣本推論總體示意圖*,推論總體 INFERENCE POPULATION 全國(guó)15-59歲婦女,目標(biāo)總體 TARGET POPULATION 1982年6月底時(shí)全國(guó)15-59歲婦女,范圍總體 FRAME POPULATION 1982年6月底時(shí)除外臺(tái)灣、西藏15-59歲婦女,調(diào)查總體 SURVEY POPULATION 范圍總體中除外住院、出國(guó)和在押的,樣本 SAMPLY,經(jīng)驗(yàn)判斷推論,經(jīng)驗(yàn)判斷推論,經(jīng)驗(yàn)判斷推論,統(tǒng)計(jì)推論,樣本含量的估計(jì),影響樣本含量大小的因素 總體中個(gè)體間變異的大小 第一類(lèi)誤差 第二類(lèi)誤差 分析的分組多少 資金的多少 樣本含量大小的估計(jì) 因研究設(shè)計(jì)而異,資料的來(lái)源,經(jīng)常性資料 醫(yī)療衛(wèi)生日常工作記錄和報(bào)告卡片 收集和使用這類(lèi)資料時(shí)要特別注意其完整性與正確性 醫(yī)院資料的缺點(diǎn)與局限性 醫(yī)院的資料不代表全人口的資料 每個(gè)醫(yī)院的資料都可能帶有選擇性 收集不同時(shí)期的醫(yī)院資料時(shí)，要注意由于時(shí)間不同對(duì)資料的質(zhì)量所帶來(lái)的影響 統(tǒng)計(jì)報(bào)表 自行設(shè)計(jì)報(bào)表時(shí)，應(yīng)規(guī)定填報(bào)方法，并做到內(nèi)容有的放矢，切實(shí)可行，不可過(guò)繁，否則增加填報(bào)負(fù)擔(dān)，反致不能順利上報(bào)或報(bào)而無(wú)用,資料的來(lái)源,一時(shí)性資料 為了某個(gè)研究目的，進(jìn)行專(zhuān)門(mén)的調(diào)查設(shè)計(jì)，圍繞研究目的收集所必需的資料與信息，即流行病學(xué)專(zhuān)題調(diào)查研究 優(yōu)點(diǎn) 由于是進(jìn)行專(zhuān)門(mén)的研究設(shè)計(jì)，故收集的資料比較完整，可靠性較強(qiáng) 診斷標(biāo)準(zhǔn)和方法一致 能夠進(jìn)行比較深入細(xì)致的調(diào)查 由于目的明確，故只要選擇合適的研究方法都能得出比較有價(jià)值的科學(xué)結(jié)論 缺點(diǎn) 一時(shí)性調(diào)查無(wú)法進(jìn)行動(dòng)態(tài)分析和了解發(fā)生、發(fā)展規(guī)律 由于是專(zhuān)題調(diào)查，故調(diào)查面比較窄，調(diào)查效率不是很高 研究設(shè)計(jì)比較復(fù)雜，且耗費(fèi)一定的人力、物力和財(cái)力,資料的收集,經(jīng)常性資料的收集 主要是通過(guò)原始資科的登記和統(tǒng)計(jì)報(bào)告來(lái)完成的。在建立登記報(bào)告系統(tǒng)時(shí)應(yīng)明確以下幾個(gè)方面的問(wèn)題 登記報(bào)告的內(nèi)容 登記報(bào)告的單位和人員 登記報(bào)告的工具 登記報(bào)告的方法 資料的檢查 資料的儲(chǔ)存,資料的收集,一時(shí)性資料的收集 流行病學(xué)調(diào)查 調(diào)查的方式 調(diào)查的內(nèi)容 調(diào)查表的設(shè)計(jì) ,*不同調(diào)查方式的比較*,(4) 自我管理式調(diào)查 (self-administrated questionnaire),調(diào)查表的設(shè)計(jì),基本原則 根據(jù)調(diào)查目的和最后報(bào)告中需要的結(jié)果，考慮調(diào)查表中應(yīng)包括哪些信息。根據(jù)所需信息來(lái)設(shè)計(jì)調(diào)查問(wèn)題。 盡可能使用標(biāo)準(zhǔn)問(wèn)題 與有關(guān)專(zhuān)家取得共識(shí) 調(diào)查表的預(yù)試驗(yàn) 注意尊重被調(diào)查人的尊嚴(yán)和隱私,調(diào)查表的設(shè)計(jì),調(diào)查問(wèn)題編寫(xiě)的一般原則 問(wèn)題應(yīng)盡可能說(shuō)清楚及有針對(duì)性 避免一箭雙雕的提問(wèn)，即雙重問(wèn)題，一個(gè)問(wèn)句只問(wèn)一個(gè)問(wèn)題，以防應(yīng)答者難以回答“您抽煙喝酒嗎？” 避免提問(wèn)中的誘導(dǎo)性與強(qiáng)制性，即問(wèn)話(huà)內(nèi)容有明顯導(dǎo)向回答的作用，如“計(jì)劃生育是我國(guó)的基本國(guó)策，您贊成還是反對(duì)？” 問(wèn)題要適合所有應(yīng)答者，如問(wèn)：您妻子多大年齡，只限用于已婚對(duì)象，而其他應(yīng)答者則不行，故需先確定婚否，再確定回答哪些問(wèn)題 問(wèn)題不宜過(guò)長(zhǎng)或包括過(guò)多的知識(shí),調(diào)查表的設(shè)計(jì),調(diào)查問(wèn)題編寫(xiě)的一般原則 敏感問(wèn)題的安排可采用：(1) 對(duì)象轉(zhuǎn)移法：對(duì)第三者插足，有人認(rèn)為無(wú)所謂，有人認(rèn)為不道德，您如何看？(2) 假定法：假如我國(guó)人口政策不限制生育，您希望有幾個(gè)孩子？ 問(wèn)題的答案設(shè)置 應(yīng)全面，但不應(yīng)太多 選擇答案要相互獨(dú)立，不交叉 答案不應(yīng)構(gòu)成雙重否定 盡量與標(biāo)準(zhǔn)一致,調(diào)查表的設(shè)計(jì),編寫(xiě)順序 開(kāi)場(chǎng)問(wèn)題：應(yīng)是應(yīng)答者最易接受且有興趣的問(wèn)題 邏輯順序應(yīng)合理 時(shí)間上：先問(wèn)過(guò)去，再問(wèn)現(xiàn)在、將來(lái) 問(wèn)題上：一般性問(wèn)題在前，特殊性問(wèn)題在后 難易上：易答題在前，難答題在后 生疏上：熟悉問(wèn)題在前，生疏問(wèn)題在后 敏感問(wèn)題的位置：敏感問(wèn)題一般應(yīng)放在偏靠后面的位置，因?yàn)檫@類(lèi)問(wèn)題的拒答率較高，以防影響其他問(wèn)題的應(yīng)答,資料的利用,真實(shí)性評(píng)價(jià) 靈敏度(真陽(yáng)性率) = A/(A+B) 100% 特異度(真陰性率) = D/(C+D) 100% 假陽(yáng)性率(誤診率) = C/(C+D) 100% 假陰性率(漏診率) = B/(A+B) 100%,資料的利用,可靠性評(píng)價(jià) 調(diào)查員引起的偏性：來(lái)源、選擇、培訓(xùn)、評(píng)價(jià) 被調(diào)查者引起的偏性：來(lái)源、文化程度 偏性：禮貌偏性、迎合偏性、社會(huì)期望偏性 調(diào)查環(huán)境導(dǎo)致的偏性 調(diào)查內(nèi)容引起的偏性,調(diào)查員的培訓(xùn),清單1：調(diào)查需要知道的信息 (1) 問(wèn)題：調(diào)查目的、意義 (2) 總體：調(diào)查對(duì)象及范圍 (3) 主持者 (4) 現(xiàn)場(chǎng)調(diào)查基本知識(shí) (5) 抽樣 (6) 標(biāo)準(zhǔn)化：詢(xún)問(wèn)、記錄、程序 (7) 偏性及其控制 (8) 調(diào)查程序 (9) 要求、紀(jì)律 (10) 待遇,調(diào)查員的培訓(xùn),清單2：調(diào)查員的態(tài)度培訓(xùn) (1) 自身工作的重要性 (2) 執(zhí)行調(diào)查規(guī)范的意義 (3) 調(diào)查工作的態(tài)度 (4) 誠(chéng)懇的為應(yīng)答者保密、承諾,調(diào)查員的培訓(xùn),清單3：調(diào)查技術(shù)培訓(xùn) (1) 地圖的使用及最佳路線(xiàn)的設(shè)計(jì) (2) 確定應(yīng)答者的技巧 (3) 掌握問(wèn)卷中的單位、尺度 (4) 如何進(jìn)行客觀(guān)的記錄 (5) 語(yǔ)言、形象訓(xùn)練 (6) 試調(diào)查,*調(diào)查實(shí)施中相互制約的四個(gè)因素*,調(diào)查情況 時(shí)間 地點(diǎn) 第三者參與 社區(qū)態(tài)度,調(diào)查員 社會(huì)特征 調(diào)查技術(shù) 主觀(guān)能動(dòng)性 工作責(zé)任心,應(yīng)答者 社會(huì)特征 回答能力 回答意愿,研究?jī)?nèi)容 政治敏感性 難度 是否有興趣,質(zhì)量控制方法,研究對(duì)象的選擇過(guò)程 資料收集過(guò)程 資料整理階段 資料分析與總結(jié)階段,流行病學(xué)研究方案對(duì)照檢查提綱,一、研究背景 是否已全面復(fù)習(xí)了有關(guān)的文獻(xiàn)？ 國(guó)外文獻(xiàn)？ 國(guó)內(nèi)文獻(xiàn)？ 最近發(fā)表的主要的綜述性文獻(xiàn)？ 是否對(duì)以往有關(guān)的研究結(jié)果做了評(píng)價(jià)？ 相關(guān)流行病學(xué)研究工作 與流行病學(xué)研究有關(guān)的研究工作，如基礎(chǔ)研究、動(dòng)物實(shí)驗(yàn)等,流行病學(xué)研究方案對(duì)照檢查提綱,一、研究背景 基于已了解的背景，需要在哪些方面做進(jìn)一步的研究？還需要獲取哪些新知識(shí)？ 本研究是否與問(wèn)題3所提出的研究任務(wù)相吻合？本研究能否對(duì)已有的研究作重要的補(bǔ)充、充實(shí)或驗(yàn)證？ 本研究的目的和意義是什么？本研究將使哪些人和哪些學(xué)科領(lǐng)域受益？社會(huì)、經(jīng)濟(jì)效益如何？,流行病學(xué)研究方案對(duì)照檢查提綱,二、研究目的 該研究的具體目的是什么？是探索還是分析性研究？ 該研究的主要假設(shè)是什么？是否很簡(jiǎn)練而明確地將假設(shè)予以表達(dá)？ 是否還想研究、分析假設(shè)之外更多的一些問(wèn)題？具體包括哪些？,流行病學(xué)研究方案對(duì)照檢查提綱,三、研究設(shè)計(jì) 該研究的方法是否能夠檢驗(yàn)所提的假設(shè)？所選用的具體方法是否對(duì)本研究最為合適？是否需要其他方法？可否證明所選用方法的正確性？ 所需的研究對(duì)象數(shù)是否有把握獲得？ 如果可以使用盲法進(jìn)行研究，是否已經(jīng)采用？ 統(tǒng)計(jì)分析的方法是如何考慮的，會(huì)不會(huì)在分析階段還需要其他方法？,流行病學(xué)研究方案對(duì)照檢查提綱,三、研究設(shè)計(jì) 調(diào)查表格與試驗(yàn)儀器以及試劑、藥品是否都已齊備？有無(wú)在實(shí)施過(guò)程更換的可能性？ 研究現(xiàn)場(chǎng)的條件是否了解？與合作者是否已達(dá)成了協(xié)議？合作內(nèi)容是否均作了安排？ 物質(zhì)的、經(jīng)濟(jì)的、技術(shù)的、行政的等各方面的申請(qǐng)或安排，是否可以得到有關(guān)部門(mén)的批準(zhǔn)？ 所需經(jīng)費(fèi)、設(shè)備和人力是否已經(jīng)精確地估算？,流行病學(xué)研究方案對(duì)照檢查提綱,四、研究對(duì)象的選擇 （研究對(duì)象：病人，非病人，暴露于研究因素者，未暴露于研究因素者） 對(duì)所有這些對(duì)象，定義是否均已明確？ 對(duì)病例來(lái)說(shuō)，排除該病和確定該病的標(biāo)準(zhǔn)是否很明確、具體？使用的是新發(fā)病例還是現(xiàn)患病例？是在規(guī)定地區(qū)內(nèi)選擇的，還是臨時(shí)由其他地區(qū)選擇的？可否獲得足夠的樣本數(shù)？具體措施是什么？ 若為病人對(duì)照，要明確是來(lái)自醫(yī)院還是來(lái)自社區(qū)。一個(gè)病例選配幾個(gè)對(duì)照？匹配的變量、數(shù)目和方法是否明確、恰當(dāng)？ 其他研究類(lèi)型的研究對(duì)象可模仿上述例子予以對(duì)照核查,流行病學(xué)研究方案對(duì)照檢查提綱,五、研究的準(zhǔn)備與實(shí)施 要不要進(jìn)行預(yù)試驗(yàn)？ 調(diào)查表是否已經(jīng)準(zhǔn)備好？計(jì)劃調(diào)查和測(cè)定的項(xiàng)目是否均已列入？不必要的項(xiàng)目是否都已刪掉？是否還需要其他表格？ 調(diào)查表是由研究對(duì)象本人回答還是由調(diào)查員去調(diào)查？調(diào)查員是否已經(jīng)經(jīng)過(guò)良好的培訓(xùn)？ 是否需要自醫(yī)院的病案或其他信息來(lái)源摘錄信息？是否需要用其他特殊表格來(lái)記錄體檢或?qū)嶒?yàn)室檢查的結(jié)果？ 能夠評(píng)價(jià)所用各種研究方法或工具的真實(shí)性與可靠性么？,流行病學(xué)研究方案對(duì)照檢查提綱,五、研究的準(zhǔn)備與實(shí)施 可用什么方法來(lái)提高和促進(jìn)被調(diào)查者回憶的精確性與完整性？ 所獲得的信息是否足以進(jìn)行分析比較，例如病例與對(duì)照之間某些方面較細(xì)致的比較？ 是否收集了關(guān)于潛在的混雜因素的信息？ 何人負(fù)責(zé)收集、保存資料和控制資料的質(zhì)量？何人負(fù)責(zé)監(jiān)督調(diào)查員和其他工作人員的工作？ 是否編寫(xiě)了供調(diào)查員、信息摘抄員等人使用的工作手冊(cè)？是否對(duì)其中有關(guān)事項(xiàng)都做了明確的規(guī)定？如何能使各有關(guān)工作人員均能準(zhǔn)確地按既定的工作程序操作？,流行病學(xué)研究方案對(duì)照檢查提綱,六、資料整理與分析 資料總的處理分析方案是什么？對(duì)要研究的變量、指標(biāo)是否已明確？ 如果擬分析劑量反應(yīng)關(guān)系，是否對(duì)資料已做了相應(yīng)的準(zhǔn)備？ 如何在分析時(shí)檢驗(yàn)和排除某些因素可能帶來(lái)的偏倚？ 如何評(píng)價(jià)相關(guān)因素之間的交互作用？ 若作分層分析，在資料整理分析時(shí)的分層是否和設(shè)計(jì)時(shí)一致？ 如何評(píng)價(jià)無(wú)應(yīng)答者對(duì)研究結(jié)果的影響？有否搜集這方面的資料？ 資料的分析可否評(píng)價(jià)設(shè)計(jì)時(shí)的假說(shuō)，達(dá)到預(yù)期的研究目的？,資料的分析,目的和原則 目的 綜合歸納、條理化，將調(diào)查結(jié)果形象、直觀(guān)、客觀(guān)地反映出來(lái) 通過(guò)資料分析尋找和發(fā)現(xiàn)事物的規(guī)律和特點(diǎn)，從而得出科學(xué)的結(jié)論 原則 按原設(shè)計(jì)進(jìn)行資料分析與處理 用恰當(dāng)?shù)刂笜?biāo)回答科研假設(shè) 為控制偏性可以進(jìn)行深入的分析,資料的分析,分析的一般步驟 描述性分析 數(shù)據(jù)的集中、離散趨勢(shì) 調(diào)查的人口學(xué)特征描述 數(shù)據(jù)的可靠性分析,資料的分析,分析的一般步驟 分析性分析 疾病的測(cè)量率 分子：內(nèi)、外部特征控制 分母：范圍總體明確 標(biāo)化率,資料的分析,分析的一般步驟 分析性分析 因素分析 相關(guān)分析 危險(xiǎn)度評(píng)價(jià) 劑量反應(yīng)關(guān)系 多因素分析 病因分析,非統(tǒng)計(jì)學(xué)相關(guān),統(tǒng)計(jì)學(xué)相關(guān),非因果相關(guān),因果相關(guān),間接相關(guān),直接相關(guān),充分致病因子,必要致病因子,促進(jìn)因子,資料的分析,分析的一般步驟 準(zhǔn)確性分析 信度分析 檢驗(yàn)假說(shuō)顯著性檢驗(yàn) 信度區(qū)間置信區(qū)間 效度分析：偏性估計(jì)與分析 選擇偏性 信息偏性 混雜偏性,資料的分析,分析的一般步驟 結(jié)果解說(shuō) 生理意義 臨床意義 統(tǒng)計(jì)學(xué)意義 公共衛(wèi)生學(xué)意義,醫(yī)學(xué)科研成果的交流,概