如何評價一個科研項目.ppt

如何評價一個科研項目,李立明,如何評價一個科研項目,看研究設(shè)計的科學(xué)性、合理性 看抽樣方法與樣本量 看資料的來源、收集和利用 看數(shù)據(jù)資料的分析和解說 看論文撰寫的水平,科學(xué)研究設(shè)計的分類,科學(xué)分類 觀察性研究 實驗性研究 醫(yī)學(xué)分類 實驗研究(experimental study) 試驗研究(trial) 調(diào)查研究(survey),醫(yī)學(xué)科研設(shè)計的一般原則,明確研究目的和研究總體 確定和選擇正確的研究方法 統(tǒng)計學(xué)方法 流行病學(xué)方法 合理地選擇研究對象 資料收集的質(zhì)量是關(guān)鍵 堅持代表性、可靠性、可比性和顯著性的原則 可行性研究 設(shè)計一經(jīng)確定，必須嚴格執(zhí)行，中途不得任意改動,研究設(shè)計的內(nèi)容與步驟,研究選題 文獻綜述 研究設(shè)計書 1.題目; 2.立題依據(jù)和意義; 3.研究目的; 4.研究內(nèi)容和方法: 研究對象、研究變量、資料收集、數(shù)據(jù)處理與分析; 5.質(zhì)量控制; 6.研究進度; 7.經(jīng)費預(yù)算; 8.本研究具備的條件及存在的問題; 9.預(yù)期結(jié)果; 10.參考文獻 可行性論證,抽樣的概念和原理,概念 總體 樣本 樣本單位 原理 認識論基礎(chǔ)上的誤差理論 概率論和大數(shù)法則,抽樣設(shè)計,概率抽樣 SIMPLE RANDOM SAMPLING 單純抽樣 SYSTYMATIC RANDOM SAMPLING 系統(tǒng)抽樣 STRATIFIED SAMPLING 分層抽樣 CLUSTER SAMPLING 整群抽樣 MULTIPLE STAGE SAMPLING 多階段抽樣,抽樣設(shè)計,非概率抽樣 HAPHAZARD SAMPLING 偶然樣本 QUOTA SAMPLING 定額樣本 EXPERT SAMPLING 專家樣本 PURPOSIVE SAMPLING 目的樣本,*概率樣本推論總體示意圖*,推論總體 INFERENCE POPULATION 全國15-59歲婦女,目標總體 TARGET POPULATION 1982年6月底時全國15-59歲婦女,范圍總體 FRAME POPULATION 1982年6月底時除外臺灣、西藏15-59歲婦女,調(diào)查總體 SURVEY POPULATION 范圍總體中除外住院、出國和在押的,樣本 SAMPLY,經(jīng)驗判斷推論,經(jīng)驗判斷推論,經(jīng)驗判斷推論,統(tǒng)計推論,樣本含量的估計,影響樣本含量大小的因素 總體中個體間變異的大小 第一類誤差 第二類誤差 分析的分組多少 資金的多少 樣本含量大小的估計 因研究設(shè)計而異,資料的來源,經(jīng)常性資料 醫(yī)療衛(wèi)生日常工作記錄和報告卡片 收集和使用這類資料時要特別注意其完整性與正確性 醫(yī)院資料的缺點與局限性 醫(yī)院的資料不代表全人口的資料 每個醫(yī)院的資料都可能帶有選擇性 收集不同時期的醫(yī)院資料時，要注意由于時間不同對資料的質(zhì)量所帶來的影響 統(tǒng)計報表 自行設(shè)計報表時，應(yīng)規(guī)定填報方法，并做到內(nèi)容有的放矢，切實可行，不可過繁，否則增加填報負擔(dān)，反致不能順利上報或報而無用,資料的來源,一時性資料 為了某個研究目的，進行專門的調(diào)查設(shè)計，圍繞研究目的收集所必需的資料與信息，即流行病學(xué)專題調(diào)查研究 優(yōu)點 由于是進行專門的研究設(shè)計，故收集的資料比較完整，可靠性較強 診斷標準和方法一致 能夠進行比較深入細致的調(diào)查 由于目的明確，故只要選擇合適的研究方法都能得出比較有價值的科學(xué)結(jié)論 缺點 一時性調(diào)查無法進行動態(tài)分析和了解發(fā)生、發(fā)展規(guī)律 由于是專題調(diào)查，故調(diào)查面比較窄，調(diào)查效率不是很高 研究設(shè)計比較復(fù)雜，且耗費一定的人力、物力和財力,資料的收集,經(jīng)常性資料的收集 主要是通過原始資科的登記和統(tǒng)計報告來完成的。在建立登記報告系統(tǒng)時應(yīng)明確以下幾個方面的問題 登記報告的內(nèi)容 登記報告的單位和人員 登記報告的工具 登記報告的方法 資料的檢查 資料的儲存,資料的收集,一時性資料的收集 流行病學(xué)調(diào)查 調(diào)查的方式 調(diào)查的內(nèi)容 調(diào)查表的設(shè)計 ,*不同調(diào)查方式的比較*,(4) 自我管理式調(diào)查 (self-administrated questionnaire),調(diào)查表的設(shè)計,基本原則 根據(jù)調(diào)查目的和最后報告中需要的結(jié)果，考慮調(diào)查表中應(yīng)包括哪些信息。根據(jù)所需信息來設(shè)計調(diào)查問題。 盡可能使用標準問題 與有關(guān)專家取得共識 調(diào)查表的預(yù)試驗 注意尊重被調(diào)查人的尊嚴和隱私,調(diào)查表的設(shè)計,調(diào)查問題編寫的一般原則 問題應(yīng)盡可能說清楚及有針對性 避免一箭雙雕的提問，即雙重問題，一個問句只問一個問題，以防應(yīng)答者難以回答“您抽煙喝酒嗎？” 避免提問中的誘導(dǎo)性與強制性，即問話內(nèi)容有明顯導(dǎo)向回答的作用，如“計劃生育是我國的基本國策，您贊成還是反對？” 問題要適合所有應(yīng)答者，如問：您妻子多大年齡，只限用于已婚對象，而其他應(yīng)答者則不行，故需先確定婚否，再確定回答哪些問題 問題不宜過長或包括過多的知識,調(diào)查表的設(shè)計,調(diào)查問題編寫的一般原則 敏感問題的安排可采用：(1) 對象轉(zhuǎn)移法：對第三者插足，有人認為無所謂，有人認為不道德，您如何看？(2) 假定法：假如我國人口政策不限制生育，您希望有幾個孩子？ 問題的答案設(shè)置 應(yīng)全面，但不應(yīng)太多 選擇答案要相互獨立，不交叉 答案不應(yīng)構(gòu)成雙重否定 盡量與標準一致,調(diào)查表的設(shè)計,編寫順序 開場問題：應(yīng)是應(yīng)答者最易接受且有興趣的問題 邏輯順序應(yīng)合理 時間上：先問過去，再問現(xiàn)在、將來 問題上：一般性問題在前，特殊性問題在后 難易上：易答題在前，難答題在后 生疏上：熟悉問題在前，生疏問題在后 敏感問題的位置：敏感問題一般應(yīng)放在偏靠后面的位置，因為這類問題的拒答率較高，以防影響其他問題的應(yīng)答,資料的利用,真實性評價 靈敏度(真陽性率) = A/(A+B) 100% 特異度(真陰性率) = D/(C+D) 100% 假陽性率(誤診率) = C/(C+D) 100% 假陰性率(漏診率) = B/(A+B) 100%,資料的利用,可靠性評價 調(diào)查員引起的偏性：來源、選擇、培訓(xùn)、評價 被調(diào)查者引起的偏性：來源、文化程度 偏性：禮貌偏性、迎合偏性、社會期望偏性 調(diào)查環(huán)境導(dǎo)致的偏性 調(diào)查內(nèi)容引起的偏性,調(diào)查員的培訓(xùn),清單1：調(diào)查需要知道的信息 (1) 問題：調(diào)查目的、意義 (2) 總體：調(diào)查對象及范圍 (3) 主持者 (4) 現(xiàn)場調(diào)查基本知識 (5) 抽樣 (6) 標準化：詢問、記錄、程序 (7) 偏性及其控制 (8) 調(diào)查程序 (9) 要求、紀律 (10) 待遇,調(diào)查員的培訓(xùn),清單2：調(diào)查員的態(tài)度培訓(xùn) (1) 自身工作的重要性 (2) 執(zhí)行調(diào)查規(guī)范的意義 (3) 調(diào)查工作的態(tài)度 (4) 誠懇的為應(yīng)答者保密、承諾,調(diào)查員的培訓(xùn),清單3：調(diào)查技術(shù)培訓(xùn) (1) 地圖的使用及最佳路線的設(shè)計 (2) 確定應(yīng)答者的技巧 (3) 掌握問卷中的單位、尺度 (4) 如何進行客觀的記錄 (5) 語言、形象訓(xùn)練 (6) 試調(diào)查,*調(diào)查實施中相互制約的四個因素*,調(diào)查情況 時間 地點 第三者參與 社區(qū)態(tài)度,調(diào)查員 社會特征 調(diào)查技術(shù) 主觀能動性 工作責(zé)任心,應(yīng)答者 社會特征 回答能力 回答意愿,研究內(nèi)容 政治敏感性 難度 是否有興趣,質(zhì)量控制方法,研究對象的選擇過程 資料收集過程 資料整理階段 資料分析與總結(jié)階段,流行病學(xué)研究方案對照檢查提綱,一、研究背景 是否已全面復(fù)習(xí)了有關(guān)的文獻？ 國外文獻？ 國內(nèi)文獻？ 最近發(fā)表的主要的綜述性文獻？ 是否對以往有關(guān)的研究結(jié)果做了評價？ 相關(guān)流行病學(xué)研究工作 與流行病學(xué)研究有關(guān)的研究工作，如基礎(chǔ)研究、動物實驗等,流行病學(xué)研究方案對照檢查提綱,一、研究背景 基于已了解的背景，需要在哪些方面做進一步的研究？還需要獲取哪些新知識？ 本研究是否與問題3所提出的研究任務(wù)相吻合？本研究能否對已有的研究作重要的補充、充實或驗證？ 本研究的目的和意義是什么？本研究將使哪些人和哪些學(xué)科領(lǐng)域受益？社會、經(jīng)濟效益如何？,流行病學(xué)研究方案對照檢查提綱,二、研究目的 該研究的具體目的是什么？是探索還是分析性研究？ 該研究的主要假設(shè)是什么？是否很簡練而明確地將假設(shè)予以表達？ 是否還想研究、分析假設(shè)之外更多的一些問題？具體包括哪些？,流行病學(xué)研究方案對照檢查提綱,三、研究設(shè)計 該研究的方法是否能夠檢驗所提的假設(shè)？所選用的具體方法是否對本研究最為合適？是否需要其他方法？可否證明所選用方法的正確性？ 所需的研究對象數(shù)是否有把握獲得？ 如果可以使用盲法進行研究，是否已經(jīng)采用？ 統(tǒng)計分析的方法是如何考慮的，會不會在分析階段還需要其他方法？,流行病學(xué)研究方案對照檢查提綱,三、研究設(shè)計 調(diào)查表格與試驗儀器以及試劑、藥品是否都已齊備？有無在實施過程更換的可能性？ 研究現(xiàn)場的條件是否了解？與合作者是否已達成了協(xié)議？合作內(nèi)容是否均作了安排？ 物質(zhì)的、經(jīng)濟的、技術(shù)的、行政的等各方面的申請或安排，是否可以得到有關(guān)部門的批準？ 所需經(jīng)費、設(shè)備和人力是否已經(jīng)精確地估算？,流行病學(xué)研究方案對照檢查提綱,四、研究對象的選擇 （研究對象：病人，非病人，暴露于研究因素者，未暴露于研究因素者） 對所有這些對象，定義是否均已明確？ 對病例來說，排除該病和確定該病的標準是否很明確、具體？使用的是新發(fā)病例還是現(xiàn)患病例？是在規(guī)定地區(qū)內(nèi)選擇的，還是臨時由其他地區(qū)選擇的？可否獲得足夠的樣本數(shù)？具體措施是什么？ 若為病人對照，要明確是來自醫(yī)院還是來自社區(qū)。一個病例選配幾個對照？匹配的變量、數(shù)目和方法是否明確、恰當？ 其他研究類型的研究對象可模仿上述例子予以對照核查,流行病學(xué)研究方案對照檢查提綱,五、研究的準備與實施 要不要進行預(yù)試驗？ 調(diào)查表是否已經(jīng)準備好？計劃調(diào)查和測定的項目是否均已列入？不必要的項目是否都已刪掉？是否還需要其他表格？ 調(diào)查表是由研究對象本人回答還是由調(diào)查員去調(diào)查？調(diào)查員是否已經(jīng)經(jīng)過良好的培訓(xùn)？ 是否需要自醫(yī)院的病案或其他信息來源摘錄信息？是否需要用其他特殊表格來記錄體檢或?qū)嶒炇覚z查的結(jié)果？ 能夠評價所用各種研究方法或工具的真實性與可靠性么？,流行病學(xué)研究方案對照檢查提綱,五、研究的準備與實施 可用什么方法來提高和促進被調(diào)查者回憶的精確性與完整性？ 所獲得的信息是否足以進行分析比較，例如病例與對照之間某些方面較細致的比較？ 是否收集了關(guān)于潛在的混雜因素的信息？ 何人負責(zé)收集、保存資料和控制資料的質(zhì)量？何人負責(zé)監(jiān)督調(diào)查員和其他工作人員的工作？ 是否編寫了供調(diào)查員、信息摘抄員等人使用的工作手冊？是否對其中有關(guān)事項都做了明確的規(guī)定？如何能使各有關(guān)工作人員均能準確地按既定的工作程序操作？,流行病學(xué)研究方案對照檢查提綱,六、資料整理與分析 資料總的處理分析方案是什么？對要研究的變量、指標是否已明確？ 如果擬分析劑量反應(yīng)關(guān)系，是否對資料已做了相應(yīng)的準備？ 如何在分析時檢驗和排除某些因素可能帶來的偏倚？ 如何評價相關(guān)因素之間的交互作用？ 若作分層分析，在資料整理分析時的分層是否和設(shè)計時一致？ 如何評價無應(yīng)答者對研究結(jié)果的影響？有否搜集這方面的資料？ 資料的分析可否評價設(shè)計時的假說，達到預(yù)期的研究目的？,資料的分析,目的和原則 目的 綜合歸納、條理化，將調(diào)查結(jié)果形象、直觀、客觀地反映出來 通過資料分析尋找和發(fā)現(xiàn)事物的規(guī)律和特點，從而得出科學(xué)的結(jié)論 原則 按原設(shè)計進行資料分析與處理 用恰當?shù)刂笜嘶卮鹂蒲屑僭O(shè) 為控制偏性可以進行深入的分析,資料的分析,分析的一般步驟 描述性分析 數(shù)據(jù)的集中、離散趨勢 調(diào)查的人口學(xué)特征描述 數(shù)據(jù)的可靠性分析,資料的分析,分析的一般步驟 分析性分析 疾病的測量率 分子：內(nèi)、外部特征控制 分母：范圍總體明確 標化率,資料的分析,分析的一般步驟 分析性分析 因素分析 相關(guān)分析 危險度評價 劑量反應(yīng)關(guān)系 多因素分析 病因分析,非統(tǒng)計學(xué)相關(guān),統(tǒng)計學(xué)相關(guān),非因果相關(guān),因果相關(guān),間接相關(guān),直接相關(guān),充分致病因子,必要致病因子,促進因子,資料的分析,分析的一般步驟 準確性分析 信度分析 檢驗假說顯著性檢驗 信度區(qū)間置信區(qū)間 效度分析：偏性估計與分析 選擇偏性 信息偏性 混雜偏性,資料的分析,分析的一般步驟 結(jié)果解說 生理意義 臨床意義 統(tǒng)計學(xué)意義 公共衛(wèi)生學(xué)意義,醫(yī)學(xué)科研成果的交流,概