專家調(diào)查法解析課件

1、第五章 專家調(diào)查法第一節(jié) 同行評(píng)議法一、同行評(píng)議法的定義二、同行評(píng)議法的應(yīng)用領(lǐng)域三、同行評(píng)議法的受邀專家四、進(jìn)行同行評(píng)議法的注意事項(xiàng)五、同行評(píng)議法的不足第一節(jié) 同行評(píng)議法一、同行評(píng)議法的定義：同行評(píng)議法是定性評(píng)價(jià)方法的一種，是指為了給某項(xiàng)決策提供依據(jù)，針對(duì)涉及該決策的某項(xiàng)事物，組織從事該領(lǐng)域和相近領(lǐng)域工作的專家依據(jù)自己的專業(yè)修養(yǎng)來(lái)評(píng)定其學(xué)術(shù)水平或重要性的一種方法，也稱為專家評(píng)審法。 二、同行評(píng)議法的應(yīng)用領(lǐng)域研究工作的基金課題申請(qǐng)；學(xué)術(shù)成果的評(píng)價(jià)；學(xué)位與職稱的評(píng)定；學(xué)術(shù)論著的發(fā)表與出版；學(xué)術(shù)研究機(jī)構(gòu)的運(yùn)作；學(xué)術(shù)活動(dòng)的組織與運(yùn)籌。 第一節(jié) 同行評(píng)議法三、同行評(píng)議法的受邀專家1一般應(yīng)是和評(píng)價(jià)對(duì)象同屬

2、的三級(jí)學(xué)科之下的專家學(xué)者。2絕大多數(shù)應(yīng)是科研第一線的骨干，有較高學(xué)術(shù)造詣的專家。3為了盡可能地表現(xiàn)公平、公正，受邀專家應(yīng)該采用回避制度參加評(píng)議。4切忌某些全能專家參與跨多個(gè)一級(jí)學(xué)科的評(píng)議。 第一節(jié) 同行評(píng)議法五、同行評(píng)議法的不足1不容易徹底貫徹執(zhí)行回避原則在任何利益分配事物中，如果一個(gè)人既要參與分配，又要主持分配，那么，即使他主觀上力求做到公正公平，但在實(shí)際評(píng)議時(shí)還是會(huì)難擋私利的誘惑。 2非同行專家比重過(guò)大同行評(píng)議就是相同或相近專業(yè)的專家對(duì)評(píng)價(jià)對(duì)象的價(jià)值作出公允的判斷。 3在新的研究領(lǐng)域應(yīng)用專家評(píng)議會(huì)影響評(píng)議結(jié)果在一個(gè)剛剛開辟的領(lǐng)域，評(píng)議者的學(xué)識(shí)和經(jīng)驗(yàn)還不足以判斷對(duì)象的優(yōu)劣。 4難以避免“馬太

3、效應(yīng)”毫無(wú)疑問(wèn)，越是在學(xué)術(shù)界名氣大的人，本人便越有資格參與同行評(píng)議，而且越有資格推薦他人參與同行評(píng)議。 第一節(jié) 同行評(píng)議法四、進(jìn)行同行評(píng)議法的注意事項(xiàng)1建立有關(guān)專家研究專長(zhǎng)的數(shù)據(jù)庫(kù)一旦在某一領(lǐng)域應(yīng)用同行評(píng)議法進(jìn)行成果、學(xué)術(shù)活動(dòng)、職稱的評(píng)估，這種評(píng)價(jià)方法可能會(huì)被一直采用或者輔助其他的評(píng)價(jià)方法一起應(yīng)用。 2建立統(tǒng)一的量化指標(biāo)體系統(tǒng)一的量化指標(biāo)體系讓參與評(píng)估或評(píng)價(jià)的專家有章可依，避免了評(píng)價(jià)結(jié)果的隨意性。 3采用匿名或者部分匿名的方式進(jìn)行評(píng)議我國(guó)的專家評(píng)議法一般采取匿名制的評(píng)議方式，在實(shí)際的操作中分雙向匿名和單向匿名兩種。第一節(jié) 同行評(píng)議法五、同行評(píng)議法的不足1不容易徹底貫徹執(zhí)行回避原則在任何利益分配

4、事物中，如果一個(gè)人既要參與分配，又要主持分配，那么，即使他主觀上力求做到公正公平，但在實(shí)際評(píng)議時(shí)還是會(huì)難擋私利的誘惑。 2非同行專家比重過(guò)大同行評(píng)議就是相同或相近專業(yè)的專家對(duì)評(píng)價(jià)對(duì)象的價(jià)值作出公允的判斷。 3在新的研究領(lǐng)域應(yīng)用專家評(píng)議會(huì)影響評(píng)議結(jié)果在一個(gè)剛剛開辟的領(lǐng)域，評(píng)議者的學(xué)識(shí)和經(jīng)驗(yàn)還不足以判斷對(duì)象的優(yōu)劣。 4難以避免“馬太效應(yīng)”毫無(wú)疑問(wèn)，越是在學(xué)術(shù)界名氣大的人，本人便越有資格參與同行評(píng)議，而且越有資格推薦他人參與同行評(píng)議。 第二節(jié) 頭腦風(fēng)暴法一.頭腦風(fēng)暴法的概念及類型 腦風(fēng)暴法(Brainstorming)是借助專家的創(chuàng)造性思維來(lái)獲取信息的一種直觀預(yù)測(cè)方法。 一.頭腦風(fēng)暴法的類型 (一)

5、直接頭腦風(fēng)暴法 直接頭腦風(fēng)暴法是在專家群體決策的基礎(chǔ)上讓與會(huì)者敞開思想，盡可能激發(fā)創(chuàng)造性，產(chǎn)生盡可能多設(shè)想的方法。 (二)質(zhì)疑頭腦風(fēng)暴法質(zhì)疑頭腦風(fēng)暴法又叫破壞頭腦風(fēng)暴法。對(duì)在直接頭腦風(fēng)暴法中得到的解決問(wèn)題的方案和事件實(shí)現(xiàn)的條件，可以應(yīng)用質(zhì)疑頭腦風(fēng)暴法進(jìn)行更進(jìn)一步的辯論，逐一質(zhì)疑，分析其現(xiàn)實(shí)可行性，從而得到專家調(diào)查法的理想結(jié)果。 第二節(jié) 頭腦風(fēng)暴法二、直接頭腦風(fēng)暴法的組織原則 (一)會(huì)議前的準(zhǔn)備工作 1確定議題一個(gè)好的頭腦風(fēng)暴法從對(duì)問(wèn)題的準(zhǔn)確闡明開始。 2確定與會(huì)專家專家的選擇要與預(yù)測(cè)的對(duì)象相一致，通常由方法論專家(如信息分析與預(yù)測(cè)專家)、專業(yè)領(lǐng)域?qū)＜?、專業(yè)領(lǐng)域高級(jí)分析專家和具有較高推斷思維能力

6、的演繹專家共同組成。3。確定主持領(lǐng)導(dǎo)人員這些人員可以在會(huì)上引導(dǎo)與會(huì)專家迅速進(jìn)入自由討論的活潑氛圍，圍繞主題開展討論，激發(fā)創(chuàng)造性思維靈感。 4確定會(huì)議地點(diǎn)和環(huán)境氛圍準(zhǔn)備為了更好地讓與會(huì)專家進(jìn)行交流，會(huì)議舉行的場(chǎng)所也有嚴(yán)格的選擇。 第二節(jié) 頭腦風(fēng)暴法二、直接頭腦風(fēng)暴法的組織原則(二)會(huì)議中應(yīng)注意的問(wèn)題 1與會(huì)者自由暢談參加者可以從不同角度，不同層次，不同方位，大膽地展開想象，放松思想，讓思維自由馳騁，盡可能地標(biāo)新立異，與眾不同，提出獨(dú)創(chuàng)性的想法。 2發(fā)言直入主題與會(huì)專家發(fā)言要針對(duì)目標(biāo)，開門見山，不要客套，也不必做過(guò)多的解釋。 3會(huì)議精神與時(shí)間要求與會(huì)專家要集中注意力積極投入，不消極旁觀；不要私下議

7、論，以免影響他人的思考；與會(huì)專家之間相互尊重，平等相待，切忌相互褒貶等。 4會(huì)后的信息處理通過(guò)組織頭腦風(fēng)暴暢談會(huì)，往往能獲得大量與議題有關(guān)的設(shè)想。 第二節(jié) 頭腦風(fēng)暴法三、質(zhì)疑頭腦風(fēng)暴法 質(zhì)疑頭腦風(fēng)暴法應(yīng)遵守的原則與直接頭腦風(fēng)暴法一樣，只是禁止對(duì)已有的設(shè)想提出肯定意見，而鼓勵(lì)提出批評(píng)和新的可行設(shè)想。 第二節(jié) 頭腦風(fēng)暴法四、頭腦風(fēng)暴法的優(yōu)點(diǎn)和缺陷 (一)頭腦風(fēng)暴法的優(yōu)點(diǎn) 1頭腦風(fēng)暴法極易操作執(zhí)行，具有很強(qiáng)的實(shí)用性。2通過(guò)信息交流，有利于參與者捕捉瞬間的思路，激發(fā)創(chuàng)造性思維，產(chǎn)生富有創(chuàng)見性的思想“火花”。3通過(guò)頭腦風(fēng)暴會(huì)議，提高工作效率，能夠更快更高效解決問(wèn)題。 4通過(guò)頭腦風(fēng)暴會(huì)議，獲取的信息量大、

8、考慮的因素多，所提供的計(jì)劃、方案等也比較全面和廣泛。 (二)頭腦風(fēng)暴法的缺點(diǎn) 1選擇的專家人數(shù)少，可能缺乏代表性。2職位不高又有獨(dú)特見解的專家容易受“權(quán)威”、“會(huì)議氣氛”和“潮流”等因素的影響而不能真實(shí)地表達(dá)自己的意見。3通過(guò)會(huì)議發(fā)言表達(dá)專家見解，表達(dá)能力不強(qiáng)的專家不能很好地表達(dá)自 己的想法，這也會(huì)影響意見的收集。4由于是即興發(fā)言，因而不可避免地存在著邏輯不嚴(yán)密、意見不全面、 論證不充分等問(wèn)題。 第三節(jié) 特爾菲法概述第三節(jié) 特爾菲法概述阿波羅神：是使道德自律和靈魂純潔具體化的神，具有卓越的預(yù)測(cè)未來(lái)的能力。阿波羅神殿：眾神聚會(huì)占卜未來(lái)的地方，在希臘Delphi。Delphi：被認(rèn)為是已知世界的中

9、心，是天堂與大地相接的地方。是人類在地球上最接近神明的地方，能夠預(yù)卜未來(lái)的神諭之地。有人相信阿波羅的靈魂仍然居住在特爾斐，仍舊隨時(shí)能為困惑的人們解答問(wèn)題并且對(duì)事件的狀況提出建議。特爾斐法：通過(guò)卓越人物來(lái)洞察和預(yù)見未來(lái)【占卜算卦？】第三節(jié) 特爾菲法概述專家調(diào)查法信息分析的課題越來(lái)越多樣、復(fù)雜（特別是一些預(yù)測(cè)性課題，涉及的因素多，取決于多方面的條件和影響）向在該課題領(lǐng)域具有廣博而專深學(xué)識(shí)的專家求助。專家調(diào)查法：請(qǐng)根據(jù)個(gè)人的知識(shí)和經(jīng)驗(yàn)對(duì)某些問(wèn)題或未來(lái)情況作出評(píng)價(jià)和判斷。第三節(jié) 特爾菲法概述專家調(diào)查法的特點(diǎn)簡(jiǎn)便直觀，無(wú)需建立繁瑣的數(shù)學(xué)模型，能夠比較精確地反映出專家們的主觀判斷能力特別適合于在缺少情報(bào)資

10、料和歷史數(shù)據(jù)的情況下的預(yù)測(cè)用其他方法難以進(jìn)行的分析和預(yù)測(cè)第三節(jié) 特爾菲法概述初，20世紀(jì)50年代末期。美國(guó)政府，組織了一批專家，要求他們站在蘇軍戰(zhàn)略決策者的角度，最優(yōu)地選擇在未來(lái)大戰(zhàn)中將被轟炸的美國(guó)目標(biāo)，為美軍決策人員提供參考。軍事預(yù)測(cè)1964年，美國(guó)蘭德公司的赫爾默（Helmer）和戈登（Gordon）首次將特爾菲法應(yīng)用于科技預(yù)測(cè)中，并發(fā)表了長(zhǎng)遠(yuǎn)預(yù)測(cè)研究報(bào)告。科技預(yù)測(cè)1968年，美國(guó)海軍，48名專家，15年后的信息處理技術(shù)預(yù)測(cè)；1970年，日本科學(xué)技術(shù)廳， 4000名專家，預(yù)測(cè)2000年的科學(xué)技術(shù)；1973年，美國(guó)信息處理協(xié)會(huì)，57名專家，預(yù)測(cè)未來(lái)的國(guó)際數(shù)據(jù)通信；1980年，日本數(shù)據(jù)通信協(xié)會(huì)

11、，329名專家，預(yù)測(cè)數(shù)據(jù)庫(kù)網(wǎng)絡(luò)的發(fā)展趨勢(shì)等。20世紀(jì)80年代始，我國(guó)，在科技規(guī)劃、技術(shù)評(píng)估、技術(shù)經(jīng)濟(jì)論證等，廣泛應(yīng)用，取得良好效果。第三節(jié) 特爾菲法一、特爾菲法的應(yīng)用范圍 1.事件完成時(shí)間預(yù)測(cè)，即對(duì)未來(lái)事件實(shí)現(xiàn)的時(shí)間進(jìn)行概率估計(jì)；2.方案所占最佳比重預(yù)測(cè)，即對(duì)某一方案(技術(shù)、產(chǎn)品等)在總體方案(技術(shù)、產(chǎn)品等)中所占的最佳比重作出概率估計(jì)；3.方案預(yù)測(cè)及方案重要性評(píng)估，即對(duì)達(dá)到某一目標(biāo)的條件、途徑、手段進(jìn)行預(yù)測(cè)及對(duì)它們的相對(duì)重要程度作出估計(jì)；4.最優(yōu)方案預(yù)測(cè)性評(píng)估，即對(duì)方案、技術(shù)、產(chǎn)品等作出評(píng)價(jià)，或?qū)θ舾蓚溥x方案、技術(shù)、產(chǎn)品評(píng)價(jià)出相對(duì)名次，選出最優(yōu)者。 第三節(jié) 特爾菲法二、特爾菲法的特點(diǎn) 二、特

12、爾菲法的特點(diǎn) 1匿名性：2反饋性： 3統(tǒng)計(jì)性：第三節(jié) 特爾菲法二、特爾菲法的特點(diǎn)匿名性匿名發(fā)函調(diào)查，受邀專家之間互不見面，亦不聯(lián)系。專家們可以不受任何干擾的獨(dú)立的對(duì)調(diào)查表所提問(wèn)題發(fā)表自己的意見，不必作出解釋，甚至不必申述理由，而且有充分的時(shí)間思考和進(jìn)行調(diào)查研究、查閱資料。匿名性保證了專家意見的充分性和可靠性。 第三節(jié) 特爾菲法二、特爾菲法的特點(diǎn)反饋性組織者要對(duì)每一輪咨詢的結(jié)果進(jìn)行整理、分析、綜合，并在下一輪咨詢中匿名反饋給每個(gè)受邀專家，以便專家們根據(jù)新的調(diào)查表進(jìn)一步的發(fā)表意見。經(jīng)典的特爾菲法一般要經(jīng)過(guò)四輪咨詢。反饋是特爾菲法的核心。在每一輪反饋中，每個(gè)專家都可以參考別人的意見，冷靜地分析其是否

13、有道理，并在沒(méi)有任何壓力的情況下進(jìn)一步發(fā)表自己的意見。多次反饋保證了專家意見的充分性和最終結(jié)論的正確性、可靠性。第三節(jié) 特爾菲法二、特爾菲法的特點(diǎn)統(tǒng)計(jì)性對(duì)諸多專家的回答必須進(jìn)行統(tǒng)計(jì)學(xué)處理，以概率的形式出現(xiàn)，它既反映了專家意見的集中程度，又可反映專家意見的離散程度。 為了便于對(duì)應(yīng)答專家意見的統(tǒng)計(jì)處理，對(duì)調(diào)查表的設(shè)計(jì)中多采用表格化、符號(hào)化、數(shù)字化。有利于將一般定性問(wèn)題用定量化方法處理，并以定量結(jié)果表述。第三節(jié) 特爾菲法三、特爾菲法的實(shí)施步驟確定研究課題，制定實(shí)施計(jì)劃。 確定預(yù)測(cè)主題，選擇和組織應(yīng)答專家。 提出若干個(gè)問(wèn)題，并設(shè)計(jì)調(diào)查表。 組織答詢并實(shí)行多次反饋。對(duì)最后一輪調(diào)查的結(jié)果進(jìn)行必要的分析和數(shù)

14、據(jù)處理，并得出評(píng)價(jià)、預(yù)測(cè)結(jié)果或結(jié)論。第三節(jié) 特爾菲法三、特爾菲法的實(shí)施步驟第三節(jié) 特爾菲法三、特爾菲法的實(shí)施步驟 (一)組織準(zhǔn)備工作 1確定研究課題根據(jù)領(lǐng)導(dǎo)部門的要求或用戶的委托確定研究課題，制訂實(shí)施計(jì)劃。2確定受邀專家根據(jù)課題的性質(zhì)和內(nèi)容，確定預(yù)測(cè)主題，選擇和組織應(yīng)答專家。 3組織專家應(yīng)答根據(jù)課題的要求和調(diào)查的內(nèi)容、目的，提出若干個(gè)問(wèn)題，并設(shè)計(jì)調(diào)查表，組織答詢并實(shí)行多次反饋。4作出預(yù)測(cè)結(jié)論對(duì)最后一輪調(diào)查的結(jié)果進(jìn)行必要的分析和數(shù)據(jù)處理，并得出評(píng)價(jià)、預(yù)測(cè)結(jié)果或結(jié)論。 第三節(jié) 特爾菲法三、特爾菲法的實(shí)施步驟 (二)受邀專家的選擇選擇 1專家的知識(shí)結(jié)構(gòu)要求在知識(shí)結(jié)構(gòu)上，組織者不僅要選擇技術(shù)專家，而且

15、還應(yīng)該選擇管理專家；不僅選擇研究人員，還要有實(shí)際工作者。2專家的樣本結(jié)構(gòu)要求特爾菲法所選專家應(yīng)具有一定的代表性，一般可以按照本領(lǐng)域?qū)＜?、相關(guān)領(lǐng)域?qū)＜?、管理專家各占一定的比例?lái)選擇。3專家的人數(shù)要求特爾菲法選擇專家的人數(shù)依課題性質(zhì)和規(guī)模而定，一般的人數(shù)范圍是1550人。 4專家完成任務(wù)的時(shí)間要求為了保證課題的順利完成和評(píng)價(jià)或預(yù)測(cè)結(jié)果的準(zhǔn)確性，所邀請(qǐng)的專家應(yīng)有回答問(wèn)卷調(diào)查的時(shí)間和責(zé)任感，否則無(wú)法保證應(yīng)答的高回收率。 第三節(jié) 特爾菲法三、特爾菲法的實(shí)施步驟(三)調(diào)查表的設(shè)計(jì) 1事件實(shí)現(xiàn)時(shí)間調(diào)查表對(duì)某事件將來(lái)可能實(shí)現(xiàn)的時(shí)間進(jìn)行預(yù)測(cè)，是特爾菲法的重要用途之一。 2目標(biāo)一手段調(diào)查表除了對(duì)未來(lái)事件實(shí)現(xiàn)時(shí)間的

16、預(yù)測(cè)，其他三種類型的特爾菲法預(yù)測(cè)課題在進(jìn)行調(diào)查的首輪都需要設(shè)計(jì)目標(biāo)一手段調(diào)查表。 首先組織者應(yīng)根據(jù)研究課題的內(nèi)容和要求設(shè)計(jì)一個(gè)完全開放的調(diào)查表發(fā)給應(yīng)答專家，表格中只給出課題的研究目的即總目標(biāo)。 這輪收到的結(jié)果可能五花八門，專家意見較分散。組織者在回收專家意見后，稍加歸納再反饋給專家們，給他們修改或者確定自己意見的機(jī)會(huì)。 我們可以遵循上面的原則輔以表格進(jìn)行調(diào)查反饋收集分析獲取進(jìn)一步的意見，取得子目標(biāo)一手段的預(yù)測(cè)結(jié)果。 第三節(jié) 特爾菲法三、特爾菲法的實(shí)施步驟(三)調(diào)查表的設(shè)計(jì)3技術(shù)(方案、產(chǎn)品)評(píng)價(jià)調(diào)查表對(duì)若干方案、技術(shù)或者產(chǎn)品評(píng)出相對(duì)名次、選出最優(yōu)者也是特爾菲法的重要應(yīng)用。 調(diào)查表設(shè)計(jì)：目標(biāo)途徑

17、調(diào)查表組織者回收專家意見稍加歸納再反饋給專家實(shí)現(xiàn)總目標(biāo)所初步確定的子目標(biāo)為達(dá)到這些子目標(biāo)所應(yīng)采取的措施調(diào)查表設(shè)計(jì)：目標(biāo)途徑調(diào)查表經(jīng)過(guò)幾輪反饋、專家意見比較一致的情況下再設(shè)計(jì)新的調(diào)查表，請(qǐng)專家們對(duì)所確定的途徑、措施在達(dá)到總目標(biāo)和子目標(biāo)過(guò)程中的地位打分，以便確定它們的相對(duì)重要性，打分所用的分制應(yīng)在調(diào)查表中規(guī)定。二、實(shí)施3 調(diào)查表設(shè)計(jì)：事件實(shí)現(xiàn)時(shí)間調(diào)查表預(yù)測(cè)問(wèn)題 事件實(shí)現(xiàn)時(shí)間（某一時(shí)間實(shí)現(xiàn)該事件的概率估計(jì)） 10%概率 50%概率 90%概率 實(shí)現(xiàn)某一事件 達(dá)到某一水平解決某個(gè)問(wèn)題二、實(shí)施3 調(diào)查表設(shè)計(jì)：事件實(shí)現(xiàn)時(shí)間調(diào)查表第一輪調(diào)查表詳細(xì)介紹該課題的內(nèi)容、背景和有關(guān)材料請(qǐng)專家們就事件可能的實(shí)現(xiàn)時(shí)間發(fā)

18、表自己的意見。回收后，將專家意見稍加歸納、處理再反饋給專家、請(qǐng)他們進(jìn)一步發(fā)表意見。如此反饋多次、最后將專家意見進(jìn)行數(shù)據(jù)處理，即可得到預(yù)測(cè)結(jié)果。3 調(diào)查表設(shè)計(jì)：事件實(shí)現(xiàn)時(shí)間調(diào)查表部分反饋，利于提高預(yù)測(cè)結(jié)果的準(zhǔn)確性不將專家意見中的極端意見進(jìn)行反饋，不反饋專家意見的集中程度，只反饋專家意見分歧程度。 在事件實(shí)現(xiàn)時(shí)間的預(yù)測(cè)課題中，往往要求預(yù)測(cè)結(jié)果以不同的概率估計(jì)的形式出現(xiàn)，如10%，50%和90%概率或20%，50%，80%概率。二、實(shí)施3 調(diào)查表設(shè)計(jì)：要求說(shuō)明的調(diào)查表對(duì)于某些課題，在運(yùn)用特爾菲法設(shè)計(jì)的調(diào)查表中，組織者除了要求專家們就所提問(wèn)題發(fā)表的意見外，還要求做出一定的說(shuō)明，這樣有利于研究課題的更好

19、解決。要求做出一定說(shuō)明的調(diào)查表一般不是第一輪調(diào)查表，第一輪調(diào)查表往往是“空白的”、開放的，只要求專家們就課題要求自由、獨(dú)立地發(fā)表自己的意見，而不要求做出說(shuō) 明。在經(jīng)過(guò)兩輪或三輪的調(diào)查后，專家們的意見已趨于一致，在此基礎(chǔ)上可以設(shè)計(jì)新一輪調(diào)查表，請(qǐng)專家們進(jìn)一步發(fā)表意見并做出一定的說(shuō)明。二、實(shí)施3 調(diào)查表設(shè)計(jì)：要求說(shuō)明的調(diào)查表二、實(shí)施3 調(diào)查表設(shè)計(jì)：評(píng)價(jià)調(diào)查表對(duì)方案、技術(shù)、產(chǎn)品等做出評(píng)價(jià)對(duì)若干備選取方案、技術(shù)、產(chǎn)品評(píng)價(jià)出相對(duì)名次，選出最優(yōu)者。價(jià)格性能外觀服務(wù)聯(lián)想華碩宏碁戴爾二、實(shí)施3 調(diào)查表設(shè)計(jì)：評(píng)價(jià)調(diào)查表首先要確定出技術(shù)（方案、產(chǎn)品）的評(píng)價(jià)指標(biāo)體系：在前二輪，調(diào)查對(duì)象的客觀性能、特征和功能?？稍O(shè)計(jì)

20、出調(diào)查表發(fā)給各專家，評(píng)價(jià)、打分。評(píng)分制由組織者給出，而各評(píng)價(jià)指標(biāo)的加權(quán)系數(shù)可由各專家分別給出，亦可由組織者在前幾輪專家意見的基礎(chǔ)上給出。二、實(shí)施3 調(diào)查表設(shè)計(jì)：評(píng)價(jià)調(diào)查表評(píng)價(jià)對(duì)象是小型汽車用汽油機(jī)，其評(píng)價(jià)指標(biāo)體系由費(fèi)用、性能、耐久性、燃料消耗率、使用、外型、重量等七項(xiàng)組成。 評(píng)價(jià)項(xiàng)目 評(píng)分分布 平均評(píng)分 相對(duì)重要性 平均相對(duì)重要性 綜合評(píng)價(jià)分?jǐn)?shù) 總平均分 +2 +1 0 -1 -2 3 2 1 費(fèi)用 性能 耐久性 燃料消耗率 使用 外型 重量 總體 二、實(shí)施3 調(diào)查表設(shè)計(jì)：應(yīng)注意的問(wèn)題盡可能的表格化、符號(hào)化、數(shù)字化。咨詢答案除必須用文字表述的以外，應(yīng)盡可 能要求用數(shù)字或符號(hào)表述。便于后期的數(shù)據(jù)

21、處理與表達(dá)。應(yīng)在調(diào)查表上留有充分的空白，好讓專家充分發(fā)表自己的意見，進(jìn)行闡述或論證。調(diào)查表中問(wèn)題的數(shù)目一般應(yīng)限制在25個(gè)。問(wèn)題簡(jiǎn)單、相關(guān)因素比較少，問(wèn)題數(shù)目可以多。問(wèn)題復(fù)雜，相關(guān)因素比較多，甚至有一些相互矛盾的因素，問(wèn)題數(shù)目只能少一些。組織者自始至終都不應(yīng)發(fā)表自己的意見，影響和干擾專家的獨(dú)立思考和判斷。第三節(jié) 特爾菲法三、特爾菲法的實(shí)施步驟(四)特爾菲法的經(jīng)典四輪征詢調(diào)查第一輪調(diào)查。組織者把不帶任何框框的第一輪調(diào)查表以及必要的課題背景材料寄給被調(diào)查專家。 第二輪調(diào)查。將第一輪調(diào)查表的修改結(jié)果反饋給每個(gè)專家，進(jìn)一步征詢意見，以獲取專家們比較一致的意見。 第三輪調(diào)查。在這一輪中要求專家根據(jù)調(diào)查表中

22、所列事件或手段的重要程度或者所占比重提出自己的評(píng)估并給出評(píng)價(jià)理由。 第四輪調(diào)查。征詢最后一次的預(yù)測(cè)和理由，專家可以根據(jù)第四輪調(diào)查反饋的意見，對(duì)自己的評(píng)價(jià)結(jié)果進(jìn)行重新考慮，可以確定自己的評(píng)價(jià)或者進(jìn)行修改。 (五)預(yù)測(cè)報(bào)告的編寫第三節(jié) 特爾菲法四、調(diào)查結(jié)果數(shù)據(jù)處理1.對(duì)事件實(shí)現(xiàn)時(shí)間預(yù)測(cè)結(jié)果的數(shù)據(jù)處理與表達(dá) 2.對(duì)某方案在總體方案中所占最佳比重預(yù)測(cè)結(jié)果的數(shù)據(jù)處理與表達(dá) 3.最佳方案預(yù)測(cè)結(jié)果的數(shù)據(jù)處理和表達(dá)4.各評(píng)價(jià)對(duì)象相對(duì)重要性的數(shù)據(jù)處理和表達(dá) 1專家意見的集中程度可以有下列幾種常用的表示方法 (1)評(píng)分算術(shù)平均值：專家對(duì)所有評(píng)價(jià)對(duì)象(如方案、技術(shù)、產(chǎn)品等)的評(píng)分值可以用評(píng)分表表示。評(píng)分的分值采用十

23、分制還是百分制需要在調(diào)查表中對(duì)專家進(jìn)行統(tǒng)一的規(guī)定。 (2)對(duì)象的滿分頻度：所謂對(duì)象的滿分頻度，就是對(duì)某對(duì)象滿分的專家數(shù)與對(duì)該對(duì)象作出評(píng)價(jià)的專家總數(shù)之比。(3)對(duì)象的評(píng)價(jià)等級(jí)和：有時(shí)候我們采用等級(jí)來(lái)表示評(píng)價(jià)對(duì)象的重要程度。(4)專家意見的協(xié)調(diào)程度： 第三節(jié) 特爾菲法四、調(diào)查結(jié)果數(shù)據(jù)處理相對(duì)重要性指標(biāo)事件實(shí)現(xiàn)時(shí)間預(yù)測(cè)某方案在總體方案中所占最佳比重若干方案中選擇最佳方案第三節(jié) 特爾菲法四、調(diào)查結(jié)果數(shù)據(jù)處理對(duì)相對(duì)重要性指標(biāo)的數(shù)據(jù)處理和表達(dá)專家意見的集中程度算術(shù)平均值 滿分頻度評(píng)價(jià)等級(jí)和專家意見的協(xié)調(diào)程度變異系數(shù) 第三節(jié) 特爾菲法四、調(diào)查結(jié)果數(shù)據(jù)處理對(duì)事件實(shí)現(xiàn)時(shí)間預(yù)測(cè)結(jié)果的處理與表達(dá) 以中位數(shù)代表專家意

24、見的協(xié)調(diào)程度，以上下（左右）四分點(diǎn)代表專家意見的分散程度。 楔形圖或截角楔形圖 第三節(jié) 特爾菲法四、調(diào)查結(jié)果數(shù)據(jù)處理多程序計(jì)算機(jī)應(yīng)占最佳比重0-2020-4040-6060-8080-100專家數(shù)6721207專家比例9.8411.4734.4134.4311.47對(duì)某方案在總體方案中所占最佳比重預(yù)測(cè)結(jié)果的數(shù)據(jù)處理和表達(dá)將專家們對(duì)該方案在總體方案中所占最佳比重的評(píng)價(jià)意見按0- 100%的順序排列。第三節(jié) 特爾菲法四、調(diào)查結(jié)果數(shù)據(jù)處理對(duì)某方案在總體方案中所占最佳比重預(yù)測(cè)結(jié)果的數(shù)據(jù)處理和表達(dá)一般以直方圖表示，橫坐標(biāo)表示專家對(duì)該方案應(yīng)占最佳比重的評(píng)價(jià)值，橫坐標(biāo)按一定的間距分成若干個(gè)相等的間節(jié)；縱坐標(biāo)

25、表示作出最佳比重應(yīng)為該間節(jié)百分比評(píng)價(jià)的專家數(shù)與全部參加評(píng)價(jià)的專家總數(shù)之比值，以下簡(jiǎn)稱專家評(píng)價(jià)值。第三節(jié) 特爾菲法四、調(diào)查結(jié)果數(shù)據(jù)處理在計(jì)算某一專家評(píng)價(jià)值時(shí)，如果不考慮專家的權(quán)威程度，則每一個(gè)專家的評(píng)價(jià)值的加權(quán)系數(shù)均為1；如果考慮專家的權(quán)威程度，則要對(duì)每一個(gè)專家的評(píng)價(jià)值乘以相應(yīng)專家權(quán)威程度的權(quán)數(shù)。 第三節(jié) 特爾菲法四、調(diào)查結(jié)果數(shù)據(jù)處理從若干方案中選擇最佳方案的數(shù)據(jù)處理和表達(dá)從若干方案（技術(shù)、產(chǎn)品）中選擇最佳方案（技術(shù)、產(chǎn)品）的評(píng)價(jià)預(yù)測(cè)結(jié)果一般也用直方圖表示。直方圖的橫坐標(biāo)上順序排列著各個(gè)備選方案，縱坐標(biāo)表示選擇該方案作為最佳方案的專家數(shù)在全部專家總數(shù)中所占的比重。第三節(jié) 特爾菲法五、特爾菲法的優(yōu)

26、缺點(diǎn)優(yōu)點(diǎn)首先，能充分發(fā)揮各位專家的作用，集思廣益；其次，能避免專家受會(huì)議氣氛、權(quán)威和潮流等因素的影響；第三，讓專家有足夠的時(shí)間和資料來(lái)考慮和佐證自己的意見；第四，專家可以不用考慮自尊心受影響，通過(guò)仔細(xì)地思考和調(diào)查表反饋信息的啟發(fā)修改或者修正自己的意見。 缺點(diǎn)第一，過(guò)程比較復(fù)雜，花費(fèi)時(shí)間較長(zhǎng)。第二，因?yàn)槿狈η閳?bào)資料和歷史數(shù)據(jù)，專家的評(píng)價(jià)、預(yù)測(cè)是建立在直觀而不嚴(yán)格的數(shù)據(jù)基礎(chǔ)之上的，所以結(jié)果往往是不穩(wěn)定、不集中、不協(xié)調(diào)的。第三，因?yàn)閷＜业哪涿?，受邀專家互不知情，也就是專家之間是不會(huì)直接交流的，會(huì)造成缺乏評(píng)估尺度的一致性，而且對(duì)調(diào)查對(duì)象的評(píng)估角度和評(píng)估標(biāo)準(zhǔn)也一定會(huì)有不同。 第三節(jié) 特爾菲法六、特爾菲

27、法的發(fā)展在長(zhǎng)期的實(shí)踐中，特爾菲法得到了不斷的發(fā)展，產(chǎn)生了一些就變種或派生方法。保持特爾菲法基本特點(diǎn)的派生特爾菲法部分地改變經(jīng)典特爾菲法基本特點(diǎn)的派生特爾菲法第三節(jié) 特爾菲法六、特爾菲法的發(fā)展加表特爾菲法：由組織者預(yù)先擬好預(yù)測(cè)事件一覽表 加測(cè)特爾菲法：組織者預(yù)先為參加應(yīng)答的專家提供一份有關(guān)預(yù)測(cè)對(duì)象的背景預(yù)測(cè)材料 減輪特爾菲法：可以將調(diào)查程序提前結(jié)束。 加期特爾菲法：要求專家就預(yù)測(cè)事件將要實(shí)現(xiàn)的時(shí)間提供三個(gè)概率不同的日期 加評(píng)特爾菲法：要求每一位專家自己評(píng)估自己對(duì)調(diào)查表中的每一個(gè)問(wèn)題的熟悉程度。 加因特爾菲法：在對(duì)專家的應(yīng)答進(jìn)行數(shù)據(jù)處理時(shí)，只計(jì)算肯定的應(yīng)答的比例。 加機(jī)特爾菲法： “實(shí)時(shí)聯(lián)機(jī)特爾菲

28、”。 第三節(jié) 特爾菲法六、特爾菲法的發(fā)展變名特爾菲法公開辯論、秘密“投票”。實(shí)際上是經(jīng)典特爾菲法與專家會(huì)議調(diào)查法的一種結(jié)合，迅速獲得評(píng)價(jià)、預(yù)測(cè)結(jié)果，又可保持經(jīng)典特爾菲法的其他長(zhǎng)處。 變饋特爾菲法部分取消反饋、改變反饋特性：只對(duì)應(yīng)答專家反饋前一輪小組預(yù)測(cè)的四分位數(shù)或十分位數(shù)，而不反饋中位數(shù)。在進(jìn)行第三輪反饋時(shí)只嚴(yán)格限制在對(duì)部分應(yīng)答專家實(shí)行反饋。第四節(jié) 團(tuán)體焦點(diǎn)訪談方法一、概述1.團(tuán)體焦點(diǎn)訪談(FocusGroupInterview，F(xiàn)GI)的定義：是一種利用團(tuán)體的互動(dòng)形式來(lái)獲取受訪者對(duì)一個(gè)特定議題、產(chǎn)品或服務(wù)項(xiàng)目的感受與意見的研究方法。2.團(tuán)體焦點(diǎn)訪談?dòng)蓙?lái)： 1941年，波爾萊扎費(fèi)爾德(Paul

29、gazarsfeld)邀請(qǐng)羅伯特墨頓(RobertMerton)協(xié)助他評(píng)價(jià)聽眾對(duì)廣播節(jié)目的反應(yīng)。他們給一些聽眾聽事先錄制好的廣播節(jié)目，要求他們聽到引起消極反應(yīng)(生氣、厭倦、懷疑)的內(nèi)容時(shí)按紅色按鈕，聽到引起積極反應(yīng)的內(nèi)容時(shí)按綠色按鈕，并記下他們的反應(yīng)和反應(yīng)時(shí)間，還要求聽眾將注意力集中到積極和消極事件上，并討論產(chǎn)生這些反應(yīng)的原因。這是團(tuán)體焦點(diǎn)訪談的嘗試。 第四節(jié) 團(tuán)體焦點(diǎn)訪談方法一、概述3.團(tuán)體焦點(diǎn)訪談一般由812人組成，在主持人的引導(dǎo)下討論特定的主題(即焦點(diǎn))。主持人促進(jìn)團(tuán)體成員之間的相互作用并保證討論集中在研究主題上。團(tuán)體焦點(diǎn)訪談一般持續(xù)約30120分鐘，一般是在專門的訪談室中進(jìn)行的。根據(jù)參

30、加人員的特點(diǎn)和進(jìn)行方式的不同，團(tuán)體焦點(diǎn)訪談可分為三類：?jiǎn)我活悇e焦點(diǎn)訪談：在這種類型的訪談中，焦點(diǎn)成員是同質(zhì)的，即有共同的人口統(tǒng)計(jì)特征和態(tài)度；由一位受過(guò)專門訓(xùn)練的主持人引導(dǎo)；一般應(yīng)用于學(xué)術(shù)研究；多類型焦點(diǎn)訪談：在這種訪談?lì)愋椭?，各焦點(diǎn)團(tuán)體成員涉及多種類型(例如：兒童、青少年、青年、中年和老年等)，各團(tuán)體焦點(diǎn)訪談可以同時(shí)或依序進(jìn)行。這種類型訪談的好處在于可同時(shí)比較同一類型和不同類型成員之間的差異；電話(或視頻)團(tuán)體焦點(diǎn)訪談：根據(jù)訪談進(jìn)行的方式不同，參加人在電話中討論，由受過(guò)專門訓(xùn)練的主持人引導(dǎo)。 第四節(jié) 團(tuán)體焦點(diǎn)訪談方法二、團(tuán)體焦點(diǎn)訪談的應(yīng)用范圍1.探討人們對(duì)某種現(xiàn)象各種不同的看法、感受或經(jīng)驗(yàn)；2

31、.找尋影響各群體之間或不同類型人們看法、經(jīng)驗(yàn)及行為的因素；3.想了解和比較不同群體在某些觀點(diǎn)上的差異；4.想通過(guò)團(tuán)體的互動(dòng)獲取新的想法與信息；5.發(fā)展某些研究概念和設(shè)計(jì)構(gòu)想、研究工具；6.獲取基本信息以便設(shè)計(jì)量性研究；7.獲取質(zhì)性資料以便更清晰、深入地對(duì)量性資料結(jié)果進(jìn)行解讀。 第四節(jié) 團(tuán)體焦點(diǎn)訪談方法三、團(tuán)體焦點(diǎn)訪談的實(shí)施程序 (一)界定研究問(wèn)題(二)組成團(tuán)體 (三)編制訪談大綱 (四)主持人對(duì)團(tuán)體焦點(diǎn)訪談的引導(dǎo) 1知識(shí)背景要求對(duì)討論的主題具有足夠的了解。2人格魅力要求無(wú)條件積極傾聽，對(duì)各位參與者的意見表現(xiàn)出興趣和關(guān)注；友善的態(tài)度和幽默感，讓每位參與者感覺都很自在，沒(méi)有拘束；相信每位參與者均能

32、提供值得學(xué)習(xí)的信息，尊重來(lái)自不同社會(huì)背景的成員，尊重“老套”的思想。3控制能力要求善于引導(dǎo)和控制討論的方向和進(jìn)程；能控制自我表現(xiàn)欲，有效節(jié)制自己觀點(diǎn)的抒發(fā)。4理解溝通能力要求良好的語(yǔ)言溝通能力，善于提問(wèn)；能夠敏銳地理解和洞察各位參與者所發(fā)表的觀點(diǎn)和其中蘊(yùn)含的感情。5情景應(yīng)對(duì)能力要求善于應(yīng)對(duì)訪談中可能出現(xiàn)的各種意外，如冷場(chǎng)、觀念沖突等。 第四節(jié) 團(tuán)體焦點(diǎn)訪談方法三、團(tuán)體焦點(diǎn)訪談的實(shí)施程序(五)訪談的實(shí)施1所有在場(chǎng)的人的經(jīng)歷和看法都同樣重要，沒(méi)有“好壞”之分，歡迎發(fā)表不同意見。2發(fā)言盡量使用自己的日常語(yǔ)言。3參與者可以自己組織討論，不必等待研究者介入，發(fā)言的人要面向大家，不要只是朝著研究者一個(gè)人。

33、4一次只允許一個(gè)人說(shuō)話，后面發(fā)言的人應(yīng)該盡量與前面發(fā)言人的談話內(nèi)容掛上鉤。 (六)訪談過(guò)程的記錄 第四節(jié) 團(tuán)體焦點(diǎn)訪談方法四、訪談結(jié)果的分析方法 1.首先是進(jìn)行文字整理 ：雖然分析團(tuán)體焦點(diǎn)訪談結(jié)果的技術(shù)是多樣的，但多數(shù)方法的第一步都是對(duì)訪談進(jìn)行文字整理。對(duì)錄音整理后的文字材料并不總是完整的，但此時(shí)不要試圖進(jìn)行補(bǔ)充和修改，應(yīng)盡可能保持原貌，因?yàn)槠渲胁煌暾木渥?、不清楚的思想、奇特的短語(yǔ)等都能表達(dá)一定的意義，都能說(shuō)明被訪談?wù)咴谠L談過(guò)程中的所思、所想及對(duì)所談?wù)摰膯?wèn)題的態(tài)度。 2.然后是進(jìn)行剪貼分類。剪貼分類技術(shù)是一種分析團(tuán)體焦點(diǎn)訪談結(jié)果的快速、簡(jiǎn)捷的方法。其實(shí)施步驟是：通讀整理好的文字材料并確定與研

34、究問(wèn)題有關(guān)的部分；在此基礎(chǔ)上形成主要論題的分類系統(tǒng)并找出與每一論題有關(guān)的內(nèi)容；對(duì)材料中說(shuō)明不同論題的內(nèi)容進(jìn)行編碼；將編碼后的部分剪掉并按編碼進(jìn)行歸類，這些分類后的材料是進(jìn)行分析和撰寫總結(jié)報(bào)告的基礎(chǔ)。 第四節(jié) 團(tuán)體焦點(diǎn)訪談方法五、團(tuán)體焦點(diǎn)訪談法的特點(diǎn)與優(yōu)缺點(diǎn) (一)特點(diǎn)1人數(shù)限定在510人(有時(shí)可放寬到412人)，使每個(gè)人均有機(jī)會(huì)分享心得，發(fā)表意見，并能提供多種類型的知覺觀感，而不會(huì)造成交頭接耳，在討論中成員分裂成不同的更小群體。2次數(shù)團(tuán)體焦點(diǎn)訪談并不限于一次，可反復(fù)進(jìn)行(最少要求在三次以上)，以發(fā)掘出所討論主題的趨勢(shì)和規(guī)律性。3氣氛包容的氛圍，讓參與者愿意分享其觀點(diǎn)，絕不運(yùn)用壓力促使或投票的形式來(lái)促進(jìn)