“世界科學文獻定性評價統(tǒng)計數(shù)據(jù)庫”與引文定性分類下的學術(shù)文獻計量評價方法

1、"世界科學文獻定性評價統(tǒng)計數(shù)據(jù)庫"與引文定性分類下的學術(shù)文獻計量評價方法一. 開展學術(shù)文獻評價的必要性和意義當今世界，隨著科技創(chuàng)新成為社會進步的主要動力和國家競爭實力的體 現(xiàn)，科研評價也發(fā)揮出越來越多的社會作用，表現(xiàn)為其對科技創(chuàng)新的導向作 用、激勵作用和學術(shù)話語權(quán)作用。因此，能否對科研工作和學術(shù)成果做出客 觀、合理、公正的評價，在一定程度上甚至反映了一個國家科研管理的軟實力?？蒲性u價的根本目的在于控制研究活動質(zhì)量！因此，科研評價的對象可以是 政策、計劃、投資、項目、成果、人才、管理等各個科硏活動要素。當前”科硏 評價的主要方法包括同行評議、案例調(diào)研、文獻計量和經(jīng)濟計量等多種

2、方法。學術(shù)文獻是人們開展學術(shù)研究的信息載體和成果形式z-o優(yōu)秀的學術(shù)文 獻不僅本身應具有創(chuàng)新的觀點、理念、理論、方法、數(shù)據(jù)、結(jié)論，還能反映甚 至引領該學科領域?qū)W術(shù)發(fā)展方向；同時，優(yōu)秀的學術(shù)文獻還具有讓研究者個人 價值得到社會承認、進行社會整體性的知識累積、打破時空學術(shù)交流壁壘、推動 學術(shù)認知的提高和社會經(jīng)濟的發(fā)展等諸多社會意義。因此，從其產(chǎn)生開始，就 被賦予了客觀折射作者學術(shù)成就、學術(shù)水平、社會貢獻大小高低的特有展性。開展學術(shù)文獻評價并不是最終目的，目的是為科研評價服務。開展學術(shù)文 獻的評價，是科研評價的基礎工作，為科研評價提供決策參考和客觀支撐！二、問題的提出開展學術(shù)文獻評價非常重要，但當前

3、學術(shù)文獻評價體系存在三大本質(zhì)性缺 陷：（1）同行評議組織模式與評價手段落后目前存在兩個挑戰(zhàn)：既受“同行”（專家群體）專業(yè)水平和主觀評判能力的 挑戰(zhàn)，也受“評議”（評價標準）的科學性和評議過程合理性的挑戰(zhàn)，普遍而 言難以實現(xiàn)客觀、公正、公平。一些創(chuàng)新程度高、有重大突破性研究結(jié)果的話 題，例如，陶瓷在傳統(tǒng)的概念中是絕緣體，但在高溫超導領域，陶瓷卻能作為 高溫超導材料；又比如，核聚變通常是在高溫下發(fā)生的，清華大學的教授卻率 先提出了 “常溫核聚變”，即“冷核聚變”。像這樣打破思維范式的東四，同 行評議在初始階段也較難準確判斷其學術(shù)價值。（2）引證文獻來源的局限性受統(tǒng)計源覆蓋面、代表性的影響，基于引文

4、統(tǒng)計的定量評價較難具備全面 的代表性。西方發(fā)達國家建立的統(tǒng)計數(shù)據(jù)庫以西方國家的期刊、會議錄等學術(shù) 文獻為主，使他們在統(tǒng)計分析的結(jié)果上掌控了代表西方價值觀的話語權(quán)，而對 發(fā)展中國家的評價明顯發(fā)生偏差。（3）缺乏對引證數(shù)據(jù)的定性分析不區(qū)分引證者對被引文獻持何種評價態(tài)度，一律給出被引頻次統(tǒng)計數(shù)值， 以致學術(shù)評價機構(gòu)無法據(jù)此給出論文的定性評價意見，并導致了單純的“以數(shù)論 文”、“以刊論文”、“唯wos論”等形式主義傾向，以及種種學術(shù)不端行為， 嚴重損壞學術(shù)氛圉和創(chuàng)新激勵機制。1）定性評價如何客觀？高效？低成本？2）如何保證統(tǒng)計源的代表性、權(quán)威性?指標的科學性？數(shù)據(jù)的及時性、可靠性？3）文獻計量統(tǒng)計如何

5、能反映較為準確的定性評價意見？被引頻次和學術(shù)價值到底能否統(tǒng)一起來？影響因子到底能否反映每篇文章的質(zhì)量？事實上，有些專家其論文發(fā)表的期刊并非國際頂級大刊，其論文的被引頻次、下載次數(shù)等也并非在同學科內(nèi)最高, 但其學術(shù)價值和應用價值一流。例如，我國著名的小麥育種專家、國家最高科技獎獲得者李振聲院士2003年和2007年 分別在中國農(nóng)業(yè)科學和植物學報上發(fā)表了兩篇論文。數(shù)據(jù)統(tǒng)計顯示,第一篇水稻氮饑餓誘導基因的克隆與表 達分析至今在cnki被引2次，下載120次；wos被引3次；cscd被引0次；第二篇選擇牽連效應分析:發(fā) 掘重要基因的新思路至今cnki被引1次，下載30次；cscd被引38次。如果不知道

6、李振聲院士工作的創(chuàng)新性，光 看文獻計量引次的統(tǒng)計結(jié)果，一般就會認為這不是兩篇好文章。但實際上這些工作非常重要。我們說不要以刊論文，就 是為了避免上述認識誤區(qū)。三、解決問題的思路因此，解決問題的思路，就要從如何把定性定量相結(jié)合的方法結(jié)合起來綜合、細致地進行判斷。國際上的同行評 議一般認為參與評議的人越多結(jié)果越公平，至少（at least）要有兩個人來客觀評議，但我們現(xiàn)在審稿一般只找兩個人就 認為夠了（ enough ）,這是不對的。所以說，優(yōu)化的群體評議是非常重要的。那怎么為群體評議提供很好的支撐呢？中 國知網(wǎng)利用海量數(shù)據(jù)庫和大數(shù)據(jù)思路提岀以下解決方案（見圖1 ）:第一、基于網(wǎng)絡平臺的群體評議和

7、海量大數(shù)據(jù)支持的學術(shù)不端檢測機制，來幫助評審者快速發(fā)現(xiàn)并剔除有學術(shù)不 端行為的文獻；第二、通過基于大數(shù)據(jù)的分析,迅速界定論文創(chuàng)新點；第三、通過基于大數(shù)據(jù)的分析，迅速找出單篇文獻特征化的引證動機。通過一段時間的努力，我們目前建立起了一套雙 向六維的引文定性分類體系。所謂的“雙向”，是指引文定性分類的內(nèi)容可以分別從被引文獻角度和施引文獻角度進行分 析；所謂的“多維”，是指在雙向視野下以多種維度對引文進行分類。例如,我們將文獻的被引價值分為學術(shù)價值、社會價值或其他價值三大類。學術(shù)價值包括論文的創(chuàng)新性、重要性、科學性、先進性等。(1)創(chuàng)新性：研究觀點、問題、對象、方法、結(jié)果、結(jié)論的創(chuàng)新等;(2 )重要

8、性：受關(guān)注范圍、受關(guān)注程度、影響層次、影響面、前瞻性、排他性等；(3)科學性：設計的合理性；過程的可控性；數(shù)據(jù)的準確性；推論的邏輯性；資料的可靠性；事實的可重復性；(4 )先進性：概念、技術(shù)、方法、證據(jù)、形式的獨特性、新穎性、全面性等社會價值包括應用性與歷史性等。(1 )應用性：經(jīng)濟價值、倫理價值、文化價值。(2 )歷史性：推動認知、指導實踐、知識貢獻。其他價值則包括語言水平與寫作規(guī)范兩類。我們將引證態(tài)度可以分為兩大類五小類：(1 )實質(zhì)性引用：分為肯定和否定兩類態(tài)度?！翱隙ā笔侵钢С?、稱贊、認可等情感傾向。“否定”是指明確表示批駁、質(zhì) 疑等態(tài)度，也指“比較式否定，即部分肯定，部分否定”。(2

9、 )非實質(zhì)性引用：分為“客觀描述”和“敷衍性弓i用“兩類態(tài)度。“客觀描述”引用具體內(nèi)容，但未表明對被弓i文獻的態(tài)度。 “敷衍性弓聞”未弓i用具體內(nèi)容，未標明對被弓i文獻的態(tài)度。這樣,就把原來看似一個籠統(tǒng)的引證數(shù)字，按不同的性質(zhì)予以區(qū)分，對學術(shù)文獻為何被引用的價值予以深度的揭示，可 以更好地反映其真實的學術(shù)價值。第四、開發(fā)國際同行參與的在線同行評議系統(tǒng)，吸納國際同行對學術(shù)文獻的評價意見。在論文創(chuàng)新點分析和引文動機分析分析的有力工具輔助下,開發(fā)定性定量相結(jié)合的評價方法,為同行評議提供有力的定 性判斷輔助手段。這樣，既克服同行評議的偏差，又為文獻計量注入嶄新內(nèi)容，使學術(shù)文獻評價高效、準確！四. 世界

10、科學文獻定性評價統(tǒng)計數(shù)據(jù)庫介紹內(nèi)容挖掘技術(shù)和科學文獻定性評價標準建立世界科學文獻定性評價統(tǒng)計數(shù)據(jù)庫的基本目標即在于通過大:一個國際首創(chuàng)的、可以支持客觀公正定性評價我國和世界各國科學文獻學術(shù)質(zhì)量與國際影響力的大型數(shù)據(jù)庫。該項目目 前已進入中期開發(fā)階段，通過構(gòu)建世界范圍的學術(shù)文獻全文數(shù)據(jù)庫、引文數(shù)據(jù)庫.專家學者庫及國際同行評議平臺，以 引文動機挖掘、分類與網(wǎng)上同行評議相結(jié)合，建立面向文獻的國際評價體系，并提供科研項目情報跟蹤、學術(shù)硏究方向、 學術(shù)熱點等增值信息服務，在全球?qū)W術(shù)界和科硏管理界進行推廣應用,形成具有我國自主知識產(chǎn)權(quán)和國際權(quán)威性的科學 文獻學術(shù)評價新體系。這一項目的實施,將進一步完善我國學術(shù)期刊的國際影響力評價，并推動我國學術(shù)期刊的國際國 內(nèi)更好地樹立品牌、廣泛傳播。根據(jù)用戶需求和管理需求，該項目可以產(chǎn)生不同的產(chǎn)品，為特定用戶提供服務。包括：(1)宏觀評價產(chǎn)品：對學科、國家和地區(qū)、機構(gòu)、期刊的評價。形成世界學術(shù)期刊引證報告、中國學術(shù)期刊國 際引證報告、中國學術(shù)期刊影響因子年報、世界科