基于論文產(chǎn)出的科研績效評價——ESI和InCites應(yīng)用研究綜述

劉雪立 張詩樂 蓋雙雙

(1．新鄉(xiāng)醫(yī)學(xué)院河南省科技期刊研究中心，河南 新鄉(xiāng) 453003；2．新鄉(xiāng)醫(yī)學(xué)院期刊社，河南 新鄉(xiāng) 453003；

3．新鄉(xiāng)醫(yī)學(xué)院管理學(xué)院，河南 新鄉(xiāng) 453003)

?

·綜述 · 述評·

基于論文產(chǎn)出的科研績效評價
——ESI和InCites應(yīng)用研究綜述

劉雪立1，2張詩樂1，3蓋雙雙1，3

(1．新鄉(xiāng)醫(yī)學(xué)院河南省科技期刊研究中心，河南 新鄉(xiāng) 453003；2．新鄉(xiāng)醫(yī)學(xué)院期刊社，河南 新鄉(xiāng) 453003；

3．新鄉(xiāng)醫(yī)學(xué)院管理學(xué)院，河南 新鄉(xiāng) 453003)

引文分析在科研績效評價和科技管理中發(fā)揮著不可或缺的重要作用。美國湯森路透科技信息集團(tuán)分別于2001年和2011年推出了2個重要的引文分析工具——基本科學(xué)指標(biāo)(Essential Science Indicators ，ESI)和InCites數(shù)據(jù)庫。近年來，應(yīng)用ESI和InCites數(shù)據(jù)庫進(jìn)行科研績效評價越來越普遍，逐漸成為情報學(xué)、科學(xué)學(xué)和科學(xué)技術(shù)管理研究的熱點(diǎn)。對ESI和InCites數(shù)據(jù)庫的功能和及其在科研績效評價中的應(yīng)用研究進(jìn)行綜述。

基本科學(xué)指標(biāo)；InCites數(shù)據(jù)庫；論文產(chǎn)出；科研績效；科學(xué)評價

科技論文是科技成果的重要組成部分[1]，是科研績效評價的重要依據(jù)。科學(xué)合理的科研績效評價能夠為科研管理部門優(yōu)化科技資源配置、調(diào)整研究機(jī)構(gòu)和學(xué)科布局提供有效的管理手段。近年來，引文分析方法在科研績效評價中發(fā)揮著越來越重要的作用[2-4]。常用的引文分析評價工具包括Web of Science(WoS，包括SCI，SSCI和A&HCI等引文數(shù)據(jù)庫)、《期刊引證報告》(Journal Citation Reports，JCR)、基本科學(xué)指標(biāo)(Essential Science Indicators，ESI)、InCites。ESI數(shù)據(jù)庫是美國湯森路透科技信息集團(tuán)于2001年基于WoS而建立的評價分析型數(shù)據(jù)庫[5-6]，單月月初更新[7-10]，已成為目前科研績效評價的重要工具[11]。InCites數(shù)據(jù)庫是湯森路透基于WoS數(shù)據(jù)庫于2011年開發(fā)的經(jīng)過機(jī)構(gòu)名稱規(guī)范化整理和數(shù)據(jù)的高度綜合而形成的一個新型科研績效評價工具，能夠為科研管理人員提供科研項目管理、人才評估、學(xué)科建設(shè)評價、科研合作等方面決策的分析結(jié)果與數(shù)據(jù)支撐；能夠提供全球基準(zhǔn)數(shù)據(jù)用于將本機(jī)構(gòu)與其他機(jī)構(gòu)進(jìn)行橫向?qū)Ρ?，掌握本機(jī)構(gòu)在全球各學(xué)科領(lǐng)域的相對位置[12]。依據(jù)ESI和InCites數(shù)據(jù)庫提供的各項評價指標(biāo)，探索科學(xué)發(fā)展趨勢，確定特定研究領(lǐng)域的研究成果和影響，評估潛在的雇員、合作者、評審人和同行，發(fā)現(xiàn)全球科研的最新熱點(diǎn)[13]。近年來，越來越多的學(xué)者利用ESI和/或InCites進(jìn)行全球科學(xué)評價[14-18]。本文對ESI和InCites數(shù)據(jù)庫在科研績效評價中的應(yīng)用進(jìn)行了全面總結(jié)。

1 ESI和InCites數(shù)據(jù)庫的功能研究

ESI數(shù)據(jù)庫是由引文排序(Citation Ranking)、引文分析(Citation Analysis)、最高被引論文(Most Cited Paper)和科學(xué)評論(Science Commentary) 等4個部分組成。熱點(diǎn)論文和高被引論文分析是該數(shù)據(jù)庫中的一個重要模塊，反映了最新的科學(xué)發(fā)現(xiàn)和研究動向。高被引論文是指最近10年來被引頻次排在本學(xué)科前1%的論文；熱點(diǎn)論文是指最近2年內(nèi)的論文，在最近2個月被引頻次排在本學(xué)科前0.1%的論文[5，19-20]。ESI數(shù)據(jù)庫主要是跟蹤、監(jiān)測ESI中22個學(xué)科動態(tài)，并對其引文進(jìn)行有效管理、分析和利用，幫助我們正確認(rèn)識科學(xué)研究的優(yōu)勢和不足，從而優(yōu)化研究資源配置，為研究的進(jìn)一步發(fā)展提供決策依據(jù)。

InCites數(shù)據(jù)庫的評估數(shù)據(jù)來源于TR的WoS三大引文數(shù)據(jù)庫(包括SCI、SSCI和A&HCI，收錄了全球11 000多種權(quán)威期刊文獻(xiàn)數(shù)據(jù))，綜合各種計量指標(biāo)和30年來各學(xué)科各年度的國際標(biāo)桿數(shù)據(jù)[21-24]。相較于WoS，InCites的評價功能更加強(qiáng)大和全面，除具有WoS的一般評價指標(biāo)(如論文數(shù)、論文被引頻次)之外，InCites的評價范圍更廣，包括了學(xué)科、機(jī)構(gòu)、世界范圍內(nèi)的相對評價指標(biāo)，側(cè)重基于檢索的評價結(jié)果呈現(xiàn)，以評價為根本目的。InCites模塊包括科研績效分析(Research Performance Prifiles)和全球?qū)Ρ确治?Global Comparisons)兩部分，具有全新的評價指標(biāo)體系， 豐富和發(fā)展了現(xiàn)行的科學(xué)評價系統(tǒng)。從宏觀的國家、機(jī)構(gòu)、學(xué)科領(lǐng)域分析到微觀的每篇論文、每個科研人員學(xué)術(shù)水平的全面評估，深入揭示學(xué)科發(fā)展階段與特征。

2 ESI在科研績效評價中的應(yīng)用

ESI數(shù)據(jù)庫已成為當(dāng)今世界范圍內(nèi)普遍用以評價高校、科研機(jī)構(gòu)、國家和地區(qū)學(xué)術(shù)水平及影響力的重要評價工具之一[6]?；羝G蓉[5]、王穎鑫[6]、劉雪立[7]和Csajbók等[25]針對ESI數(shù)據(jù)庫功能和應(yīng)用，詳細(xì)闡述其概念、原理、指標(biāo)、計算及運(yùn)用。該數(shù)據(jù)庫收錄近10年的論文數(shù)據(jù)，根據(jù)被引頻次確定衡量研究績效的閾值，確定位列全球前1%的研究機(jī)構(gòu)、科學(xué)家、研究論文和全球前50%國家/地區(qū)以及50%期刊等。

2.1 ESI在國家和地區(qū)評價中的應(yīng)用

針對ESI數(shù)據(jù)庫在國家和地區(qū)評價中的應(yīng)用，易勇[26]統(tǒng)計了SCI數(shù)據(jù)庫2001年1月1日-2011年4月31日論文數(shù)排在前10位的國家進(jìn)行比較。從學(xué)科相對產(chǎn)出和引文影響兩個指標(biāo)比較我國與美國、德國、日本、英國、法國、加拿大、意大利、西班牙和澳大利亞等國家科研論文產(chǎn)出情況。我國科研論文總量雖然排在全球第2位，但與科學(xué)技術(shù)發(fā)達(dá)國家相比論文學(xué)術(shù)影響力存在較大差距。另外，我國研究論文產(chǎn)出學(xué)科分布極不均衡，材料科學(xué)、化學(xué)、工程學(xué)和物理學(xué)等領(lǐng)域相對產(chǎn)出指標(biāo)排在10個國家首位，而生物學(xué)與生物化學(xué)、臨床醫(yī)學(xué)、分子生物學(xué)和遺傳學(xué)、神經(jīng)科學(xué)與行為等學(xué)科相對產(chǎn)出指標(biāo)排在10個國家最后，且低于世界平均水平。這一研究客觀評價了我國科學(xué)發(fā)展水平及其國際地位，能夠幫助我們正確認(rèn)識我國科學(xué)研究中存在的問題，為我國各級科研管理部門制定科技發(fā)展計劃、合理配制研究資源提供了重要參考依據(jù)。

2.2 ESI在機(jī)構(gòu)評價中的應(yīng)用

針對ESI數(shù)據(jù)庫功能，以科研機(jī)構(gòu)為研究對象，朱易佳[27]統(tǒng)計SCI數(shù)據(jù)庫11年間(1998-2008)的論文數(shù)和被引頻次，從ESI數(shù)據(jù)庫的22個學(xué)科領(lǐng)域，以固定被引頻次法(列出近10年的年平均被引頻次和近10年的總平均被引值)、百分比法(是百分點(diǎn)為被引基準(zhǔn)，達(dá)到需要的引文量)評價高校和研究機(jī)構(gòu)的科研水平和學(xué)術(shù)影響力；學(xué)科排名依據(jù)總被引頻次的高低將22個學(xué)科進(jìn)行排序，且以圖表方式描述各學(xué)科的論文數(shù)、引文數(shù)、篇均被引數(shù)在5年內(nèi)的變化及趨勢；研究前沿運(yùn)用普賴斯指數(shù)法基于5年間多學(xué)科領(lǐng)域內(nèi)被引頻次高的論文，通過聚類分析、共引分析列出各學(xué)科領(lǐng)域的研究前沿(該部分指標(biāo)包含論文數(shù)、被引頻次、篇均被引頻次和平均年份)。綜合上述方法，該機(jī)構(gòu)以整個學(xué)科的論文數(shù)和被引頻次作基準(zhǔn)線，在分析不同學(xué)科間的差異時，需要結(jié)合基準(zhǔn)線數(shù)據(jù)進(jìn)行分析，該方法能在跨學(xué)科分析的情況下更加全面客觀地反映被評價對象的科研水平和影響力。魯偉[28]根據(jù)ESI數(shù)據(jù)庫2001年至2011年6月30日的論文總量、被引頻次、高被引論文和熱點(diǎn)論文等數(shù)據(jù)，分析了我國西部地區(qū)高?？蒲懈偁幜Φ默F(xiàn)狀。結(jié)果顯示，我國西部地區(qū)10所高校中四川大學(xué)論文數(shù)和總被引頻次最高，蘭州大學(xué)篇均被引頻次最高，10所高校篇均被引頻次整體低于我國平均水平。另外，我國西部地區(qū)10所高校高被引論文數(shù)共207篇，其中高被引論文產(chǎn)出率僅西北大學(xué)和西安交通大學(xué)達(dá)到了中國平均水平。熱點(diǎn)論文的產(chǎn)出情況是：四川大學(xué)(6篇)、電子科技大學(xué)(3篇)、第四軍醫(yī)大學(xué)(1篇)、蘭州大學(xué)(1篇)和西安交通大學(xué)(1篇)。整體來看我國西部地區(qū)高校的科研實力還不夠強(qiáng)，各高校科研水平極不均衡。王瑛[29]等對2004-2013年工信部直屬的7所高校(哈爾濱工業(yè)大學(xué)、北京航空航天大學(xué)、南京理工大學(xué)、哈爾濱工程大學(xué)、北京理工大學(xué)、西北工業(yè)大學(xué)和南京航空航天大學(xué))科研實力進(jìn)行了比較，發(fā)現(xiàn)哈爾濱工業(yè)大學(xué)的論文數(shù)、論文總被引頻次均領(lǐng)先其他6所高校，哈爾濱工程大學(xué)論文數(shù)雖然只有哈爾濱工業(yè)大學(xué)論文數(shù)的13%，但論文質(zhì)量相對較高，其篇均被引頻次為6.48，但依然低于我國科研人員論文被引頻次的平均值6.92次。這7所高校進(jìn)入ESI國際排名前1%的學(xué)科分別是：化學(xué)、工程學(xué)、材料科學(xué)、數(shù)學(xué)、物理學(xué)、計算機(jī)科學(xué)和環(huán)境生態(tài)學(xué)等。各高校進(jìn)入ESI前1%的學(xué)科數(shù)雖各不相同，但7所高校的化學(xué)、工程學(xué)和材料科學(xué)均入選了ESI，哈爾濱工業(yè)大學(xué)入選學(xué)科數(shù)最多(7個)。從各高校的綜合排名說明哈爾濱工業(yè)大學(xué)的科研實力領(lǐng)先于工信部直屬高校的其他6所。于潔[30]等以ESI數(shù)據(jù)庫為基礎(chǔ)，采用科學(xué)計量學(xué)指標(biāo)對中國各高校的科研實力進(jìn)行了地理分布分析及評價。根據(jù)對論文數(shù)、引文數(shù)、學(xué)科活躍指數(shù)和相對影響力等指標(biāo)對我國東部、中部和西部地區(qū)入選ESI的高校進(jìn)行了研究。東部地區(qū)入選ESI高校數(shù)為40所，中部14所，西部11所。由此說明我國高?？蒲兴酱嬖诘貐^(qū)差異。

這些研究說明，ESI數(shù)據(jù)庫是高校和研究機(jī)構(gòu)科研績效評價的重要工具，能夠?qū)Σ煌咝?、高校不同學(xué)科的研究水平進(jìn)行客觀評價。另外，可以同世界高水平大學(xué)進(jìn)行比較，統(tǒng)計分析我國高校熱點(diǎn)論文、高被引論文的產(chǎn)出量、入選ESI學(xué)科數(shù)等，正確認(rèn)識我國高?？蒲兴胶筒罹?，對我國現(xiàn)階段創(chuàng)建世界一流大學(xué)和一流學(xué)科具有重要的指導(dǎo)價值。

2.3 ESI在學(xué)科評價中的應(yīng)用

以WoS收錄的論文為數(shù)據(jù)來源，金碧輝[31-32]、楊立英[33-37]等自2006-2012年不間斷地對中國不同學(xué)科領(lǐng)域進(jìn)行全方位的監(jiān)測和統(tǒng)計分析。2006年中國綜合排名第8位，前位7名分別是：美國、英國、德國、日本、法國、加拿大、意大利。我國的高被引論文涉及19個學(xué)科，世界排名分別是：數(shù)學(xué)學(xué)科和材料科學(xué)世界排名均為第4，化學(xué)和工程技術(shù)均第6，地學(xué)第7，計算機(jī)排名8，物理學(xué)第10，免疫學(xué)第13，藥學(xué)與毒理學(xué)第14，微生物學(xué)第15，生物學(xué)與生物化學(xué)、分子生物學(xué)與遺傳學(xué)、動植物學(xué)均排第16，空間科學(xué)第18，神經(jīng)科學(xué)與行為科學(xué)第20，臨床醫(yī)學(xué)和環(huán)境科學(xué)均第21、精神病學(xué)與心理學(xué)第23，農(nóng)林科學(xué)第25。到2012年，我國的綜合排名超過了意大利、加拿大、法國和日本等國，上升到第4位，僅次于美國、英國和德國。從各學(xué)科的發(fā)展趨勢來看，中國原有的優(yōu)勢學(xué)科如：數(shù)學(xué)、材料科學(xué)、化學(xué)和地學(xué)等學(xué)科在世界科學(xué)整體格局中得到進(jìn)一步的鞏固和加強(qiáng)，尤其是數(shù)學(xué)、化學(xué)、工程技術(shù)、計算機(jī)和材料科學(xué)前進(jìn)到世界第2位，其他各學(xué)科在整體的推動下也獲得了突飛猛進(jìn)的發(fā)展，只有免疫學(xué)在這期間出現(xiàn)后移現(xiàn)象。另外，TR對“金磚四國”過去30多年的數(shù)據(jù)分析說明，中國已經(jīng)成為僅次于美國的科研大國，預(yù)計到2020年中國將超越美國成為世界第一科研產(chǎn)出國[38]?？傮w而言，中國科學(xué)呈穩(wěn)步上升趨勢。自2005-2014年，肖仙桃[39]、郭玉[40]、石建[41]、Chuang[42]、劉佳音[43]、王新霞[44]和丁佐奇[19]等采用文獻(xiàn)計量學(xué)的方法對單一學(xué)科進(jìn)行統(tǒng)計分析，通過論文數(shù)、被引頻次和篇均被引頻次等指標(biāo)，分析了地球科學(xué)、計算機(jī)、神經(jīng)科學(xué)、水資源、工程、數(shù)學(xué)和植物動物學(xué)等科學(xué)領(lǐng)域在全球該學(xué)科領(lǐng)域的地位，排出該學(xué)科處于全球前列的國家、地區(qū)、科研機(jī)構(gòu)、科學(xué)家和期刊等。

ESI創(chuàng)立于2001年，是世界上最早、最成熟的學(xué)科建設(shè)和發(fā)展的科學(xué)計量學(xué)評價工具，在國務(wù)院推出《統(tǒng)籌推進(jìn)世界一流大學(xué)和一流學(xué)科建設(shè)總體方案》的背景下，應(yīng)用ESI對我國高校學(xué)科建設(shè)和發(fā)展水平進(jìn)行評價顯得尤為重要和必要。

2.4 ESI在期刊評價中的應(yīng)用

顧東蕾[45]等基于ESI數(shù)據(jù)庫對日本、俄羅斯、韓國和中國入選ESI數(shù)據(jù)庫的期刊作比較，為制定提升期刊核心競爭力的決策提供依據(jù)。以中、日、俄、韓等四國均為非英語國家，統(tǒng)計其11年間(2003-01-01—2013-12-31)入選ESI數(shù)據(jù)庫的期刊(入選標(biāo)準(zhǔn)是期刊被引頻次位于相應(yīng)學(xué)科領(lǐng)域前50%)，對各期刊論文數(shù)、被引頻次、篇均被引頻次等指標(biāo)進(jìn)行比較。入選ESI期刊中，我國共19種(1.05%)、日本17種(1.85%)、俄羅斯11種(0.72%)和韓國13種(0.46%)。在ESI數(shù)據(jù)庫的22種學(xué)科領(lǐng)域中，中、日、俄、韓四國只有2個學(xué)科(經(jīng)濟(jì)與商業(yè)和精神病學(xué)與心理學(xué))沒有入選前全球前50%的期刊，其余20個學(xué)科均有入選。入選期刊種數(shù)、百分比最高的是俄羅斯的空間學(xué)科。

隨著科學(xué)計量學(xué)在全球科學(xué)評價中的廣泛應(yīng)用，基于文獻(xiàn)計量學(xué)的期刊評價逐漸演變?yōu)檎麄€科學(xué)評價的基礎(chǔ)。該研究開辟了ESI應(yīng)用研究的先河，從全新的視角為我們提供了一種期刊評價的新方法。

2.5 ESI在人才評價中的應(yīng)用

TR通過ESI數(shù)據(jù)庫對全球近11年(2000-01-01—2010-10-31)化學(xué)領(lǐng)域頂尖科學(xué)家前100位進(jìn)行排名[23]。在這100位科學(xué)家中來自美國70位，德國7位，英國4位，加拿大、法國、丹麥、瑞士和南韓各2位，澳大利亞、比利時、瑞典、意大利、以色列、南非、巴西、日本、新加坡各1位。另外，擁有3個以上Top100科學(xué)家的機(jī)構(gòu)分別是，麻省理工學(xué)院(6位)、斯克里普斯研究所(5位)、加州大學(xué)伯克利分校(5位)、哈佛大學(xué)(4位)、萊斯大學(xué)(4位)、西北大學(xué)(4位)、加州理工學(xué)院(3位)、加州大學(xué)河濱分校(3位)、芝加哥大學(xué)(3位)。肖仙桃[39]等通過ESI數(shù)據(jù)庫對全球近11年(1993-2003)地球科學(xué)領(lǐng)域頂尖科學(xué)家前20位的排名。石建[41]等通過ESI數(shù)據(jù)庫對全球近11年(2000-2010)腦膜炎科學(xué)領(lǐng)域頂尖科學(xué)家前20位的排名。

3 InCites在科研績效評價中的應(yīng)用

2011年創(chuàng)建的InCites數(shù)據(jù)庫是對ESI科學(xué)評價功能的重要補(bǔ)充，設(shè)置了一些ESI數(shù)據(jù)庫中沒有的指標(biāo)，如學(xué)科、機(jī)構(gòu)、世界范圍內(nèi)的相對科學(xué)評價指標(biāo)，使科學(xué)評價范圍更廣，極大地豐富和完善了ESI的科研績效評價功能。

3.1 InCites在科研機(jī)構(gòu)評價中的應(yīng)用

針對InCites數(shù)據(jù)庫在科研機(jī)構(gòu)評價中的應(yīng)用，眼科新進(jìn)展編輯部[46]在2012年通過該數(shù)據(jù)庫的機(jī)構(gòu)定制數(shù)據(jù)，檢索不同機(jī)構(gòu)研究人員發(fā)表的論文及被引頻次，列出了2006-2010年我國眼科學(xué)SCI論文20強(qiáng)(中國大陸高校12所、臺灣高校5所和香港3所)和中國大陸眼科學(xué)SCI論文被引20強(qiáng)，實時跟蹤機(jī)構(gòu)的研究產(chǎn)出和影響力。劉雪立[23]采用該數(shù)據(jù)庫的預(yù)置數(shù)據(jù)，對我國大陸、香港以及臺灣地區(qū)高校的科研狀況進(jìn)行了研究。該數(shù)據(jù)庫提供40多個國家2 000多所大學(xué)、研究機(jī)構(gòu)在各學(xué)科領(lǐng)域的綜合研究績效評估指標(biāo)，其中包括有中國200多所高校、研究機(jī)構(gòu)的論文和引文指標(biāo)。在機(jī)構(gòu)評價中發(fā)現(xiàn)，論文數(shù)與占全球論文總數(shù)百分比、被引頻次與相對被引用率、篇均被引頻次與相對影響力等3對指標(biāo)的科研機(jī)構(gòu)排序基本一致，因此我們在比較研究某地區(qū)科研績效時，只需要比較其中5個指標(biāo)就可以全面反映該地區(qū)的學(xué)術(shù)表現(xiàn)和科研水平[23，47]。

該數(shù)據(jù)庫創(chuàng)立于2011年，是繼ESI應(yīng)用10年之后湯森路透開發(fā)的又一個科研績效評價工具，是對ESI數(shù)據(jù)庫的重要補(bǔ)充，提供了多個重要的評價指標(biāo)，如論文被引率、機(jī)構(gòu)相對影響力、占全球論文數(shù)的百分比、相對被引率、綜合績效指標(biāo)等，能夠?qū)θ蚋鞲咝：涂蒲袡C(jī)構(gòu)進(jìn)行對比和分析，找到各自的優(yōu)勢和差距。

3.2 InCites在學(xué)科領(lǐng)域評價中的應(yīng)用

Lutz Bornmann[48]利用該數(shù)據(jù)庫比較研究了1981-2010年間中國、日本、法國、德國、美國和英國的標(biāo)準(zhǔn)化引用影響力。結(jié)果表明，過去30年內(nèi)，法國，英國，尤其是德國各學(xué)科領(lǐng)域的引用影響值呈顯著上升趨勢。美國在這30年間引用影響值一直處于高水平。發(fā)表年份之間有小的影響力差異，美國在工程和科技方面的引用影響值呈增加趨勢，但在醫(yī)學(xué)和健康科學(xué)以及農(nóng)業(yè)科學(xué)方面呈降低趨勢。與美國相似，日本在不同的學(xué)科領(lǐng)域趨勢也是不同的，但每年的變化很小。雖然中國論文的引用影響值仍處于相對低的水平(大多數(shù)低于世界平均水平)，但有上升趨勢。該數(shù)據(jù)庫從3個角度提供了研究國家標(biāo)準(zhǔn)化引用影響力的方法：(1)一個長期發(fā)表時間窗口(1981-2010年)；(2)主題領(lǐng)域的差異；(3)為獲得不同年份國家引文趨勢調(diào)查結(jié)果，允許使用統(tǒng)計程序。

何惠芬[49]等利用該數(shù)據(jù)庫比較研究了同濟(jì)大學(xué)聲學(xué)領(lǐng)域1981-2012年和2008-2012年科研產(chǎn)出的比較及期刊的排名。董政娥等[50]利用該數(shù)據(jù)庫跟蹤監(jiān)測東華大學(xué)在ESI中22個學(xué)科的熱點(diǎn)論文、高被引論文與學(xué)科的發(fā)展趨勢進(jìn)行相關(guān)預(yù)測。胡忠輝等[51]利用該數(shù)據(jù)庫，從引文分析的角度對國內(nèi)外近11年的部分高校數(shù)學(xué)、物理學(xué)和化學(xué)等學(xué)科領(lǐng)域的發(fā)展情況進(jìn)行了分析比較，探討了國內(nèi)外高校各學(xué)科的發(fā)展趨勢。王新霞等[52]利用該數(shù)據(jù)庫，采用文獻(xiàn)計量方法，對我國數(shù)學(xué)科學(xué)領(lǐng)域近10年(2001-2010)在國際學(xué)術(shù)影響力，按照論文數(shù)、被引頻次、排出數(shù)學(xué)領(lǐng)域前10的國家，確定我國數(shù)學(xué)科學(xué)在國際的地位。

InCites數(shù)據(jù)庫的最大亮點(diǎn)是提供了多種學(xué)科分類系統(tǒng)，包括WoS中250多個學(xué)科、ESI中22個學(xué)科、OECD中48個學(xué)科、澳大利亞ERA(Excellence in Research for Australia)和英國RAE(Research Assessment Exercise)等。值得一提的是，該數(shù)據(jù)庫還植入了我國國務(wù)院學(xué)位委員會和教育部2011年制訂的《學(xué)位授予和人才培養(yǎng)學(xué)科目錄》的學(xué)科分類，包括12個學(xué)科門類，77個一級學(xué)科。以此數(shù)據(jù)庫進(jìn)行學(xué)科建設(shè)和發(fā)展水平評價，選擇我國學(xué)科分類中的學(xué)科進(jìn)行對照研究將更加符合我國國情，提高了研究的針對性。同時，該數(shù)據(jù)庫還提供了全球170多個國家和9個區(qū)域性組織在各學(xué)科領(lǐng)域的綜合科研效績評估指標(biāo)[22]。

3.3 InCites和F1000數(shù)據(jù)庫的比較分析

Lutz Bornmann等[53]于2013年針對InCites和F1000數(shù)據(jù)庫為我們提供了一個獨(dú)特的方法研究同行評議評級和文獻(xiàn)計量學(xué)指標(biāo)之間的關(guān)系。F1000是生物醫(yī)學(xué)文獻(xiàn)發(fā)表后同行評議系統(tǒng)。同行評議性指標(biāo)被廣泛地認(rèn)為是一種驗證文獻(xiàn)計量指標(biāo)的方式。基于InCites數(shù)據(jù)庫提供的7個指標(biāo)(總被引頻次、第二代被引頻次、施引文獻(xiàn)篇均二代被引頻次、期刊相對影響力、學(xué)科相對影響力、學(xué)科領(lǐng)域百分比、期刊影響因子)分析原始引文計數(shù)指標(biāo)的有效性，選取細(xì)胞生物學(xué)和免疫學(xué)領(lǐng)域的學(xué)科為樣本。結(jié)果顯示，學(xué)科領(lǐng)域百分比和F1000評級相關(guān)性最高；其他3個指標(biāo)(總被引頻次，第二代被引頻次以及學(xué)科相對影響力)與評級之間的實際相關(guān)性至少能達(dá)到中等效應(yīng)值。由于標(biāo)準(zhǔn)化指標(biāo)百分比與學(xué)科相對影響力兩種評價的相關(guān)性最高，在同行評議研究時應(yīng)該優(yōu)于其他文獻(xiàn)計量學(xué)指標(biāo)。

4 ESI和InCites的聯(lián)合應(yīng)用

ESI和InCites數(shù)據(jù)庫的開發(fā)者均為美國湯森路透，其數(shù)據(jù)均來源于Web of Science。因此，二者數(shù)據(jù)可以無縫對接。關(guān)于聯(lián)合使用ESI和InCites數(shù)據(jù)庫對大學(xué)及學(xué)科績效進(jìn)行評價研究較少。董政娥等[50]于2013年報告了聯(lián)合應(yīng)用ESI和InCites數(shù)據(jù)庫對東華大學(xué)學(xué)科發(fā)展的預(yù)測方法和結(jié)果。劉雪立等[54]進(jìn)一步挖掘了ESI和InCites數(shù)據(jù)庫聯(lián)合應(yīng)用的價值，對我國9所C9高校學(xué)科建設(shè)和發(fā)展進(jìn)行了評價和預(yù)測，定義了學(xué)科優(yōu)勢值。利用該學(xué)科優(yōu)勢值，能夠?qū)θ蚋咝W(xué)科的績效進(jìn)行定量評價。由于學(xué)科優(yōu)勢值是某機(jī)構(gòu)某學(xué)科論文被引頻次與ESI學(xué)科入選域值的比值，若某機(jī)構(gòu)某學(xué)科的學(xué)科優(yōu)勢值大于1，那么該機(jī)構(gòu)該學(xué)科一定會入選ESI。因此，聯(lián)合使用ESI和InCites能夠批量確定所有高校入選ESI的學(xué)科，而且可以根據(jù)學(xué)科優(yōu)勢值與1的差距，對近期可能入選ESI的學(xué)科做出準(zhǔn)確預(yù)測。

InCites和ESI聯(lián)合使用這一獨(dú)特功能，目前尚未被廣泛認(rèn)識。作為科研管理、情報分析和預(yù)測工作者確有必要盡快了解和掌握該方法，對我國各高校不同學(xué)科發(fā)展水平進(jìn)行及在全球的位次進(jìn)行客觀評價，并對各高校入選ESI的學(xué)科進(jìn)行預(yù)測，從而優(yōu)化科研資源配置，完善科研管理方法，最大程度上發(fā)揮科研管理的導(dǎo)向作用。

[1]趙紅專,翟立新,李強(qiáng).公共科研機(jī)構(gòu)績效評價的指標(biāo)與方法[J].科學(xué)學(xué)研究，2006，24(1)：85-90.

[2]Borja Gonz ález-Pereira,Vicente P Guerrero-Bote,Félix Moya-Aneg ón.A new approach tothe metric of journals’ scientific prestige:The SJR indicator[J].Journal of Informetrics，2010，(4):379-391.

[3]康國光,沈振鋒,徐躍進(jìn),等.學(xué)生滿意度研究:現(xiàn)狀、演進(jìn)路徑及前沿——基于Web of Science數(shù)據(jù)庫[J].現(xiàn)代情報,2014,34(8):29-41.

[4]孫金偉,劉迪，王賢文，等.科學(xué)基金資助與SCI論文產(chǎn)出:對10個國家的比較分析[J].科學(xué)學(xué)研究，2013，31(1)：36-42.

[5]霍艷蓉.基本科學(xué)指數(shù)(Essential Science Indicators)數(shù)據(jù)庫[J].圖書情報工作,2003，(1):56-59.

[6]王穎鑫,黃德龍,劉德洪.ESI指標(biāo)原理及計算[J].圖書情報工作,2006,50(9):73-75,35.

[7]劉雪立.基于Web of Science和ESI數(shù)據(jù)庫高被引論文的界定方法[J].中國科技期刊研究,2012,23(6):975-978.

[8]Lutz Bornmann,Loet Leydesdorff,Jian Wang.Which percentile-based approach should be preferred for calculating normalized citation impact values?An empirical comparison of five approaches including a newly developed citation-rank approach(P100)[J].Journal of Informetrics,2013,7(4):933-944.

[9]董文軍.基于Web of Science及ESI的科學(xué)數(shù)據(jù)統(tǒng)計分析[J].情報雜志,2009,(S1):27-31.

[10]ESI數(shù)據(jù)庫[EB/OL].http:∥esi.isiknowledge.com/home.cgi，2015-04-07.

[11]顧東蕾,武瑩,邱家學(xué),等.基于WOS學(xué)科發(fā)展預(yù)測研究[J].現(xiàn)代情報,2014,34(6):32-40.

[12]南京醫(yī)科大學(xué)圖書館.湯森路透在線培訓(xùn):InCites講座與在線演示[EB/OL].http:∥vpn.njmu.edu.cn，2014-12-25.

[13]Thomson Reuters.Essential Science Indicators[EB/OL].http:∥esi.webofknowledge.com/home.cgi，2014-12-25.

[14]Huang Y,Wang J.A bibliometric study of the trend in articles related to eutrophication published in Science Citation Index[J].Scientometrics,2011,89(3):919-927.

[15]Singleton A.Bibliometrics and Citation Analysis：from the Science Citation Index to Cybermetrics[J].Learned Publishing,2012,23(3):267-268.

[16]Fu HZ,Chuang KY，Wang MH，et al．Characteristics of research in China assessed with Essential Science Indicators[J].Scientometrics,2011,88(3):841-862.

[17]邱均平,楊瑞仙.基于ESI的學(xué)科熱門論文的計量研究——以臨床醫(yī)學(xué)學(xué)科為例[J].情報科學(xué),2010,28(1):53-57,60.

[18]付佳佳,潘衛(wèi).InCites和Spotlight在學(xué)科服務(wù)中的作用比較研究[J].圖書館雜志,2014，33(3):37-42.

[19]丁佐奇,王明華.基于ESI的植物動物學(xué)研究領(lǐng)域熱點(diǎn)論文分析及對編輯組稿的啟示[J].中國科技期刊研究,2014,25(11):1384-1390.

[20]方紅玲,常海敏,劉雪立.中、日、印、韓四國高影響力論文產(chǎn)出狀況對比研究[J].中國科技期刊研究,2013,24(6):1070-1073.

[21]Thomson Reuters.InCites[EB/OL].http:∥incites.isiknowledge.com，2014-12-25.

[22]馮花樸.InCites數(shù)據(jù)庫科研績效評估的有效工具[J].現(xiàn)代情報,2014,34(1):147-154.

[23]劉雪立.一個新的引文分析工具——InCites數(shù)據(jù)庫及其文獻(xiàn)計量學(xué)指標(biāo)的應(yīng)用[J].中國科技期刊研究,2013,24(2):277-281.

[24]湯森路透數(shù)據(jù)平臺[EB/OL].http:∥science.thomsonreuters.com/products/esi/，2015-04-07.

[25]Csajbók E,Berhidi A,Vasas L,et al.Hirsch-index for countries based on Essential Science Indicators data[J].Scientometrics,2007,73(1):91-117.

[26]易勇.我國與世界主要國家科研論文產(chǎn)出的計量比較分析——基于學(xué)科專業(yè)化和標(biāo)準(zhǔn)引文影響二維視角[J].中國科技論壇,2012，(1):155-160.

[27]朱易佳.高?？鐚W(xué)科科研評價方法新探[J].現(xiàn)代情報,2010,30(2):15-17,20.

[28]魯偉.西部地區(qū)高?？蒲懈偁幜ΜF(xiàn)狀淺析——基于ESI數(shù)據(jù)庫的計量分析[J].科教導(dǎo)刊,2012,(2):107,161.

[29]王瑛,周敏華.工信部直屬高?？蒲袑嵙單鯷J].科學(xué)管理研究,2014,32(3)：41-43.

[30]于潔,佟賀豐,黃慕萱,等.中國高校研究產(chǎn)出的區(qū)域非均衡性分析——從ESI角度進(jìn)行的比較[J].科技管理研究,2012，(19):54-60,65.

[31]金碧輝,張望,周秋菊.中國科學(xué)：前進(jìn)中的“航母”——2006年SCI論文統(tǒng)計分析[J].科學(xué)觀察,2007,2(1):20-44.

[32]金碧輝,張望,周秋菊,等.中國科學(xué)：進(jìn)步與自信、差距與動力的聯(lián)想——2007年SCI論文統(tǒng)計分析[J].科學(xué)觀察,2008,3(1):26-52.

[33]楊立英,周秋菊,岳婷,等.中國科學(xué)：在希望與挑戰(zhàn)中前行——2008年SCI論文統(tǒng)計分析[J].科學(xué)觀察,2009,4(1):28-52.

[34]楊立英,周秋菊,岳婷,等.中國科學(xué)：對差距的理性思考——2009年SCI論文統(tǒng)計分析[J].科學(xué)觀察,2010,5(1):16-44.

[35]楊立英,周秋菊,岳婷,等.中國科學(xué)：發(fā)展水平與學(xué)科結(jié)構(gòu)的思考——2010年SCI論文統(tǒng)計分析[J].科學(xué)觀察,2011,6(1):23-50.

[36]楊立英,周秋菊,岳婷.中國科學(xué)：增長的極限與生命科學(xué)的進(jìn)步——2011年SCI論文統(tǒng)計分析[J].科學(xué)觀察,2012,7(2):41-50.

[37]楊立英,周秋菊,岳婷,等.中國科學(xué)：整體推進(jìn)與各學(xué)科均衡發(fā)展的思考——2012年SCI論文統(tǒng)計分析[J].科學(xué)觀察,2013,8(1):23-50.

[38]科學(xué)技術(shù)部.國外專家預(yù)測中國2020年可能超越美國成為世界第一科研產(chǎn)出大國[J].中國科技信息,2010，(13):7.

[39]肖仙桃,孫成權(quán).國際及中國地球科學(xué)發(fā)展態(tài)勢文獻(xiàn)計量分析[J].地球科學(xué)進(jìn)展,2005,20(4):467-476.

[40]郭玉,魏海燕.我國計算機(jī)科學(xué)發(fā)展態(tài)勢文獻(xiàn)計量分析[J].計算機(jī)應(yīng)用研究,2007,24(12):28-31.

[41]石建,石苗茜.基于SCI及ESI的腦膜炎研究十年發(fā)展態(tài)勢的文獻(xiàn)計量分析[J].科學(xué)技術(shù)與工程,2010,10(30):7396-7401,7407.

[42]Chuang KY,Wang MH,Yuh-Shan Ho.High-impact papers presented in the subject category of water resources in the essential science indicators database of the institute for scientific information[J].Scientometrics,2011，(87):551-562.

[43]劉佳音.基于基本科學(xué)指標(biāo)數(shù)據(jù)庫的工程科學(xué)文獻(xiàn)計量分析[J].高教發(fā)展與評估,2013,29(4):10-18,120.

[44]王新霞,蔣萍.基于ESI及SCIE的學(xué)科影響力統(tǒng)計分析[J].農(nóng)業(yè)圖書情報學(xué)刊，2013,25(8):72-75.

[45]顧東蕾,邱家學(xué).基于ESI的中日俄韓科技期刊競爭力比較研究[J].中國科技期刊研究,2014,25(12):1504-1508.

[46]眼科新進(jìn)展編輯部.2006-2010年InCites數(shù)據(jù)庫中我國眼科學(xué)SCI論文20強(qiáng)[J].眼科新進(jìn)展,2012,32(8):749.

[47]南京航空航天大學(xué)圖書館.InCites相關(guān)培訓(xùn)課件[EB/OL].http:∥incites.thomsonreuters.com，2015-04-07.

[48]Lutz Bornmann,Loet Leydesdorff.Indicators of Citation Impacts of Six Prolific Countries:InCites Data and the Statistical Significance of Trends[J].Plos One,2013,8(2):1-5.

[49]何惠芬,陳欣.基于InCites數(shù)據(jù)庫聲學(xué)領(lǐng)域的科研績效評估分析[J].情報探索,2013，(5):36-39,42.

[50]董政娥,陳蕙蘭.基于ESI和InCites數(shù)據(jù)庫的東華大學(xué)學(xué)科發(fā)展預(yù)測[J].東華大學(xué)學(xué)報：自然科學(xué)版,2013,39(5):689-694.

[51]胡忠輝,倪瑞,李興權(quán),等.基于InCites的國內(nèi)外理學(xué)主要學(xué)科發(fā)展分析研究[J].學(xué)位與研究生教育,2013，(11):42-46.

[52]王新霞,周健,宋振世.基于引文分析的我國數(shù)學(xué)學(xué)科國際學(xué)術(shù)影響力探討[J].情報探索,2013,(10):9-11.

[53]Lutz Bornmann,Loet Leydesdorff.The validation of(advanced)bibliometric indicators through peer assessments:A comparative study using data from InCites and F1000[J].Journal of Informetrics,2013，(7):286-291.

[54]劉雪立，蓋雙雙，張詩樂.我國C9高校學(xué)科建設(shè)的績效評價與預(yù)測研究——基于ESI和InCites數(shù)據(jù)庫的分析.中國科技論壇，2016：待發(fā)表(已錄用).

(本文責(zé)任編輯：郭沫含)

Scientific Research Performance Evaluation Based on Outputs of Papers——A Review for the Applications of Essential Science Indicators and InCites

Liu Xueli1，2Zhang Shile1，3Gai Shuangshuang1，3

(1．Henan Research Center for Science Journals，Xinxiang 453003，China；2．Periodicals Publishing House，Xinxiang Medical University，Xinxiang 453003，China；3．Management Institute，Xinxiang Medical University，Xinxiang 453003，China)

Citation analysis plays an essential and important role in the scientific research performance evaluation and the management of science and technique.Thomson Reuters(USA):a group on science information were established two important citation analysis tools in 2001 and 2011,the Essential Science Indicators(ESI)and InCites database,respectively.In recent years,the application of ESI and InCites database in performance evaluation of scientific research is increasingly common,and becoming research hotspots of information science,science and technology management.Therefore,it is necessary to review and summary the function and application studies of ESI and InCites database.

essential science indicators;InCites database;output of paper;research performance;science evaluation

2015-12-14

國家社會科學(xué)基金項目“影響因子缺陷的多維度矯正與學(xué)術(shù)期刊的跨學(xué)科評價”(項目編號：15BTQ061)；河南省高等學(xué)校哲學(xué)社會科學(xué)基礎(chǔ)研究重大項目“河南省高校哲學(xué)社會科學(xué)研究績效評價和發(fā)展對策”(項目編號：2015-JCZD-013)。

劉雪立(1965-)，男，教授，編審，碩士生導(dǎo)師，主任，社長，研究方向：科學(xué)計量學(xué)與科學(xué)評價。

10．3969/j．issn．1008-0821．2016．03．028

G630

A

1008-0821(2016)03-0172-06