基于ESI和InCites的學(xué)科和學(xué)者評價指標(biāo)探討

楊光

【摘 要】以ESI和InCites提供的學(xué)科評價指標(biāo)數(shù)據(jù)作為依據(jù)，分析江蘇師范大學(xué)Engineering學(xué)科特點及學(xué)科構(gòu)成，從科研生產(chǎn)力、科研影響力、科研發(fā)展力、科研創(chuàng)新力等方面，分別給出對于學(xué)院科研績效評估、學(xué)科發(fā)展預(yù)測、學(xué)者科研水平評估等相關(guān)的評價指標(biāo)和評價模式。

【關(guān)鍵詞】學(xué)科評估；評價指標(biāo)；ESI；InCites

Investigation Into Discipline Evaluation Method Based on the ESI and InCites

——Case Engineering Disciplines of Jiangsu Normal University

YANG Guang

（Library of JiangSu Normal University， Xuzhou Jiangsu China 221116，China）

【Abstract】Provided in ESI and InCites discipline evaluation index data as the basis， analysis of Engineering characteristics and disciplines of Jiangsu normal university， from the scientific research productivity force， influence of scientific research， scientific research development， the scientific research innovation， etc.， are given for college scientific research evaluation， subject development forecast， to introduce and talent evaluation and related evaluation indicators and evaluation model.

【Key words】Discipline evaluation； Evaluation index； ESI； InCites

1 ESI和InCites作為學(xué)科評價工具概述

基本科學(xué)指標(biāo)數(shù)據(jù)庫（Essential Science Indica-tors，ESI）是由美國科技信息所（ISI）推出的衡量科學(xué)研究績效、跟蹤科學(xué)發(fā)展趨勢的基本分析評價工具，是基于ISI科學(xué)引文索引數(shù)據(jù)庫（SCI）和社會科學(xué)引文索引數(shù)據(jù)庫（SSCI）所收錄的學(xué)術(shù)期刊而建立的計量分析數(shù)據(jù)庫[1]。教育部2012年開展的學(xué)科評估開始將ESI納入學(xué)科評估體系，將“ESI 高被引論文數(shù)”與最新發(fā)表的高水平期刊論文同時納入評價指標(biāo)，創(chuàng)立了學(xué)術(shù)論文評價的新質(zhì)量文化[2]。目前，ESI已被廣泛使用與科研績效評估中。

InCites數(shù)據(jù)庫基于Web of Science核心合集七大索引數(shù)據(jù)庫，對數(shù)據(jù)進行重新加工整理，從中提供了多元化的分析評價指標(biāo)，可以發(fā)現(xiàn)重點學(xué)科或優(yōu)勢學(xué)科，跟蹤和評估機構(gòu)的科研績效，與同行機構(gòu)開展對標(biāo)分析，分析本機構(gòu)的科研合作開展情況，挖掘機構(gòu)內(nèi)高影響力和高潛力的研究人員[3]。

本文利用ESI和InCites提供的評估數(shù)據(jù)，分析江蘇師范大學(xué)Engineering學(xué)科分布特點；探討師范大學(xué)Engineering學(xué)科中科研重點所在；預(yù)測未來兩年發(fā)文量，給出學(xué)者科研水平評價方法。

2 江蘇師范大學(xué)Engineering學(xué)科概況

2005年1月至2016年4月的10年4個月期間，江蘇師范大學(xué)共發(fā)表InCites收錄Engineering學(xué)科文獻187篇，總被引1570次，篇均被引文獻8.4次，被引百分比73.41%，文獻作者424人。2009年至今，江蘇師范大學(xué)的發(fā)文量和被引頻次呈逐年穩(wěn)定上升趨勢。

2.1 分析學(xué)科分布與重點院系

ESI數(shù)據(jù)庫基于Web of science核心合集的七大索引數(shù)據(jù)庫，對其中的數(shù)據(jù)按出版物進行統(tǒng)計和指標(biāo)計算。ESI將Web of Science的核心合集中的200多個小學(xué)科聚類為22個大學(xué)科領(lǐng)域。在ESI與SCI分類體系對比中，發(fā)現(xiàn)ESI雖然擺脫了SCI龐大的分類體系，但ESI文獻分類體系對文獻內(nèi)容揭示不準確、揭示程度不夠[4]。直接使用ESI的22個學(xué)科領(lǐng)域分析學(xué)校的學(xué)科顯得比較粗糙，不能明確的了解學(xué)校的科研重點和科研優(yōu)勢所在。而通常高校是以學(xué)院或?qū)I(yè)為單位來設(shè)置學(xué)科重點、確定發(fā)展方向和調(diào)整政策等舉措，因此科研績效評估的單位定義到學(xué)院更有實際意義。

ESI學(xué)科領(lǐng)域和高校院系的設(shè)置之間的學(xué)科差異導(dǎo)致需要在二者之間進行轉(zhuǎn)換。轉(zhuǎn)換的方式可以采用作者或是論文為中介兩種方法。ESI以期刊分類來決定論文分類，因此以論文為轉(zhuǎn)換中介實質(zhì)上是以期刊為中介進行轉(zhuǎn)換。比較InCites數(shù)據(jù)庫中的12種學(xué)科分類模式，發(fā)現(xiàn)研究方向是Web of Science下的所有產(chǎn)品數(shù)據(jù)庫都使用的一套分類方法，共分為156個研究方向[5]。研究方向較ESI分類具有更高精度的細分學(xué)科分類方法，更適合于在較小規(guī)模的研究成果上應(yīng)用文獻計量學(xué)的統(tǒng)計方法。同時該分類方法與其他分類方法比較更為接近江蘇師范大學(xué)的院系設(shè)置。因此，本文采用的數(shù)據(jù)在分析過程中使用了以期刊為中介進行轉(zhuǎn)換，同時對于個別文獻采用作者輔助分類的方法。

分析步驟：將從InCites中下載的師范大學(xué)ESI分類體系中Engineering類文獻，放入Web of Science平臺檢索并將檢索結(jié)果存入InCites中，并在InCites中重新歸類到Web of Science中的研究方向下，再根據(jù)江蘇師范大學(xué)學(xué)科設(shè)置的特點，將Web of Science的研究方向歸類到相關(guān)院系下。完成學(xué)院的文獻歸類后，重新統(tǒng)計相應(yīng)的指標(biāo)對院系科研績效進行評估。

通過計算比較分析，確定近五年發(fā)文主要分布于以下六個研究方向：ENGINEERING ELECTRICAL ELECTRONIC、ENGINEERING MU-

LTIDISCIPLINARY、MATHEMATICS APPLIED、AUTOMATION CONT-

ROL SYSTEMS、OPERATIONS RESEARCH MANAGEMENT SCIENCE、COMPUTER SCIENCE ARTIFICIAL INTELLIGENCE。這六個研究方向在近五年內(nèi)集中了江蘇師范大學(xué)Engineering學(xué)科的大部分文獻，并在近兩年內(nèi)發(fā)文增長率排名靠前。這些研究方向分別屬于數(shù)學(xué)與統(tǒng)計學(xué)院、物理與電子工程學(xué)院、計算機科學(xué)與技術(shù)學(xué)院、機電工程學(xué)院、電氣工程及自動化學(xué)院。這些學(xué)院是支撐江蘇師范大學(xué)Engineering學(xué)科的主要力量。

2.2 預(yù)測兩年內(nèi)科研生產(chǎn)力

環(huán)比增長率是用來計算本期統(tǒng)計數(shù)據(jù)與上一期數(shù)據(jù)比較的增長程度，常用于統(tǒng)計經(jīng)濟增長的程度，公式為：

環(huán)比增長速度=■×100%（1）

在對江蘇師范大學(xué)Engineering學(xué)科未來兩年內(nèi)科研生產(chǎn)力的預(yù)測上，引入了環(huán)比增長這一概念。為保證統(tǒng)計數(shù)據(jù)樣本的有效容積，半年為周期單位，逐一計算10年內(nèi)的每個周期單位的環(huán)比增長率，并以用曲線方程加以描述取值。為剔除小概率事件的影響，采用兩種措施來保證數(shù)據(jù)的穩(wěn)定：（1）對于浮動超過年平均值30%的周期應(yīng)予加權(quán)處理。（2）用環(huán)比增長數(shù)值構(gòu)筑曲線方程，并以方程的導(dǎo)數(shù)值來預(yù)計未來半年內(nèi)的發(fā)文量增長。經(jīng)計算，2016年江蘇師大科研生產(chǎn)力預(yù)計為38篇，2017年預(yù)計為43篇。

2.3 人才評估

InCites數(shù)據(jù)庫提供了引文影響力、h指數(shù)、CNCI和平均百分位等指標(biāo)來衡量科研工作者的科研水平。除了上述指標(biāo)外，在對江蘇師范大學(xué)Engineering學(xué)科實際評測過程中，還使用了用于縱向衡量學(xué)者個人科研能力發(fā)展指標(biāo)和橫向比較學(xué)者間科研能力的兩個指標(biāo)。

縱向指標(biāo)主要應(yīng)用于新引學(xué)者的科研績效的評估。近5年來，江蘇師范大學(xué)大力調(diào)整相關(guān)政策，引進了大批具有博士學(xué)位學(xué)者。學(xué)校引進人才的主要依據(jù)是以學(xué)者博士學(xué)位在讀期間取得的科研成果為標(biāo)準，期望學(xué)者在引進師范大學(xué)后發(fā)揮出同等或是更高水準的科研影響力。據(jù)此本文提出用引進人才的博士學(xué)位在讀期間科研產(chǎn)出和科研質(zhì)量的數(shù)據(jù)計算評估基線，作為學(xué)校對該學(xué)者的期望值，以學(xué)者引進后科研影響力與期望值的百分比作為衡量學(xué)者科研績效變化的指標(biāo)?？紤]到科研環(huán)境變更的適應(yīng)期，學(xué)者在引進第一年的科研產(chǎn)出變化會受多方面的影響，不能反映學(xué)者的真實科研水平，除有突出表現(xiàn)的學(xué)者外，一般不予統(tǒng)計在內(nèi)。

這種方式可以準確客觀的描述學(xué)者引進后是否達到了學(xué)校引進的預(yù)期目標(biāo)，是體現(xiàn)學(xué)者個人科研能力發(fā)展變化的參數(shù)，直觀的表示出引進人才在引進前后科研績效的變化。但不具有與其他學(xué)者橫向相比較的特點。

橫向指標(biāo)主要應(yīng)用于在職時間超過5年的學(xué)者。以學(xué)者所在學(xué)院的5年內(nèi)的科研績效相關(guān)指標(biāo)計算平均值，作為學(xué)者科研績效的基線。用學(xué)者相應(yīng)指標(biāo)與基線的百分比來對學(xué)者進行排名。實例見公式1和公式2。在不同學(xué)院間的學(xué)者進行比較時，應(yīng)考慮其學(xué)科特點造成科研成果產(chǎn)出量和被引周期的差異，因此數(shù)據(jù)處理前，會作學(xué)科歸一化的計算。

相對院系影響力=學(xué)者引文影響力/基數(shù)（學(xué)院平均引文影響力）×100%（2）

相對院系生產(chǎn)力=學(xué)者引發(fā)文量/基數(shù)（學(xué)院平均發(fā)文量）×100%（3）

在利用上述公式分析過程中，部分學(xué)者的統(tǒng)計數(shù)據(jù)（發(fā)文量、被引頻次）比較接近，難以區(qū)分，因此設(shè)計采用f（x）函數(shù)，將被引頻次數(shù)據(jù)歸于10為底的對數(shù)曲線上，并通過參數(shù)調(diào)整分布。最終采用的公式為：

學(xué)者科研能力=發(fā)文量×（4）

其中是將學(xué)者被引頻次歸于對數(shù)曲線的函數(shù)。

發(fā)文年限=|2017-文獻發(fā)表年|（5）

在公式4中，f（被引頻次）與發(fā)表年限的比值可視為加權(quán)后的年均，其權(quán)重大于發(fā)文量的權(quán)重（權(quán)重視為1）。公式體現(xiàn)出高被引的文獻會為學(xué)者科研能力增加更大比重，同時體現(xiàn)出越是新近發(fā)表的文獻在未來的年份中越能更多的為學(xué)者和學(xué)校的科研影響力提供更多貢獻。

3 結(jié)語

在《2012 中國大學(xué)評價研究報告》中 ESI 論文被首次納入大學(xué)評價指標(biāo)[6] 。其后ESI和InCites數(shù)據(jù)被廣泛應(yīng)用于高?？蒲锌冃гu估中。本文通過挖掘分析ESI和InCites數(shù)據(jù)庫提供的指標(biāo)數(shù)據(jù)來評估江蘇師范大學(xué)Engineering學(xué)科的科研績效。在分析學(xué)科優(yōu)勢時，對論文進行了學(xué)院的分類，由于兩種分類體系的差別，分類中，有部分論文分類存在分歧，但不會影響總體評估數(shù)據(jù)。評估學(xué)者的科研影響力，提供的分類指標(biāo)還不能完整體現(xiàn)學(xué)者科研效能。需要繼續(xù)改進。

【參考文獻】

[1]李茂茂.基于ESI的國內(nèi)外機構(gòu)農(nóng)業(yè)科學(xué)學(xué)科評價研究[J].圖書情報工作， 2011（2）：280-283.

[2]教育部.2012 年學(xué)科評估指標(biāo)體系五大改革措施[EB/OL].中國學(xué)位與研究生教育信息網(wǎng)，[2015-01-30].http：//www.cdgdc.edu.cn/xwyyjsjyxx/xxsbdxz/zjgd/276982.shtml.

[3]湯森路透.知識產(chǎn)權(quán)與科技[EB/OL].[2016-09-30].

[4]董琳.ESI文獻分類研究[J].圖書情報工作，2007，51（6）：113-115.

[5]InCites 數(shù)據(jù)庫常用指標(biāo)手冊湯森路透[M].

[6]騰訊教育.2012ESI-TOP論文排行榜揭曉清華大學(xué)高居榜首[EB/OL].（2012-01-09）.[2016-09-30].http：//edu.qq.com/a/20120109/000394.htm.

[責(zé)任編輯：朱麗娜]