去偽存真
——從ESI指標(biāo)談起

言 十

0 引 言

ESI（essential science indicators，基本科學(xué)指標(biāo)）[1]是建立在科睿唯安（Clarivate Analytics，原湯森路透知識(shí)產(chǎn)權(quán)與科技事業(yè)部）旗下數(shù)據(jù)庫(kù)Web of Science?（SCI/SSCI，涵蓋全球12 000多種期刊）的論文計(jì)量分析工具，于2001年推出。

ESI?針對(duì)22 個(gè)專業(yè)研究領(lǐng)域，利用最近10年的數(shù)據(jù)，每2個(gè)月更新一次，分別對(duì)國(guó)家、研究機(jī)構(gòu)、期刊、論文、科學(xué)家進(jìn)行統(tǒng)計(jì)分析和排序，主要指標(biāo)包括論文數(shù)、引文數(shù)、篇均被引頻次。對(duì)研究機(jī)構(gòu)而言，可以產(chǎn)生學(xué)科領(lǐng)域的排名；對(duì)學(xué)者個(gè)人，則可以得到高被引科學(xué)家（highly cited researchers）、高被引論文（highly cited papers）、熱點(diǎn)論文（hot pagers）。ESI試圖從引文分析的角度，“分析機(jī)構(gòu)、國(guó)家和期刊的論文產(chǎn)出和影響力，發(fā)現(xiàn)自然科學(xué)和社會(huì)科學(xué)領(lǐng)域中的重大發(fā)展趨勢(shì)，按研究領(lǐng)域?qū)?guó)家、期刊、論文和機(jī)構(gòu)進(jìn)行排名，評(píng)估潛在的合作機(jī)構(gòu)和具有潛力的人才”。

2009年，上海交通大學(xué)李明祿教授在全國(guó)高校計(jì)算機(jī)系主任/院長(zhǎng)論壇上做了“基于ESI淺析兩岸三地大學(xué)計(jì)算機(jī)學(xué)科”[2]的報(bào)告，ESI開始進(jìn)入國(guó)內(nèi)學(xué)術(shù)界大眾視野。隨后，ESI指標(biāo)得到教育主管部門的高度重視，并逐步成為國(guó)內(nèi)高校評(píng)價(jià)學(xué)科水平的重要標(biāo)準(zhǔn)，甚至，有多少學(xué)科進(jìn)入ESI前1%（或者1‰）成為主管部門和地方政府衡量大學(xué)辦學(xué)水平的重要條件。

應(yīng)該看到，作為論文客觀計(jì)量指標(biāo)，ESI指標(biāo)不只考慮發(fā)表論文數(shù)，還考慮了學(xué)術(shù)界比較重視的論文引用情況，比以前國(guó)內(nèi)論文評(píng)價(jià)只考慮SCI論文數(shù)和期刊影響因子，確實(shí)顯得更加合理，因此，在評(píng)價(jià)研究機(jī)構(gòu)、學(xué)者、論文的學(xué)術(shù)影響方面，的確可以起到一定的參考意義。ESI指標(biāo)被國(guó)內(nèi)學(xué)術(shù)界引入后，對(duì)高?？茖W(xué)研究，特別是學(xué)術(shù)論文，起到了一定的促進(jìn)作用。

然而，凡事皆有度。當(dāng)ESI指標(biāo)被行政部門采用作為重要標(biāo)準(zhǔn)之后，行政指揮棒的巨大威力使其對(duì)于大學(xué)和學(xué)科的重要性被無(wú)限提高，與此同時(shí)，其片面性也得到了放大。大學(xué)逐步明白，通過(guò)各種形式的資源投入、激勵(lì)措施甚至造假，ESI指標(biāo)可以在短期內(nèi)快速提升。ESI指標(biāo)的官方背書，為大學(xué)不顧一切提高ESI指標(biāo)提供巨大的誘惑。目前，高校追求ESI指標(biāo)，已經(jīng)演變成一場(chǎng)亂象。

1 國(guó)內(nèi)常用ESI指標(biāo)的內(nèi)涵

1）學(xué)科ESI排名1%和1‰。

某個(gè)研究機(jī)構(gòu)某學(xué)科領(lǐng)域（目前劃分為22個(gè)）排名參照指標(biāo)為總被引次數(shù)（citations）、論文數(shù)（papers）和篇均被引次數(shù)（citations per paper）。

2）高被引論文。

高被引論文是指同學(xué)科領(lǐng)域同年度中被引次數(shù)排在前1%的論文。數(shù)據(jù)是基于最近10年的引文數(shù)據(jù)。高被引論文反映某篇論文在某年度中在本學(xué)科領(lǐng)域的相對(duì)引用數(shù)。需要注意到，在同一學(xué)科領(lǐng)域，不同的研究方向有時(shí)很難進(jìn)行比較。此外，綜述性的文章容易形成高被引。

3）熱點(diǎn)論文。

熱點(diǎn)論文是指同學(xué)科領(lǐng)域最近兩個(gè)月內(nèi)被引次數(shù)排在前0.1%的論文，其依據(jù)的是某一學(xué)科領(lǐng)域最近兩年發(fā)表的論文數(shù)據(jù)。

4）高被引科學(xué)家。

高被引科學(xué)家是基于ESI數(shù)據(jù)庫(kù)中的高被引論文數(shù)據(jù)，于過(guò)去10年間在相應(yīng)學(xué)科領(lǐng)域發(fā)表高被引論文數(shù)量最多的科研人員。

2 當(dāng)前國(guó)內(nèi)對(duì)ESI的認(rèn)識(shí)誤區(qū)和存在的現(xiàn)象

ESI數(shù)據(jù)庫(kù)在一定程度上為研究機(jī)構(gòu)和研究人員發(fā)表論文和論文被引用情況提供了方便的查詢和統(tǒng)計(jì)，在衡量研究機(jī)構(gòu)和學(xué)者發(fā)表論文以及論文的影響力方面，有其合理性的一面，因此，被使用是可以理解的。然而，目前國(guó)內(nèi)從主管部門、地方政府到相當(dāng)一部分大學(xué)領(lǐng)導(dǎo)，未能科學(xué)、全面地看待ESI指標(biāo)，過(guò)于放大ESI指標(biāo)的作用，形成了一定的認(rèn)識(shí)誤區(qū)。

2.1 國(guó)內(nèi)對(duì)ESI指標(biāo)的認(rèn)識(shí)誤區(qū)

誤區(qū)一：ESI是國(guó)際公認(rèn)的學(xué)科評(píng)價(jià)標(biāo)準(zhǔn)。實(shí)際上，所謂公認(rèn)的國(guó)際標(biāo)準(zhǔn)，是一個(gè)以訛傳訛的錯(cuò)誤說(shuō)法。發(fā)達(dá)國(guó)家的大學(xué)從來(lái)不存在這樣一個(gè)標(biāo)準(zhǔn)。為了證實(shí)這個(gè)問(wèn)題，筆者專門咨詢了來(lái)自多個(gè)歐美發(fā)達(dá)國(guó)家近20所不同大學(xué)的教授，他們反饋的信息幾乎一致，國(guó)外大學(xué)根本沒(méi)有這樣一個(gè)標(biāo)準(zhǔn)，有的教授甚至還不清楚ESI是什么。所謂的國(guó)際公認(rèn)標(biāo)準(zhǔn)實(shí)際上是一個(gè)誤區(qū)。

誤區(qū)二：進(jìn)入ESI前1%的學(xué)科屬于國(guó)際領(lǐng)先學(xué)科，或者國(guó)際公認(rèn)的世界高水平學(xué)科。這是一個(gè)更大的誤區(qū)。一個(gè)學(xué)科的水平，如果有公認(rèn)標(biāo)準(zhǔn)，一定是由師資隊(duì)伍水平、學(xué)科作出的科學(xué)貢獻(xiàn)、培養(yǎng)的人才質(zhì)量等方面所構(gòu)成。ESI指標(biāo)只是體現(xiàn)了學(xué)術(shù)論文中的一部分（如果沒(méi)有造假的話）。誠(chéng)然，國(guó)際上領(lǐng)先的學(xué)科在ESI上的表現(xiàn)可能也會(huì)不錯(cuò)，但反之亦然并不成立。

本質(zhì)上，ESI指標(biāo)僅僅是一個(gè)論文計(jì)量工具，而論文僅是科研成果的一方面?？蒲性u(píng)估需要多元化的體系，ESI指標(biāo)只能是科研評(píng)估體系的一部分內(nèi)容，無(wú)法體現(xiàn)科研成果的全部，更無(wú)法承擔(dān)評(píng)價(jià)學(xué)科水平的任務(wù)。

還需要注意到，ESI劃分的22個(gè)學(xué)科領(lǐng)域和我們國(guó)家對(duì)一級(jí)學(xué)科的劃分并不對(duì)應(yīng)。例如，其工程學(xué)包括了我們?nèi)舾梢患?jí)學(xué)科；所有的社會(huì)科學(xué)各學(xué)科則被ESI的一個(gè)社會(huì)科學(xué)總論所包括。計(jì)算機(jī)科學(xué)所收錄的主要期刊則和計(jì)算機(jī)科學(xué)領(lǐng)域公認(rèn)的期刊/會(huì)議有很大偏差[3]。例如，計(jì)算機(jī)領(lǐng)域由于其自身發(fā)展迅速的特點(diǎn)，產(chǎn)生了一批聲譽(yù)很高的高水平學(xué)術(shù)會(huì)議，但這些會(huì)議論文都不在ESI指標(biāo)框架里。因此，把ESI指標(biāo)套用到國(guó)內(nèi)的一級(jí)學(xué)科并不合理。

2.2 政府對(duì)ESI指標(biāo)的導(dǎo)向政策

在近年教育主管部門和地方政府相關(guān)政策中，ESI指標(biāo)直接或間接得到充分的重視和體現(xiàn)，甚至被片面拔高地位。這些政策包括：①ESI指標(biāo)成為“雙一流”學(xué)科的重要遴選依據(jù)，如進(jìn)入ESI 1‰可以作為入選一流學(xué)科的充分條件；②ESI大學(xué)綜合排名（一所高校入選ESI前1%的學(xué)科數(shù)、入選ESI前1‰的學(xué)科數(shù)、ESI學(xué)科排名位次）決定“一流大學(xué)”建設(shè)的層次；③ESI指標(biāo)進(jìn)入教育部學(xué)科評(píng)估體系；④ESI被部分省份作為對(duì)高校重大學(xué)科建設(shè)項(xiàng)目的立項(xiàng)和驗(yàn)收條件或建設(shè)目標(biāo)[4-5]。

政府政策對(duì)大學(xué)是個(gè)指揮棒。在政府相關(guān)政策的引導(dǎo)下，追求在ESI指標(biāo)上的突破成為許多大學(xué)的學(xué)科建設(shè)規(guī)劃中的具體目標(biāo)（典型的是在學(xué)校學(xué)科建設(shè)規(guī)劃中明確提出多少學(xué)科進(jìn)入1%）。不少大學(xué)把提升ESI指標(biāo)作為一項(xiàng)工程來(lái)落實(shí)，采取的措施包括出臺(tái)ESI獎(jiǎng)勵(lì)政策[6]、召開ESI動(dòng)員會(huì)（啟動(dòng)會(huì)）、舉辦ESI專題講座（熟悉游戲規(guī)則）、制訂某些學(xué)科進(jìn)入1%的時(shí)間表、定期出ESI通報(bào)（公布各學(xué)科離1%的距離）。學(xué)科建設(shè)從一項(xiàng)長(zhǎng)期而復(fù)雜的任務(wù)，演變成了一套角逐性的游戲。某大學(xué)的ESI啟動(dòng)會(huì)甚至有這樣的發(fā)言：“……都已經(jīng)醒悟，開始熟悉游戲規(guī)則……”。對(duì)于國(guó)家高等教育來(lái)說(shuō)，這是多么令人擔(dān)憂的現(xiàn)象！

2.3 追求ESI指標(biāo)出現(xiàn)的學(xué)術(shù)不規(guī)范現(xiàn)象

為了快速提升ESI指標(biāo)，一些大學(xué)制訂出臺(tái)具有強(qiáng)烈刺激作用、不符合科研規(guī)律甚至學(xué)術(shù)規(guī)范的ESI獎(jiǎng)勵(lì)政策。典型做法如下：①學(xué)校明文規(guī)定研究生畢業(yè)發(fā)表的論文必須引用本單位ESI期刊論文一定次數(shù)，如某大學(xué)規(guī)定博士答辯需要“所發(fā)表SCI期刊論文引用本院計(jì)算機(jī)學(xué)科ESI論文累計(jì)10次”；②學(xué)校以金錢方式鼓勵(lì)校外同行引用本單位ESI期刊論文，按引用次數(shù)計(jì)算報(bào)酬，如某學(xué)校規(guī)定“引用本單位SCI論文的，給予獎(jiǎng)勵(lì)”，甚至有學(xué)校規(guī)定引用本單位學(xué)科的論文，按次數(shù)付酬金；③學(xué)校以聘任短期訪問(wèn)教師的名義，對(duì)論文和引用進(jìn)行變相購(gòu)買。不少學(xué)校為了提升本學(xué)科的ESI指標(biāo)，無(wú)所不用其極。這些所謂的“措施”，大多數(shù)實(shí)際上是拿不上臺(tái)面的低級(jí)伎倆，對(duì)大學(xué)學(xué)術(shù)生態(tài)的破壞作用是顯而易見的。

大學(xué)的政策對(duì)基層教學(xué)科研單位和科技工作者個(gè)人又造成了誘導(dǎo)。在追求ESI指標(biāo)巨大的利益驅(qū)使下，除了利用上述單位政策外，一些學(xué)者采用了不符合學(xué)術(shù)規(guī)范甚至造假的辦法提高引用數(shù)，制造高被引論文、熱點(diǎn)論文。例如，同行、朋友間采取利益交換的互相引用，建立互相引用利益共同體（微信群等），用隱蔽甚至公開的形式要求同行引用自己的論文，利用審稿人的權(quán)利要求作者引用等。一時(shí)，學(xué)術(shù)論文引用怪狀迭出。一些論文的參考文獻(xiàn)數(shù)量令人驚奇，一些引用毫無(wú)邏輯聯(lián)系，甚至出現(xiàn)風(fēng)馬牛不相及的跨領(lǐng)域引用……

在上述不符合學(xué)術(shù)規(guī)范的政策、拿不上臺(tái)面的造假手段共同作用下，一些學(xué)校某一學(xué)科發(fā)表論文數(shù)、被引數(shù)、ESI高被引論文數(shù)、熱點(diǎn)論文數(shù)突飛猛進(jìn)。以計(jì)算機(jī)學(xué)科為例，一些原本名不見經(jīng)傳的學(xué)校ESI指標(biāo)進(jìn)步之神速令人目瞪口呆。筆者以5年作為統(tǒng)計(jì)區(qū)間檢索發(fā)現(xiàn)，有的學(xué)校計(jì)算機(jī)學(xué)科這些指標(biāo)和10年前相比，增長(zhǎng)超過(guò)100倍。作為參照，國(guó)內(nèi)計(jì)算機(jī)學(xué)科力量比較強(qiáng)的清華大學(xué)、北京大學(xué)、浙江大學(xué)等（在教育部學(xué)位與研究生教育發(fā)展中心組織的全國(guó)第四輪學(xué)科評(píng)估中均評(píng)為最高等級(jí)A+），則只增長(zhǎng)幾倍。那些突飛猛進(jìn)的進(jìn)步背后所隱藏的含義，對(duì)學(xué)術(shù)界而言都是心知肚明的。

3 ESI作為學(xué)科評(píng)價(jià)標(biāo)準(zhǔn)的負(fù)面影響與分析

誠(chéng)然，ESI作為一種論文指標(biāo)工具，對(duì)于以發(fā)表論文為主要目的的研究的促進(jìn)作用是明顯的，但是ESI指標(biāo)僅著眼于論文發(fā)表在哪里、被多少人引用，并不能全面反映研究機(jī)構(gòu)、學(xué)者、論文的科學(xué)貢獻(xiàn)；另一方面，ESI指標(biāo)客觀上方便作假。從科學(xué)的角度，這樣的指標(biāo)是不宜賦予很高的權(quán)值的。

ESI指標(biāo)官方化給大學(xué)帶來(lái)了顯而易見的負(fù)面影響。從目前的情況來(lái)看，對(duì)已經(jīng)出現(xiàn)的負(fù)面影響可以作如下概括。

從國(guó)家層面，不僅造成了國(guó)家資源錯(cuò)配和人力、物力、財(cái)力的巨大浪費(fèi)，更主要的是敗壞了學(xué)術(shù)風(fēng)氣?？茖W(xué)研究有其自身的規(guī)律?？茖W(xué)研究成果也有多種展示形式，論文僅僅是其中一種，ESI更只是論文的某個(gè)方面。過(guò)分強(qiáng)調(diào)論文甚至某個(gè)論文指標(biāo)，必然會(huì)貶低科學(xué)研究成果的其他展示形式，對(duì)科研工作形成錯(cuò)誤導(dǎo)向。長(zhǎng)期下去，國(guó)家的科技就要出問(wèn)題。

從大學(xué)層面，將大學(xué)從服務(wù)國(guó)家需求、服務(wù)社會(huì)發(fā)展引導(dǎo)到片面追求某個(gè)論文指標(biāo)的道路上。由于采用各種手段追求ESI指標(biāo)可以在短時(shí)間內(nèi)起到立竿見影的效果（特別是對(duì)于許多原本實(shí)力不夠強(qiáng)的大學(xué)，ESI指標(biāo)更是提供了一種“彎道超車”的可能），許多大學(xué)不再遵循科研規(guī)律，而是采取運(yùn)動(dòng)式抓ESI指標(biāo)，營(yíng)造ESI大干快上的氣氛，各種ESI新聞、ESI政策、ESI動(dòng)態(tài)充斥校園，使得科研工作越來(lái)越功利化，和大學(xué)應(yīng)有的學(xué)術(shù)氛圍背道而馳，長(zhǎng)此下去對(duì)于大學(xué)科學(xué)研究乃至于整個(gè)大學(xué)功能的破壞作用是巨大的。

從學(xué)科層面，將學(xué)科建設(shè)引入歧路。學(xué)科綜合實(shí)力的提高，是一個(gè)漫長(zhǎng)而艱難的過(guò)程。學(xué)科建設(shè)也有極其豐富的內(nèi)涵。用ESI指標(biāo)衡量學(xué)科水平，使人們以為學(xué)科建設(shè)就是提升ESI指標(biāo)，這對(duì)學(xué)科建設(shè)起到一個(gè)錯(cuò)誤的導(dǎo)向作用。采用造假的方式提高ESI指標(biāo)，則從根本上破壞了學(xué)科聲譽(yù)。

從學(xué)者個(gè)人層面，誘導(dǎo)了學(xué)術(shù)不端行為，影響了學(xué)者個(gè)人聲譽(yù)。作為學(xué)者個(gè)體，期望多發(fā)表論文、論文被引數(shù)多、高被引論文和熱點(diǎn)論文多無(wú)可非議，也能提高學(xué)者個(gè)人在學(xué)術(shù)同行中的影響力，但采取不符合學(xué)術(shù)規(guī)范甚至是學(xué)術(shù)腐敗的手段提高這些指標(biāo)，違背了科研工作者應(yīng)有的學(xué)術(shù)道德；況且，不符合學(xué)術(shù)規(guī)范的引用總是會(huì)留下蛛絲馬跡，在信息化社會(huì)是難以隱形的。做得越多，敗露的可能性也越大，因此這實(shí)際上是一件風(fēng)險(xiǎn)很大的事情。

4 建議與呼吁

國(guó)內(nèi)追求ESI指標(biāo)所產(chǎn)生的亂象以及給學(xué)術(shù)環(huán)境帶來(lái)的弊端，需要引起有關(guān)部門的重視和深思。為了扭轉(zhuǎn)當(dāng)前的亂象，筆者建議與呼吁：

（1）從教育主管部門、地方政府、高校到教師，客觀看待ESI等論文評(píng)價(jià)指標(biāo)，消除當(dāng)前部分存在的將ESI和學(xué)科水平畫等號(hào)的錯(cuò)誤認(rèn)識(shí)。去偽存真，回歸科學(xué)，扎扎實(shí)實(shí)做好學(xué)科建設(shè)。

（2）落實(shí)教育部清理“五唯”文件，建立科學(xué)的高校教學(xué)科研與人才評(píng)價(jià)體系。高?？茖W(xué)研究的政策應(yīng)該著眼于鼓勵(lì)真正的創(chuàng)新，為創(chuàng)新研究提供良好的環(huán)境和氛圍。一切的科研評(píng)價(jià)方法均應(yīng)圍繞這一目標(biāo)?？蒲性u(píng)價(jià)是一個(gè)高度復(fù)雜的過(guò)程，不能指望用少數(shù)幾個(gè)數(shù)量化指標(biāo)客觀反映。國(guó)際上高水平大學(xué)所采用的“同行評(píng)價(jià)”，給我們提供了有益參考。

（3）呼吁教育主管部門、地方政府與高校糾偏由于ESI等指標(biāo)帶來(lái)的謬誤現(xiàn)象，停止當(dāng)前高校這場(chǎng)轟轟烈烈的追求ESI指標(biāo)運(yùn)動(dòng)，努力給科技人員營(yíng)造一個(gè)寬松而安靜的科研環(huán)境。建議主管部門和地方政府將各類官方建設(shè)規(guī)劃、評(píng)估、學(xué)科遴選等相關(guān)文件和辦法中單列的ESI指標(biāo)剔除；建議高校取消各種不符合學(xué)術(shù)規(guī)范的ESI指標(biāo)激勵(lì)政策和措施。

（4）呼吁學(xué)術(shù)界與教育界共同努力，努力營(yíng)造風(fēng)清氣正的學(xué)術(shù)氛圍；呼吁廣大教師和科技工作者追求科學(xué)，樹立良好學(xué)風(fēng)，進(jìn)行真正的創(chuàng)新研究，把論文寫在中國(guó)大地上。

最后，讓我們重溫一下古德哈特定律（Goodhart's law[7]）：當(dāng)一項(xiàng)指標(biāo)變成目標(biāo)，它將不再是一個(gè)好的指標(biāo)（When a measure becomes a target,it ceases to be a good measure）。