NSTL國(guó)外開放資源評(píng)價(jià)實(shí)踐*

顏蘊(yùn)，續(xù)玉紅，劉敏娟，石瑾，丁遒勁，尹高磊

（1. 中國(guó)農(nóng)業(yè)科學(xué)院農(nóng)業(yè)信息研究所，北京 100081；2. 中國(guó)科學(xué)技術(shù)信息研究所，北京 100038；3. 中國(guó)科學(xué)院文獻(xiàn)情報(bào)中心，北京 100190）

NSTL國(guó)外開放資源評(píng)價(jià)實(shí)踐*

顏蘊(yùn)1，續(xù)玉紅1，劉敏娟1，石瑾1，丁遒勁2，尹高磊3

（1. 中國(guó)農(nóng)業(yè)科學(xué)院農(nóng)業(yè)信息研究所，北京 100081；2. 中國(guó)科學(xué)技術(shù)信息研究所，北京 100038；3. 中國(guó)科學(xué)院文獻(xiàn)情報(bào)中心，北京 100190）

在介紹國(guó)內(nèi)外開放獲取資源評(píng)價(jià)研究進(jìn)展和工作實(shí)踐的基礎(chǔ)上，依據(jù)國(guó)家科技圖書文獻(xiàn)中心（NSTL）開放獲取資源建設(shè)的目標(biāo)和需求，提出開放獲取期刊、會(huì)議錄、科技報(bào)告、圖書、學(xué)位論文、課件等資源評(píng)價(jià)指標(biāo)的設(shè)定。介紹了NSTL開放獲取資源評(píng)價(jià)原則、框架、工作流程及規(guī)范控制要點(diǎn)，最后對(duì)開放獲取資源評(píng)價(jià)實(shí)踐進(jìn)行了討論。

開放資源；質(zhì)量；影響力；開放性；評(píng)價(jià)

1　引言

隨著學(xué)術(shù)出版和交流模式的開放步伐不斷加快，開放獲取期刊等開放資源的數(shù)量持續(xù)穩(wěn)步增長(zhǎng)。有數(shù)據(jù)表明，開放獲取期刊的數(shù)量已超過(guò)2萬(wàn)種，DOAJ收錄的期刊達(dá)10400多種［1］，DOAB收錄的圖書已有3275種［2］，而且開放學(xué)術(shù)資源種類越來(lái)越多樣化，涉及期刊、機(jī)構(gòu)知識(shí)庫(kù)、會(huì)議論文、學(xué)位論文、圖書、研究報(bào)告等眾多類型。

雖然開放資源的數(shù)量及種類越來(lái)越多，但質(zhì)量卻良莠不齊。2013年10月《科學(xué)》（Science）發(fā)表了一份臥底調(diào)查，發(fā)現(xiàn)許多開放出版期刊缺乏嚴(yán)格的論文質(zhì)量審查［3］；美國(guó)科羅拉多大學(xué)圖書館館員Jeffry Beal調(diào)查并揭發(fā)了眾多的欺詐型開放獲取出版社及期刊，這類期刊假借開放出版名義為收取論文處理費(fèi)而采用多種欺詐手段故意放松質(zhì)量控制，編列虛假的編委會(huì)，惡意模仿知名期刊刊名和網(wǎng)站內(nèi)容結(jié)構(gòu)等［4］。開放資源除了質(zhì)量差異較大，其使用權(quán)限及數(shù)據(jù)可再利用性方面也存在很大的不同。正是由于開放資源質(zhì)量、使用權(quán)限及數(shù)據(jù)可再利用性等方面存在的極大差別，且目前沒(méi)有公認(rèn)的遴選標(biāo)準(zhǔn)，為科研人員使用以及圖書館的資源建設(shè)帶來(lái)較大困難，極大的限制了開放資源的整合及利用。

本文基于NSTL國(guó)外開放資源建設(shè)工作的具體實(shí)踐，對(duì)6種類型國(guó)外開放資源的遴選指標(biāo)及評(píng)價(jià)方法進(jìn)行調(diào)研和分析，設(shè)計(jì)了開放資源質(zhì)量評(píng)價(jià)指標(biāo)，為NSTL國(guó)外開放資源建設(shè)的質(zhì)量和服務(wù)能力提供基礎(chǔ)保障。

2　開放資源評(píng)價(jià)調(diào)研

開放資源主要指信息資源存放在網(wǎng)絡(luò)上，并通過(guò)網(wǎng)絡(luò)向用戶開放，用戶基本不受限即可自由獲得和使用的信息資源。開放資源按發(fā)布方式分為開放獲取出版、開放獲取存檔兩種類型，按資源類型包括開放期刊、會(huì)議文獻(xiàn)、學(xué)位論文、圖書、研究報(bào)告、課件、產(chǎn)業(yè)信息、機(jī)構(gòu)知識(shí)庫(kù)、科學(xué)數(shù)據(jù)、信息工具等。

本文涉及開放資源評(píng)價(jià)對(duì)象主要包括期刊、會(huì)議、學(xué)位論文、圖書、研究報(bào)告、課件等6種類型。其中開放期刊、開放圖書為開放出版資源，開放學(xué)位論文、開放課件為倉(cāng)儲(chǔ)類開放資源，開放會(huì)議和開放研究報(bào)告則界于兩者之間，既可以是開放出版資源，也可以是開放倉(cāng)儲(chǔ)資源。

自2002年布達(dá)佩斯會(huì)議以來(lái)，開放資源迅猛發(fā)展，開放資源的評(píng)價(jià)也相應(yīng)開展。由于評(píng)價(jià)者對(duì)開放資源評(píng)價(jià)目標(biāo)不同，評(píng)價(jià)視角和評(píng)價(jià)內(nèi)容不盡相同，所采用的評(píng)價(jià)指標(biāo)和方法上有較大的差別。在開放資源的類型上，針對(duì)開放期刊的評(píng)價(jià)研究最為豐富，其它類型的開放資源較少涉及。

2.1國(guó)外開放資源評(píng)價(jià)研究調(diào)研

2004年Thomson Scientific報(bào)道了OA期刊的學(xué)術(shù)影響力，研究表明OA期刊與非OA期刊在影響因子方面不存在差異，因?yàn)镺A期刊中有影響因子較高的期刊［5］。Turk.N.將被引頻次作為評(píng)價(jià)OA期刊引文影響的指標(biāo)，在文獻(xiàn)綜述的基礎(chǔ)上，討論了被引頻次收集的方法，并主要分析了圖書館學(xué)情報(bào)學(xué)OA期刊的引文影響［6］。2012年，Shotton D.提出新時(shí)期期刊評(píng)價(jià)的5個(gè)標(biāo)準(zhǔn)：同行評(píng)議、開放獲取、內(nèi)容豐富化程度、數(shù)據(jù)集、計(jì)算機(jī)可讀元數(shù)據(jù)［7］。近年來(lái)，一些OA及商業(yè)出版社如PLOS、BMC、Science、Nature等采用替代計(jì)量分析（Altmetrics）對(duì)單篇論文的學(xué)術(shù)影響力進(jìn)行評(píng)價(jià)［8］。

在開放性研究和實(shí)踐中，以2012年學(xué)術(shù)出版與學(xué)術(shù)資源聯(lián)盟（SPARC）和美國(guó)科學(xué)公共圖書館（PLOS）協(xié)作推出的評(píng)價(jià)開放度指南《開放獲取頻譜》（Open Access Spectrum）最為全面，將“是否開放”發(fā)展到“開放度有多高”層面，方便靈活判定開放資源的開放程度［9］?！堕_放獲取頻譜》出現(xiàn)后，一些開放獲取集成平臺(tái)對(duì)期刊的開放性提出了新的遴選評(píng)價(jià)要求。如DOAJ要求期刊開放性要符合開放獲取頻譜的一定層次，例如閱讀權(quán)在層次1、再利用權(quán)在層次3［10］。

2.2國(guó)內(nèi)開放資源研究調(diào)研

2005年，馬景娣［11］對(duì)被SSCI數(shù)據(jù)庫(kù)收錄的9種社會(huì)科學(xué)OA期刊進(jìn)行了調(diào)查，統(tǒng)計(jì)了它們近年來(lái)各項(xiàng)影響力指標(biāo)（包括被引頻次、影響因子、即年指數(shù)、被引半衰期等），并統(tǒng)計(jì)期刊影響因子在相應(yīng)學(xué)科中的排名，對(duì)社會(huì)科學(xué)OA期刊的影響力進(jìn)行了研究。2006年，劉輝從學(xué)科分布、檢索特性、影響因子和相關(guān)性的角度對(duì)國(guó)外幾個(gè)主要的OA期刊檢索平臺(tái)進(jìn)行了評(píng)價(jià)分析［12］；劉海霞等深入、具體地綜述了OA期刊學(xué)術(shù)質(zhì)量的分析與評(píng)價(jià)，包括OA期刊的影響因子、即年指數(shù)、引文優(yōu)勢(shì)以及影響因子和即年指數(shù)百分位數(shù)排序的比較［13］；2008年，張紅芹等以化學(xué)類開放期刊為例，構(gòu)建了開放期刊評(píng)價(jià)指標(biāo)體系［14］；2009年，胡德華從引文的角度出發(fā)，采用影響因子（IF）百分位數(shù)排序、即年指數(shù)百分位數(shù)排序、平均IF、平均即年指數(shù)、平均載文量、平均被引頻次等指標(biāo)，對(duì)生物醫(yī)學(xué)類OA期刊的學(xué)術(shù)影響力進(jìn)行了評(píng)價(jià)研究［15］；2012年，顧立平等從質(zhì)量水平、開放程度和服務(wù)能力方面對(duì)開放獲取期刊評(píng)價(jià)指標(biāo)進(jìn)行研究［16］；2013年，黃金霞等從開放資源內(nèi)容、管理、利用、技術(shù)、反饋及個(gè)性化指標(biāo)等進(jìn)行評(píng)價(jià)實(shí)踐，構(gòu)建了開放期刊評(píng)價(jià)體系［17］；黃永文等對(duì)開放資源再利用權(quán)益和技術(shù)方式進(jìn)行了分析［18］；顧立平從Altmetrics計(jì)量方法研究開放數(shù)據(jù)、論文影響力［19］；2015年，劉菊紅等介紹了應(yīng)用Altmetrics、Article Level Metrics（ALMs）兩種基于單篇論文質(zhì)量評(píng)價(jià)體系［20］。

綜合國(guó)內(nèi)外對(duì)開放資源評(píng)價(jià)指標(biāo)和方法，開放資源評(píng)價(jià)指標(biāo)分屬于質(zhì)量和影響力、開放性、服務(wù)性三個(gè)方面，如表1所示。在構(gòu)建評(píng)價(jià)體系時(shí)所采用的方法主要是層次分析法［21］、主成分分析法［22］、質(zhì)量模型等［23］。

表1　開放資源評(píng)價(jià)指標(biāo)

3　開放資源評(píng)價(jià)指標(biāo)分析

3.1開放度評(píng)價(jià)指標(biāo)分析

對(duì)開放資源開放度評(píng)價(jià)最全面的表述為2012年SPARC和PLOS協(xié)作推出的《開放獲取頻譜》，該頻譜是一個(gè)六維矩陣，包括閱讀權(quán)、再利用權(quán)、版權(quán)、作者發(fā)布權(quán)、自動(dòng)發(fā)布及機(jī)讀性指標(biāo)，可組成八千多種不同開放度的組合形式，該頻譜被稱為開放資源開放度評(píng)估的指南性文件［9］。

3.2質(zhì)量和影響力評(píng)價(jià)指標(biāo)分析

在對(duì)開放資源進(jìn)行質(zhì)量和影響力評(píng)價(jià)時(shí)，采用了多種評(píng)價(jià)指標(biāo)或要素，本文根據(jù)NSTL開放資源建設(shè)的目標(biāo)、需求，將這些指標(biāo)按評(píng)價(jià)對(duì)象進(jìn)行歸納，分別按“資源母體”、“單篇或數(shù)據(jù)”、“出版者”、“創(chuàng)作者”表述如下。

3.2.1對(duì)“資源母體”的評(píng)價(jià)

這里所指“資源母體”主要為開放期刊、開放會(huì)議錄等套裝類資源，采用的評(píng)價(jià)指標(biāo)如表2所示。

表2　“資源母體”評(píng)價(jià)指標(biāo)

3.2.2對(duì)“單篇或數(shù)據(jù)”的新型計(jì)量評(píng)價(jià)

為了解決將“資源母體”如期刊影響因子等指標(biāo)用于評(píng)價(jià)單篇論文或所產(chǎn)生的缺陷，學(xué)者們提出采用對(duì)開放資源單篇論文、單個(gè)片段或單項(xiàng)數(shù)據(jù)等進(jìn)行質(zhì)量評(píng)價(jià)來(lái)替代對(duì)“資源母體”的評(píng)價(jià)，目前所應(yīng)用和實(shí)踐的指標(biāo)主要為Altmetrics和ALMs，顯示四類評(píng)價(jià)內(nèi)容：

（1）使用數(shù)據(jù)（下載量、閱讀量）；

（2）專家或用戶意見；

（3）引用數(shù)量；

（4）替代計(jì)量（轉(zhuǎn)載、鏈接、標(biāo)簽等）。

3.2.3對(duì)“出版者”的評(píng)價(jià)

對(duì)于開放出版資源，出版者的權(quán)威性和專業(yè)性不同程度影響開放出版物的質(zhì)量，特別是圖書、會(huì)議錄等開放資源，出版者評(píng)價(jià)顯得尤為關(guān)鍵。針對(duì)出版者的評(píng)價(jià)要素有三個(gè)：

（1）是否為圖書情報(bào)機(jī)構(gòu)公認(rèn)的掠奪性出版社；

（2）是否為圖書情報(bào)機(jī)構(gòu)認(rèn)可的權(quán)威出版社；

（3）是否為學(xué)科領(lǐng)域核心出版機(jī)構(gòu)。

3.2.4對(duì)“創(chuàng)作者”的評(píng)價(jià)

開放資源的創(chuàng)作者包括個(gè)人和機(jī)構(gòu)，其知名度和水平對(duì)資源質(zhì)量有較大影響，開放資源中的學(xué)位論文、課件、圖書、會(huì)議錄等可利用創(chuàng)作者知名度和水平進(jìn)行評(píng)價(jià)。常用評(píng)價(jià)指標(biāo)有三個(gè)：

（1）QS世界大學(xué)學(xué)科排名（QS World University Rankings）；

（2）ESI基本科學(xué)指標(biāo)（ISI Essential Science Indicators）；

（3）是否為知名學(xué)者。

4　NSTL開放資源評(píng)價(jià)指標(biāo)設(shè)立

作為國(guó)家級(jí)文獻(xiàn)服務(wù)機(jī)構(gòu)，NSTL認(rèn)識(shí)到開放資源的重要性，于2007年開始進(jìn)行“開放獲取期刊集成檢索系統(tǒng)”和“開放獲取會(huì)議資源”的建設(shè)與服務(wù)。隨著開放資源種類和數(shù)量大幅度增長(zhǎng)，2014年起NSTL將采集、評(píng)價(jià)、整合各類開放科技資源，建設(shè)開放資源集成服務(wù)平臺(tái)作為資源建設(shè)的重點(diǎn)工作之一。

在國(guó)外開放資源建設(shè)工作中，研究制定各類開放資源遴選與評(píng)價(jià)指標(biāo)和方法，對(duì)于實(shí)現(xiàn)開放資源建設(shè)和可持續(xù)服務(wù)目標(biāo)，為用戶和資源機(jī)構(gòu)提供有效的增值服務(wù)，均有十分重要的意義。

4.1評(píng)價(jià)原則

（1）規(guī)模化建設(shè)原則：強(qiáng)調(diào)開放資源的規(guī)模和覆蓋面，設(shè)立開放資源建設(shè)基本屬性要求。即只要開放資源在學(xué)術(shù)性、資源類型、學(xué)科范疇、語(yǔ)種、開放度等方面符合基本要求就可納入建設(shè)內(nèi)容；

（2）定性與定量評(píng)價(jià)原則：開放資源評(píng)價(jià)依據(jù)開放度、質(zhì)量和影響力指標(biāo)進(jìn)行，采取定性與定量相結(jié)合評(píng)價(jià)方式，通過(guò)指標(biāo)數(shù)據(jù)采集，單個(gè)指標(biāo)或不同指標(biāo)間的組合，分級(jí)進(jìn)行評(píng)價(jià)；

（3）可操作性原則：引入館員和用戶經(jīng)驗(yàn)指標(biāo)，以解決部分類型開放資源評(píng)價(jià)參考數(shù)據(jù)缺乏的問(wèn)題；考慮到單篇論文評(píng)價(jià)的工作量和難度，暫不將單篇評(píng)價(jià)內(nèi)容納入評(píng)價(jià)指標(biāo)。

4.2評(píng)價(jià)框架

建立面向服務(wù)的評(píng)價(jià)框架，評(píng)價(jià)內(nèi)容包括開放性評(píng)價(jià)、質(zhì)量和影響力評(píng)價(jià)兩部分內(nèi)容，按資源類型設(shè)立多項(xiàng)評(píng)價(jià)指標(biāo)，側(cè)重各類開放資源評(píng)價(jià)指標(biāo)數(shù)據(jù)的采集和服務(wù)可見性。如：質(zhì)量和影響力指標(biāo)可服務(wù)于用戶，開放度指標(biāo)可供建設(shè)機(jī)構(gòu)參考以選擇不同的工作策略等。開放資源評(píng)價(jià)框架如圖1所示。

圖1　開放資源評(píng)價(jià)框架

4.3開放資源收錄必備條件

圍繞NSTL開放資源建設(shè)的目標(biāo)，達(dá)到開放資源建設(shè)的全面性、規(guī)模化，遴選條件設(shè)基本門檻，即劃定一個(gè)開放資源的“收錄”范圍。此范圍的設(shè)定包括針對(duì)6種開放資源設(shè)定的遴選的基本屬性要求及針對(duì)不同資源類型設(shè)定的必備條件，主要包括以下幾個(gè)條件：

（1）資源類型：包括期刊、會(huì)議錄、圖書、研究報(bào)告、學(xué)位論文、課件等6種學(xué)術(shù)全文型資源；

（2）開放度：沒(méi)有特殊的再利用限制；

（3）學(xué)科類型：符合NSTL學(xué)科建設(shè)范疇；

（4）文種類型：正文以英文為主要語(yǔ)言；

（5）期刊具有PISSN或EISSN、圖書具有ISBN號(hào)、學(xué)位論文和課件要求所屬學(xué)校在中國(guó)教育部涉外監(jiān)管信息網(wǎng)和中國(guó)留學(xué)網(wǎng)公布的正規(guī)海外院校的名單中。

4.4開放度評(píng)價(jià)指標(biāo)

不同資源類型所設(shè)立的開放性評(píng)價(jià)指標(biāo)一致。參照《開放獲取頻譜》，對(duì)開放資源設(shè)立再利用權(quán)、機(jī)讀性及閱讀權(quán)3項(xiàng)內(nèi)容進(jìn)行評(píng)價(jià)，如表3所示。

表3　開放度評(píng)價(jià)指標(biāo)

4.5質(zhì)量和影響力評(píng)價(jià)指標(biāo)

4.5.1開放期刊

開放期刊的質(zhì)量與影響力評(píng)價(jià)指標(biāo)共設(shè)4項(xiàng)內(nèi)容，9個(gè)指標(biāo)，如表4所示。

表4　開放期刊質(zhì)量和影響力評(píng)價(jià)指標(biāo)

4.5.2開放圖書

開放圖書質(zhì)量與影響力指標(biāo)共設(shè)4類內(nèi)容，6個(gè)指標(biāo)，如表5所示。

表5　開放圖書質(zhì)量與影響力評(píng)價(jià)指標(biāo)

4.5.3開放會(huì)議

開放會(huì)議錄質(zhì)量與影響力指標(biāo)共設(shè)4類內(nèi)容，5個(gè)指標(biāo)，如表6所示。

表6　開放會(huì)議錄質(zhì)量和影響力評(píng)價(jià)指標(biāo)

4.5.4開放報(bào)告

開放報(bào)告質(zhì)量與影響力評(píng)價(jià)設(shè)3類內(nèi)容，4個(gè)指標(biāo)，如表7所示。

表7 開放報(bào)告質(zhì)量與影響力評(píng)價(jià)指標(biāo)

4.5.5開放學(xué)位論文

開放學(xué)位論文質(zhì)量與影響力評(píng)價(jià)共設(shè)2類內(nèi)容，3個(gè)指標(biāo)，如表8所示。

表8　開放學(xué)位論文質(zhì)量和影響力評(píng)價(jià)指標(biāo)

4.5.6開放課件

開放課件質(zhì)量與影響力評(píng)價(jià)共設(shè)2類內(nèi)容，3個(gè)指標(biāo)，如表9所示。

表9　開放課件質(zhì)量和影響力評(píng)價(jià)指標(biāo)

5　NSTL開放資源評(píng)價(jià)工作實(shí)踐

5.1開放資源評(píng)價(jià)工作流程

NSTL國(guó)外開放資源建設(shè)工作從開放資源遴選與評(píng)價(jià)開始進(jìn)行。首先要對(duì)開放資源學(xué)術(shù)性、資源類型、學(xué)科范疇、語(yǔ)種、開放度等方面進(jìn)行篩選，不符合要求的開放資源則不進(jìn)行采集和評(píng)價(jià)。然后，根據(jù)開放度高低分步進(jìn)行建設(shè)，最后依據(jù)各類型資源的評(píng)價(jià)指標(biāo)進(jìn)行賦值，組合形成分級(jí)評(píng)價(jià)結(jié)果，按簡(jiǎn)單易懂的方式提供服務(wù)。具體評(píng)價(jià)工作流程如圖2所示。

圖2　開放資源評(píng)價(jià)工作流程

5.2開放資源評(píng)價(jià)規(guī)范性控制

在國(guó)外開放資源評(píng)價(jià)操作中，首先要分析評(píng)價(jià)指標(biāo)特征和內(nèi)容，根據(jù)評(píng)價(jià)要求建立評(píng)價(jià)參考規(guī)范庫(kù)和評(píng)價(jià)規(guī)范，并要求參與開放資源遴選和評(píng)價(jià)的工作人員依據(jù)規(guī)范要求開展工作。具體的規(guī)范庫(kù)建設(shè)內(nèi)容如表10所示。

表10　NSTL開放資源評(píng)價(jià)規(guī)范控制信息庫(kù)

建立規(guī)范信息庫(kù)，通過(guò)規(guī)范性控制來(lái)保障評(píng)價(jià)工作的質(zhì)量，減少開放資源評(píng)價(jià)工作的手工操作內(nèi)容，效果將十分明顯。然而，規(guī)范信息庫(kù)建設(shè)并不能一蹴而就，需要經(jīng)驗(yàn)豐富的采訪館員、數(shù)據(jù)館員合作，并長(zhǎng)期細(xì)致的維護(hù)。在規(guī)范庫(kù)建設(shè)中要注意以下幾項(xiàng)規(guī)范建設(shè)：

（1）各來(lái)源期刊和會(huì)議錄名稱規(guī)范、ISSN、ISBN信息補(bǔ)充和核驗(yàn)；

（2）出版機(jī)構(gòu)和學(xué)協(xié)會(huì)名稱規(guī)范；

（3）更新及時(shí)性。

5.3評(píng)價(jià)指標(biāo)注釋

本文在第4.4-4.5節(jié)評(píng)價(jià)指標(biāo)描述中應(yīng)用了一些簡(jiǎn)寫的指標(biāo)名稱，為避免產(chǎn)生歧義，本節(jié)對(duì)部分名稱進(jìn)行注釋。

CC協(xié)議：知識(shí)共享協(xié)議（Creative Commons）由知識(shí)共享組織提出，2005年，人大法學(xué)院成為知識(shí)共享組織在中國(guó)大陸的合作機(jī)構(gòu)，2006年，中國(guó)大陸版2.5版CC系列許可協(xié)議在北京正式發(fā)布。CC協(xié)議包括六種主要的許可協(xié)議，從限制最嚴(yán)格的許可協(xié)議開始，以限制最寬松的許可協(xié)議結(jié)束，按從嚴(yán)至寬的順序列出。分別表示為“署名-非商業(yè)使用-禁止演繹”（CC-BY-NCSA）、“署名-非商業(yè)性使用-相同方式共享”（CC-BYNC-ND）、“署名-非商業(yè)性使用”（CC-BY-SA）、“署名-禁止演繹”（CC-BY-ND）、“署名-相同方式共享”（CC-BY-NC）、“署名”（CC-BY）［24］。

SCIE/SSCI IF：科學(xué)引文索引/社會(huì)科學(xué)引文索引（Science Citation Index Expanded、Social Sciences Citation Index）由美國(guó)Thomson scientific建設(shè)和維護(hù)，是國(guó)際公認(rèn)的三大檢索數(shù)據(jù)庫(kù)之一。其IF為影響因子（Impact Factor）來(lái)自Thomson scientific研制期刊引用報(bào)告（Journal Citation Reports）的期刊評(píng)價(jià)指標(biāo)之一。

Google Scholar Metrics H5：谷歌學(xué)術(shù)計(jì)量H5指數(shù)是Google Scholar于2012年推出的一個(gè)期刊評(píng)價(jià)系統(tǒng)，用來(lái)評(píng)價(jià)各個(gè)領(lǐng)域期刊的影響力。其H5指數(shù)為某期刊在過(guò)去5年內(nèi)所發(fā)表的論文中至少有h篇論文分別被引用了至少h次，那么這份期刊的H5指數(shù)就是h。

EI：美國(guó)工程索引（Engineering Index）是由ELSEVIER ENGINEERING INFORMATION 公司出版的工程類文摘數(shù)據(jù)庫(kù)，是國(guó)際工程技術(shù)領(lǐng)域著名二次文獻(xiàn)數(shù)據(jù)庫(kù)，為世界三大檢索數(shù)據(jù)庫(kù)之一。

CPCI：國(guó)際會(huì)議引文索引（Conference Proceeding Citation Index）由美國(guó)Thomson scientific建設(shè)和維護(hù)，是世界三大檢索數(shù)據(jù)庫(kù)之一。

CA/BP/INSPEC/Medline/CABI等權(quán)威文摘數(shù)據(jù)庫(kù)：CA為指世界著名化學(xué)文摘數(shù)據(jù)庫(kù)；BP為生物學(xué)文摘數(shù)據(jù)庫(kù)；INSPEC為物理學(xué)、電子工程、電子學(xué)、計(jì)算機(jī)科學(xué)及信息技術(shù)領(lǐng)域的數(shù)據(jù)庫(kù)；Medline為醫(yī)學(xué)文摘數(shù)據(jù)庫(kù)；CABI為農(nóng)業(yè)文摘數(shù)據(jù)庫(kù)。這些數(shù)據(jù)庫(kù)對(duì)收錄期刊和文獻(xiàn)有較嚴(yán)格的遴選要求。

OASPA：開放獲取學(xué)術(shù)出版協(xié)會(huì)（Open Access Scholarly Publishers Association）。該協(xié)會(huì)對(duì)會(huì)員有嚴(yán)格的遴選過(guò)程，如需要簽署柏林宣言或者布達(dá)佩斯宣言，必須出版過(guò)至少一種全文開放期刊或圖書，必須經(jīng)過(guò)嚴(yán)格的同行評(píng)審，必須具有明確的使用許可協(xié)議，最好為CC協(xié)議，出版社和作者的信息需要展示等［25］。

DOAJ：開放獲取期刊目錄（Directory of Open Access Journals）由瑞典Lund大學(xué)圖書館維護(hù)，收錄了來(lái)自全球一萬(wàn)余種開放期刊，對(duì)所收錄期刊的質(zhì)量、開放性方面有較嚴(yán)格的規(guī)定［1］。

DOAB：開放獲取圖書目錄（Directory of Open Access Books）由歐洲開放獲取出版網(wǎng)絡(luò)（Open Access Publishing in European Networks， OAPEN）開發(fā)及維護(hù)，收錄了三千余種開放圖書，對(duì)圖書質(zhì)量及開放性有著較嚴(yán)格的要求［2］。

ESI：基本科學(xué)指標(biāo)（Essential Science Indicators）是Thomson scientific研制的科研評(píng)價(jià)工具，主要用于評(píng)價(jià)大學(xué)和科研機(jī)構(gòu)國(guó)際學(xué)術(shù)水平及影響力。

QS：QS世界大學(xué)排名（QS World University Ranking）是由英國(guó)一家專門負(fù)責(zé)教育及升學(xué)就業(yè)的組織Quacquarelli Symonds（QS）所發(fā)表的年度世界大學(xué)排名。

6　結(jié)語(yǔ)

國(guó)外開放資源的評(píng)價(jià)是一項(xiàng)復(fù)雜的系統(tǒng)工程，評(píng)價(jià)指標(biāo)設(shè)定既要符合科學(xué)規(guī)律，又要具較強(qiáng)的可操作性。特別是定量評(píng)價(jià)，數(shù)據(jù)來(lái)源難度大，特別是一些新興的單篇或單個(gè)數(shù)據(jù)的計(jì)量評(píng)價(jià)數(shù)據(jù)，基于鏈接或反向鏈接等算法的定量評(píng)價(jià)，數(shù)據(jù)難以獲得操作更為不易，因此本文仍選擇定性與定量相結(jié)合的評(píng)價(jià)方法。

對(duì)于開放性評(píng)價(jià)，現(xiàn)有評(píng)價(jià)研究?jī)?nèi)容還顯得滯后及不完善，比如對(duì)期刊評(píng)價(jià)較多，而對(duì)其它類的開放獲取資源進(jìn)行評(píng)價(jià)較少。對(duì)于開放學(xué)位論文和課件，目前相關(guān)評(píng)價(jià)研究較少，評(píng)價(jià)指標(biāo)較為單一，有待進(jìn)一步完善。

關(guān)于開放資源規(guī)范信息庫(kù)建設(shè)，雖然NSTL資源建設(shè)部門通過(guò)長(zhǎng)期的積累已有了較好的基礎(chǔ)，但更新和維護(hù)是長(zhǎng)期工作任務(wù)，希望可以借助開放資源評(píng)價(jià)工作，更有效地建設(shè)和維護(hù)。

［1］ DOAJ.Directory of open access journals［EB/OL］.［2015-08-01］.https:// doaj.org/.

［2］ DOAB.Directoryof open access books［EB/OL］.［2015-08-01］.http:// www.doabooks.org/.

［3］ OHN BOHANNON. Who's afraid of peer review？ ［J］.Science，2013，342（6154）:60-65.

［4］ Scholarly open access［EB/OL］.［2015-08-01］http://scholarlyoa.com/.

［5］ THOMSON. The impact of open access journals: a citation study from Thomson ISI［EB/OL］.［2015-08-01］.http://www.lib.uiowa.edu/ scholarly/documents/ISI_impact-oa-journals.pdf.

［6］ TURK N. Citation impact of open accessjournals［J］. New Library World，2008， 109（1/2）:65-74.

［7］ SHOTTON D.The five stars of online journal articles-a framework forarticleevaluation［EB /OL］.［2015-03-14］. http://www.dlib.org/dlib/ january12/shotton/01shotton.html.

［8］ 許培揚(yáng). 替代計(jì)量學(xué)（Altmetric）——學(xué)術(shù)評(píng)價(jià)國(guó)際慣例［EB/OL］.［2015-03-14］.http://blog.sciencenet.cn/blog-280034-828818.html.

［9］ 開放獲取頻譜［EB/OL］.［2015-03-14］. https://www.plos.org/wpcontent/uploads/2012/10/OAS_Chinese_web.pdf.

［10］ STM PUBLISHING NEWS. DOAJ announces new selection criteria［EB/ OL］.［2015-03-14］. http://www.stm-publishing.com/doaj-announcesnew-selection-criteria/.

［11］ 馬景娣. 社會(huì)科學(xué)開放訪問(wèn)期刊及其學(xué)術(shù)影響力研究［J］.情報(bào)資料工作，2005（2）:47-49.

［12］ 劉輝. 開放獲取期刊的現(xiàn)狀和評(píng)價(jià)分析［J］.圖書館建設(shè)，2006（4）:44-47.

［13］ 劉海霞，方平， 胡德華.開放存取期刊的質(zhì)量評(píng)價(jià)研究［J］.圖書館雜志，2006，25（6）:23-27.

［14］ 張紅芹，黃水清. 開放獲取期刊質(zhì)量評(píng)價(jià)的指標(biāo)體系構(gòu)建與評(píng)價(jià)實(shí)踐——以化學(xué)類期刊為例［J］.情報(bào)理論與實(shí)踐，2008（3）:386-390.

［15］ 胡德華. 生物醫(yī)學(xué)類OA期刊學(xué)術(shù)影響力評(píng)價(jià)研究［J］.數(shù)字圖書館論壇，2009（6）:19-25.

［16］ 顧立平，張曉林，初景利，等. 開放獲取期刊的評(píng)價(jià)與遴選:質(zhì)量水平.開放程度和服務(wù)能力［J］.圖書情報(bào)工作，2013，57（1）:49-54.

［17］ 黃金霞，陳雪飛，沈東婧. 開放資源的利用評(píng)價(jià)研究［J］.圖書情報(bào)工作，2013，57（21）:18-23.

［18］ 黃永文，張建勇，謝靖，等. 開放資源的再利用模式研究［J］.圖書情報(bào)工作，2013，57（21）:32-37.

［19］ 顧立平. 開放數(shù)據(jù)計(jì)量研究綜述：計(jì)算網(wǎng)絡(luò)用戶行為和科學(xué)社群影響力的Altmetrics計(jì)量［J］.數(shù)字圖書館，2013（6）:1-8.

［20］ 劉菊紅，黃凱文. 開放獲取資源評(píng)價(jià)模式的研究：基于單篇論文質(zhì)量評(píng)價(jià)［J］.新世紀(jì)圖書館，2015（5）:91-96.

［21］ 陶雯，胡德華，曲艷吉，等. 開放存取期刊質(zhì)量評(píng)價(jià)方法研究［J］.圖書情報(bào)工作，2006， 50（10）:72-75.

［22］ 趙鐵漢，黃穎.開放獲取期刊學(xué)術(shù)影響力評(píng)價(jià)研究［J］.情報(bào)科學(xué)，2011，29（6）:874-877，881.

［23］ 陳銘.開放存取期刊評(píng)價(jià)模型構(gòu)建［J］.圖書情報(bào)工作，2010，54（14）:11-15.

［24］ Creative Commons知識(shí)共享中國(guó)大陸［EB/OL］.［2015-03-16］. http:// creativecommons.net.cn/.

［25］ Open Access Scholarly Publishers Association［EB/OL］. ［2015-03-16］. http://oaspa.org/.

顏蘊(yùn)，女，1964年生，中國(guó)農(nóng)業(yè)科學(xué)院農(nóng)業(yè)信息研究所研究館員，研究方向：文獻(xiàn)資源建設(shè)。

續(xù)玉紅，女，1963年生，中國(guó)農(nóng)業(yè)科學(xué)院農(nóng)業(yè)信息研究所研究館員，通訊作者， E-mail：xuyuhong@caas.cn。

劉敏娟，女，1982年生，中國(guó)農(nóng)業(yè)科學(xué)院農(nóng)業(yè)信息研究所館員，研究方向：文獻(xiàn)資源建設(shè)。

石瑾，女，1990年生，中國(guó)農(nóng)業(yè)科學(xué)院農(nóng)業(yè)信息研究所助理館員，研究方向：文獻(xiàn)資源建設(shè)。

丁遒勁，女，1988年生，中國(guó)科學(xué)技術(shù)信息研究所助理館員，研究方向：數(shù)字資源建設(shè)。

尹高磊，男，1983年生，中國(guó)科學(xué)院文獻(xiàn)情報(bào)中心館員，研究方向：文獻(xiàn)資源建設(shè)。

Practice on Evaluation of Open Access Resources of NSTL

YAN Yun1， XU YuHong1， LIU MinJuan1， SHI Jin1， DING QiuJing2， YIN GaoLei3
（1. Agricultural Information Institute of CAAS， Beijing 100081， China； 2. Institutes of Scientific and Technical Information of China， Beijing 100038， China；3. Library， Chinese Academy of Sciences， Beijing 100190， China ）

According to goals and requirements on the construction of open access resources of National Science and Technology Library （NSTL）， this paper proposes theevaluation index of open access journals， conference proceedings， science and technology reports， books and dissertations on the basis of expounding the research progress and working practice of evaluating open access resources home and abroad. It also introduces the evaluation principle， framework， working process and specification control points of open access resources . Finally， the practice on evaluation of open access resources is discussed.

Open Access Resources； Quality； Influence； Openness； Evaluation

G253

10.3772/j.issn.1673-2286.2015.08.002

2015-08-02；編輯：王立學(xué)）

* 本研究得到NSTL專項(xiàng)課題“NSTL開放資源建設(shè)——遴選及評(píng)價(jià)方法”（編號(hào)：2015XM15）及中國(guó)農(nóng)科院科技創(chuàng)新工程資助。