高校圖書(shū)館電子資源綜合評(píng)價(jià)系統(tǒng)探析

吳海華

〔摘 要〕本文介紹了國(guó)內(nèi)外關(guān)于高校圖書(shū)館電子資源利用綜合評(píng)價(jià)系統(tǒng)的理論和實(shí)際應(yīng)用方面的研究現(xiàn)狀及存在問(wèn)題。在此基礎(chǔ)上提出了一種可行性的解決方案，提供基本思路和研究方法，試圖建立一個(gè)科學(xué)的綜合評(píng)價(jià)指標(biāo)體系，并確定各指標(biāo)相關(guān)權(quán)重，同時(shí)利用計(jì)算機(jī)技術(shù)開(kāi)發(fā)電子資源利用的綜合評(píng)價(jià)系統(tǒng)，將整個(gè)評(píng)價(jià)工作電子化，以期達(dá)到促進(jìn)電子資源整體優(yōu)化建設(shè)、推進(jìn)高校圖書(shū)館數(shù)字化建設(shè)的目標(biāo)。

〔關(guān)鍵詞〕電子資源評(píng)價(jià)；指標(biāo)體系；評(píng)價(jià)模型；COUNTER；層次分析法

〔中圖分類號(hào)〕G255.75 〔文獻(xiàn)標(biāo)識(shí)碼〕B 〔文章編號(hào)〕1008-0821(2009)02-0064-04

Study on the Comprehensive Evaluation System for

Electronic Resources of University LibraryWu Haihua

(Library，Yangzhou University，Yangzhou 225009，China)

〔Abstract〕This paper introduced the status quo and problems of the theory and practical applications on the comprehensive evaluation system for the electronic library resources at home and abroad.On this basis，a feasibility solution was presented，attempting to establish a comprehensive scientific evaluation index system to determine the weight-related indicators，and using computer technology to set up a comprehensive evaluation system for electronic resource.

〔Key words〕e-resource evaluation；index system；evaluation model；COUNTER；AHP

電子資源，又稱電子出版物，主要是指由出版商或數(shù)據(jù)庫(kù)商生產(chǎn)發(fā)行的、商業(yè)化的正式出版物，有數(shù)據(jù)庫(kù)、全文電子期刊和電子圖書(shū)等，其中數(shù)據(jù)庫(kù)又包括參考數(shù)據(jù)庫(kù)(書(shū)目、文摘、索引)、全文數(shù)據(jù)庫(kù)和事實(shí)數(shù)據(jù)庫(kù)。在本課題中所研究的電子資源均以此概念作為界定，不包括因特網(wǎng)上各種免費(fèi)的電子資源、高校圖書(shū)館自建的數(shù)據(jù)庫(kù)。

電子資源已經(jīng)成為高校圖書(shū)館不可或缺的重要學(xué)術(shù)資源。注重電子資源的利用效率、效能和價(jià)值，提高電子資源服務(wù)質(zhì)量和用戶滿意程度，尋求有效管理它們的方法正成為高校圖書(shū)館的主要挑戰(zhàn)。電子資源綜合評(píng)價(jià)是遵循電子資源綜合評(píng)價(jià)指標(biāo)體系，依據(jù)客觀事實(shí)和數(shù)據(jù)，通過(guò)定量定性對(duì)比分析，運(yùn)用科學(xué)的方法，對(duì)電子資源服務(wù)的效率和效能做出客觀、公正和正確的評(píng)判和分析。具體地說(shuō)，就是依據(jù)電子資源服務(wù)綜合評(píng)價(jià)指標(biāo)體系，對(duì)其功能質(zhì)量和技術(shù)質(zhì)量進(jìn)行測(cè)度和分析?？梢?jiàn)，電子資源的績(jī)效評(píng)價(jià)不只是對(duì)資源質(zhì)量的簡(jiǎn)單評(píng)價(jià)，同時(shí)，作為高校圖書(shū)館改進(jìn)電子資源服務(wù)質(zhì)量的手段，應(yīng)對(duì)其服務(wù)效率和滿足用戶需求的信息服務(wù)的質(zhì)量和數(shù)量進(jìn)行測(cè)評(píng)。

1 研究現(xiàn)狀分析

1.1 理論研究

電子資源利用綜合評(píng)價(jià)是高校圖書(shū)館綜合評(píng)價(jià)的一個(gè)重要組成部分。國(guó)內(nèi)外關(guān)于電子資源評(píng)價(jià)的研究已有約10年的歷史。比較國(guó)內(nèi)外的研究可以發(fā)現(xiàn)：國(guó)外在進(jìn)行理論研究的同時(shí)，側(cè)重于應(yīng)用和對(duì)實(shí)踐的指導(dǎo)，大多以政府投資的大型項(xiàng)目進(jìn)行研究。如圖書(shū)館聯(lián)盟國(guó)際聯(lián)盟(ICOLC)項(xiàng)目和美國(guó)的E-Metrics項(xiàng)目。這些項(xiàng)目研究成果往往形成用于指導(dǎo)圖書(shū)館具體實(shí)踐的文件或標(biāo)準(zhǔn)(如著名的COUNTER標(biāo)準(zhǔn))；對(duì)于評(píng)價(jià)指標(biāo)的獲取、統(tǒng)計(jì)分析和驗(yàn)證研究較為具體深入；注重定量研究，如有許多論文是利用電子資源的使用統(tǒng)計(jì)數(shù)據(jù)來(lái)分析資源的質(zhì)量、服務(wù)效果、成本效益的?？傮w來(lái)說(shuō)，國(guó)外的研究通過(guò)績(jī)效評(píng)價(jià)實(shí)現(xiàn)對(duì)電子資源的有效管理，而不是單純地用某個(gè)指標(biāo)體系進(jìn)行定性或定量評(píng)價(jià)。

與國(guó)外相比，國(guó)內(nèi)一般較注重定性研究和理論研究，如評(píng)價(jià)指標(biāo)體系的建立、評(píng)價(jià)方法的研究、評(píng)價(jià)標(biāo)準(zhǔn)的探討等。論述統(tǒng)計(jì)方法的有馬建霞的《圖書(shū)館數(shù)字資源訪問(wèn)統(tǒng)計(jì)研究》(2005)、趙乃蠧的《電子期刊評(píng)價(jià)與利用統(tǒng)計(jì)研究》(2006)等；從不同的角度建立評(píng)價(jià)指標(biāo)體系或采用不同的數(shù)理方法對(duì)電子資源進(jìn)行評(píng)價(jià)的，其中尤以肖瓏和張宇紅提出的《電子資源評(píng)價(jià)指標(biāo)體系的建立初探》最為系統(tǒng)和全面，給出了資源內(nèi)容、檢索系統(tǒng)及功能、使用情況、價(jià)值與成本核算、出版商/數(shù)據(jù)商服務(wù)、存檔6個(gè)方面的評(píng)價(jià)內(nèi)容和指標(biāo)。汪媛、賴茂生在《我國(guó)高校圖書(shū)館引進(jìn)網(wǎng)絡(luò)版全文數(shù)據(jù)庫(kù)的綜合評(píng)價(jià)模型》中建立了網(wǎng)絡(luò)全文數(shù)據(jù)庫(kù)的評(píng)價(jià)模型，包括指標(biāo)體系和指標(biāo)權(quán)重，同時(shí)又根據(jù)該模型以4個(gè)常用西文全文數(shù)據(jù)庫(kù)為例進(jìn)行實(shí)例分析。徐革的《重構(gòu)電子資源綜合評(píng)價(jià)指標(biāo)的主成分分析法》，從數(shù)學(xué)角度提出用主成分分析法這樣的評(píng)價(jià)方法重新構(gòu)建電子資源綜合評(píng)價(jià)指標(biāo)，并分析其可行性，旨在應(yīng)用能夠起重要作用的少數(shù)綜合指標(biāo)，較為全面地評(píng)價(jià)電子資源。國(guó)內(nèi)目前對(duì)電子資源的評(píng)價(jià)研究主要是電子資源采購(gòu)前期對(duì)相關(guān)內(nèi)容、檢索系統(tǒng)及功能的評(píng)價(jià)工作，關(guān)于電子資源利用統(tǒng)計(jì)評(píng)價(jià)的研究及實(shí)踐初見(jiàn)端倪，研究深度不足以了解電子資源的經(jīng)營(yíng)成本并用于指導(dǎo)高校圖書(shū)館資源建設(shè)的具體實(shí)踐。

1.2 實(shí)際應(yīng)用研究

就最終能實(shí)際應(yīng)用的電子資源評(píng)價(jià)指標(biāo)體系而言，目前國(guó)內(nèi)外研究有如下一些特點(diǎn)：(1)有些指標(biāo)體系內(nèi)容具體，專指度較高。如耶魯大學(xué)圖書(shū)館的評(píng)價(jià)指標(biāo)體系，由152個(gè)指標(biāo)要素組成，有的指標(biāo)甚至達(dá)到四層等級(jí)，可見(jiàn)其指標(biāo)的專指度。(2)評(píng)價(jià)電子資源利用情況的指標(biāo)有一定的可操作性。如劉錦山的數(shù)字資源評(píng)價(jià)指標(biāo)體系中的一些指標(biāo)可以用來(lái)評(píng)價(jià)處于續(xù)訂/停訂階段的電子資源。(3)運(yùn)用層次分析法構(gòu)建評(píng)價(jià)模型。層次分析法是一種將定性分析與定量分析結(jié)合在一起的多目標(biāo)決策分析方法。這種方法對(duì)于構(gòu)建電子資源評(píng)價(jià)模型比較合適。(4)評(píng)價(jià)指標(biāo)以定性為主，定量指標(biāo)較少。雖然出現(xiàn)了電子計(jì)量的概念和實(shí)踐，但評(píng)價(jià)指標(biāo)仍然以定性指標(biāo)為主，定性指標(biāo)因缺乏同樣的比較單位和環(huán)境，缺乏實(shí)際可比性。(5)指標(biāo)的設(shè)立大多立足于現(xiàn)有資源和系統(tǒng)特性，發(fā)展性不夠。(6)目前尚無(wú)可實(shí)際應(yīng)用的電子資源評(píng)價(jià)系統(tǒng)平臺(tái)。

綜上所述，國(guó)內(nèi)針對(duì)不同圖書(shū)館、針對(duì)具體電子資源開(kāi)展的實(shí)際評(píng)價(jià)工作明顯缺乏。對(duì)于圖書(shū)館電子資源利用評(píng)價(jià)研究基本上還處在探討階段，沒(méi)有突破國(guó)外的研究成果，僅是或?qū)ζ涑晒慕榻B，或?qū)W(wǎng)絡(luò)信息資源內(nèi)容質(zhì)量的評(píng)價(jià)，并且仍停留在對(duì)傳統(tǒng)圖書(shū)館的服務(wù)績(jī)效評(píng)估理論上。與國(guó)外利用先進(jìn)的方法和手段，從理論研究到應(yīng)用研究的嚴(yán)謹(jǐn)性和實(shí)踐性過(guò)程相比，我國(guó)已開(kāi)始指標(biāo)體系的構(gòu)建，但理論過(guò)于抽象、方法傳統(tǒng)，在系統(tǒng)的電子資源評(píng)價(jià)理論體系框架和評(píng)價(jià)方法研究方面，存在著許多差距和研究空白。高校圖書(shū)館的利用評(píng)價(jià)必須建立完整的分析性思維模式和系統(tǒng)的方法，進(jìn)行科學(xué)設(shè)計(jì)并進(jìn)行反復(fù)實(shí)際測(cè)試、調(diào)整，以形成適合我國(guó)國(guó)情的高校圖書(shū)館電子資源利用評(píng)價(jià)指標(biāo)體系。因此，對(duì)于評(píng)價(jià)指標(biāo)的可操作性研究，對(duì)于電子資源利用評(píng)價(jià)模式的可應(yīng)用性研究，對(duì)于評(píng)價(jià)結(jié)果的分析和解釋方法研究等，都將成為我國(guó)高校圖書(shū)館電子資源利用評(píng)價(jià)最終能否付諸于實(shí)踐需要函待解決的關(guān)鍵問(wèn)題。

2 一種可行性解決方案

筆者試圖研究并解決這些問(wèn)題。在評(píng)析國(guó)內(nèi)外電子資源評(píng)價(jià)理論和研究的基礎(chǔ)上，依據(jù)電子資源的采訪使用生命周期的特點(diǎn)，構(gòu)建完善的電子資源全程評(píng)價(jià)指標(biāo)體系；同時(shí)采用層次分析法構(gòu)建一個(gè)具有普遍適用性的電子資源綜合評(píng)價(jià)模型，可靈活地適用任意指標(biāo)個(gè)數(shù)和層次組合的評(píng)價(jià)分析，并可通過(guò)編程實(shí)現(xiàn)指標(biāo)權(quán)重計(jì)算的程序化；使用聯(lián)機(jī)分析處理OLAP的WEB日志分析、計(jì)數(shù)器及定時(shí)指向用戶的電子問(wèn)卷調(diào)查等形式構(gòu)建基于圖書(shū)館基礎(chǔ)架構(gòu)的電子資源利用統(tǒng)計(jì)數(shù)據(jù)獲得方式；最終將整個(gè)評(píng)價(jià)工作程序化，開(kāi)發(fā)電子資源綜合評(píng)價(jià)系統(tǒng)計(jì)算機(jī)平臺(tái)。

具體研究的內(nèi)容、基本思路及采用的相關(guān)方法包括：

第一部分為高校圖書(shū)館電子資源全程綜合評(píng)價(jià)的理論研究。跟蹤國(guó)內(nèi)外研究現(xiàn)狀及進(jìn)展動(dòng)態(tài)，分析國(guó)外高校圖書(shū)館電子資源利用評(píng)價(jià)的模型和方法，分析高校圖書(shū)館電子資源服務(wù)的內(nèi)外部環(huán)境以及它們之間的關(guān)系，分析高校圖書(shū)館服務(wù)價(jià)值感和滿意程度感知對(duì)服務(wù)質(zhì)量的影響。

第二部分為確定高校圖書(shū)館電子資源綜合評(píng)價(jià)體系的評(píng)價(jià)指標(biāo)。依據(jù)電子資源采訪使用生命周期(包括選購(gòu)階段和續(xù)訂/停訂階段)選取相關(guān)影響因子，采用問(wèn)卷調(diào)查(電子郵件、信函、網(wǎng)絡(luò)電子或紙質(zhì)問(wèn)卷形式)及分別進(jìn)行影響因子重要性程度和可獲得性的專家群體調(diào)查、參考數(shù)據(jù)商提供的符合一定標(biāo)準(zhǔn)如COUNTER標(biāo)準(zhǔn)的統(tǒng)計(jì)報(bào)告數(shù)據(jù)，以SPSS12.0軟件為數(shù)據(jù)統(tǒng)計(jì)分析工具，采用算術(shù)平均法、相關(guān)分析以及回歸分析等方法對(duì)所獲得的數(shù)據(jù)進(jìn)行分析研究，確定最終的重要影響因子。

第三部分對(duì)對(duì)已確定的重要影響因子擬選用層次分析法構(gòu)建理論模型并確定相關(guān)權(quán)重，構(gòu)造高校圖書(shū)館電子資源利用的全程綜合評(píng)價(jià)指標(biāo)體系。利用層次分析法構(gòu)建一個(gè)融合滿意程度和服務(wù)質(zhì)量的包括選購(gòu)層次結(jié)構(gòu)和續(xù)訂/停訂結(jié)構(gòu)模型的圖書(shū)館電子資源全程綜合評(píng)價(jià)的理論模型并使用層次分析法中最實(shí)用、精確的特征根方法及一致性檢驗(yàn)進(jìn)行權(quán)重計(jì)算，確定相關(guān)指標(biāo)的權(quán)重。在此基礎(chǔ)上，確立高校圖書(shū)館電子資源利用的全程綜合評(píng)價(jià)指標(biāo)體系。

第四部分為構(gòu)建基于圖書(shū)館網(wǎng)關(guān)的電子資源利用統(tǒng)計(jì)數(shù)據(jù)獲得方式。基于高校圖書(shū)館基礎(chǔ)架構(gòu)，利用網(wǎng)關(guān)實(shí)現(xiàn)客觀的網(wǎng)絡(luò)統(tǒng)計(jì)系統(tǒng)方案設(shè)計(jì)，為高校圖書(shū)館提供一種電子資源績(jī)效管理的有效方法和長(zhǎng)久機(jī)制，用戶請(qǐng)求遠(yuǎn)程數(shù)據(jù)庫(kù)、電子期刊、在線書(shū)目或其它資源的情況都將反映在網(wǎng)關(guān)的Web調(diào)查中?？梢酝ㄟ^(guò)日志文件和計(jì)數(shù)器收取定量的數(shù)據(jù)，還可以通過(guò)指向用戶的問(wèn)卷調(diào)查來(lái)獲取一些感知的問(wèn)題即定性的數(shù)據(jù)進(jìn)行數(shù)據(jù)挖掘。定期進(jìn)行調(diào)查統(tǒng)計(jì)和產(chǎn)生報(bào)表，滿足圖書(shū)館的電子資源利用評(píng)價(jià)和管理的需要。

第五部分是利用ASP及SQL SERVER等技術(shù)制作可視化的用戶界面、將全程綜合評(píng)價(jià)指標(biāo)體系程序化相關(guān)算法并進(jìn)行高校圖書(shū)館電子資源綜合評(píng)價(jià)平臺(tái)的開(kāi)發(fā)、調(diào)試和應(yīng)用測(cè)試。

研究的主要內(nèi)容、基本思路及各階段采用的方法圖形化表示見(jiàn)圖1：圖1 研究的主要內(nèi)容、基本思路及各階段采用的方法

通過(guò)在這些方面進(jìn)行的綜合研究，將解決高校圖書(shū)館在開(kāi)展電子資源評(píng)價(jià)應(yīng)用研究中的關(guān)鍵問(wèn)題：

(1)評(píng)價(jià)內(nèi)容：即高校圖書(shū)館電子資源績(jī)效的內(nèi)涵是什么，應(yīng)評(píng)價(jià)到哪一級(jí)的活動(dòng)，這是必須首先界定和明確的問(wèn)題。

(2)評(píng)價(jià)指標(biāo)和結(jié)構(gòu)：作為選擇目標(biāo)相關(guān)的績(jī)效反映，聚集到利用評(píng)價(jià)上的參數(shù)(重要影響因子)有哪些?評(píng)價(jià)哪些方面和特性?如何獲得權(quán)重?即確立科學(xué)的電子資源利用評(píng)價(jià)的評(píng)價(jià)體系和每一級(jí)評(píng)價(jià)指標(biāo)的重要性程度。圍繞此問(wèn)題，擬使用舉行專家咨詢會(huì)、讀者問(wèn)卷等方法獲取相關(guān)重要數(shù)據(jù)和意見(jiàn)，并通過(guò)統(tǒng)計(jì)軟件SPSS12.0進(jìn)行分析研究，最終予以綜合評(píng)價(jià)指標(biāo)體系的確定。

(3)評(píng)價(jià)方法：即建立高校電子資源綜合評(píng)價(jià)的具有可操作性的應(yīng)用模型。評(píng)價(jià)的步驟和過(guò)程是什么?如何獲得評(píng)價(jià)數(shù)據(jù)?如何進(jìn)行評(píng)價(jià)和績(jī)效分析?可以得到怎樣的結(jié)果和結(jié)論?如何展示評(píng)價(jià)結(jié)果和結(jié)論等。這里需要解決的重點(diǎn)和難點(diǎn)有：①如何將數(shù)據(jù)商提供的利用統(tǒng)計(jì)報(bào)告轉(zhuǎn)換為統(tǒng)一標(biāo)準(zhǔn)如符合COUNTER標(biāo)準(zhǔn)的數(shù)據(jù)以便于統(tǒng)計(jì)分析和研究；②為獲取定量數(shù)據(jù)而利用網(wǎng)關(guān)對(duì)日志文件和計(jì)數(shù)器分析所做的數(shù)據(jù)挖掘工作的相關(guān)算法和語(yǔ)言的確定及具體實(shí)施；③選擇什么樣的方法以保證為獲得定性數(shù)據(jù)而指向用戶的WEB問(wèn)卷調(diào)查成為能夠代表整個(gè)用戶群的隨機(jī)樣本，使得其符合概率統(tǒng)計(jì)原理；④使用層次分析法建模過(guò)程中程序化相關(guān)的權(quán)重計(jì)算工作。

3 結(jié) 論

該解決方案充分考慮了我國(guó)高校圖書(shū)館電子資源利用評(píng)價(jià)的多種影響因素，將通過(guò)應(yīng)用科學(xué)的理論方法，確定影響電子資源評(píng)價(jià)的重要因子，建立一個(gè)綜合全面的電子資源評(píng)價(jià)指標(biāo)體系，開(kāi)發(fā)出一種融合服務(wù)質(zhì)量與滿意程度的電子資源綜合評(píng)價(jià)模型，設(shè)計(jì)出一種基于高校圖書(shū)館基礎(chǔ)架構(gòu)的電子資源利用統(tǒng)計(jì)系統(tǒng)結(jié)構(gòu)，利用網(wǎng)關(guān)設(shè)計(jì)建立評(píng)估數(shù)據(jù)的獲得模式，并使用ASP及數(shù)據(jù)庫(kù)技術(shù)程序化相關(guān)算法、應(yīng)用可視化的用戶界面等方法開(kāi)發(fā)綜合評(píng)價(jià)系統(tǒng)平臺(tái)進(jìn)行綜合評(píng)價(jià)分析，使之更適用于圖書(shū)館電子資源利用評(píng)價(jià)的實(shí)踐。筆者將按該思路繼續(xù)研究，以期最終形成電子資源綜合評(píng)價(jià)系統(tǒng)平臺(tái)，為全國(guó)范圍高校圖書(shū)館的電子資源評(píng)價(jià)比較研究提供理論保障和實(shí)踐依據(jù)及應(yīng)用；有助于促進(jìn)電子資源的整體優(yōu)化建設(shè)，提高電子資源的利用率，通過(guò)了解用戶需求，評(píng)價(jià)相關(guān)服務(wù)，合理調(diào)整圖書(shū)館資源投入和建設(shè)，最終將推進(jìn)我國(guó)高校圖書(shū)館數(shù)字化的發(fā)展趨勢(shì)。

參考文獻(xiàn)

[1]肖瓏，張宇紅.電子資源評(píng)價(jià)指標(biāo)體系的建立初探[J].大學(xué)圖書(shū)館學(xué)報(bào)，2002，(3)：35-42.

[2]唐瓊，張新鶴.基于可用性的電子資源質(zhì)量評(píng)價(jià)指標(biāo)體系研究[J].圖書(shū)館理論與實(shí)踐，2007，(5)：7-10，15.

[3]徐革.電子資源評(píng)價(jià)之重要影響因子的灰色統(tǒng)計(jì)研究[J].現(xiàn)代圖書(shū)情報(bào)技術(shù)，2005，(11)：82-85，90.

[4]徐革.基于圖書(shū)館基礎(chǔ)架構(gòu)的電子資源利用統(tǒng)計(jì)結(jié)構(gòu)[J].現(xiàn)代圖書(shū)情報(bào)技術(shù)，2006，(6)：64-67.

[5]邵燕.國(guó)內(nèi)外電子資源評(píng)估研究評(píng)述[J].情報(bào)雜志，2007，(12)：22-25.

[6]朱兵，李春明.COUNT與電子資源的使用評(píng)估[J].圖書(shū)情報(bào)工作，2006，(1)：100-102.

[7]田稷.基于OLAP的WEB日志處理與讀者行為分析[J].情報(bào)技術(shù)，2002，(7)：42-42，44.

[8]彭小平.大學(xué)圖書(shū)館電子資源評(píng)價(jià)方法及其應(yīng)用[J].統(tǒng)計(jì)與決策，2008，(1)：62-64.

[9]楊毅.CALIS組團(tuán)引進(jìn)電子資源現(xiàn)狀和讀者調(diào)查[EB].2006-05-16.http：∥166.111.120.70：8000/portal/hyzl/calispeixunhui0605/1yangyi.pdf，2008-06-16.

[10]Gail K Dickinson.Selection and Evaluation of Electronic Resources[M].Englewood，CO：Libraries Unlimited，Inc，1994.

[11]Vicki L Gregory.Selecting and Managing Electronic Resources A How-to-Do-It Manual for Librarians[M].New York：Neal-Schuman，2000.

[12]Andrew White.E-Metric for Library and Information Professionals：How to Use Data for Managing and Evaluating Electronic Resource Collections[M].New York：Neal-Schuman Publishers，2006.