高校信息化項目實施績效的模糊評價研究

李文全，徐素萍，彭新東

（韶關(guān)學(xué)院 信息工程學(xué)院，廣東 韶關(guān) 512005）

高校信息化項目是以促進信息技術(shù)與教育教學(xué)深度融合為理念，以現(xiàn)代信息技術(shù)為手段，旨在全面促進高校教學(xué)改革和教育發(fā)展的新建、擴建的工程項目［1］.由于高校信息化項目建設(shè)過程中存在機構(gòu)改革、需求變更、資源調(diào)整等風(fēng)險因素，常常導(dǎo)致項目進度超期和成本超支，難于達到預(yù)期效果，造成資源浪費和大量的重復(fù)建設(shè)［2］.開展高校信息化項目實施績效評價，找出制約教育信息化發(fā)展的因素，為信息化建設(shè)提供改進依據(jù)和發(fā)展導(dǎo)向，是當(dāng)前高校教育信息化工作的核心內(nèi)容.

信息化項目績效評價的重要性已經(jīng)引起了關(guān)注，并提出了相關(guān)的信息化績效評價體系［3］.但研究多是側(cè)重于企業(yè)信息化項目的評價，沒有結(jié)合高校教育領(lǐng)域特點，存在評價指標不明確、結(jié)果難量化的問題，不能直接運用于高校信息化項目實施績效的評價.筆者在詳細分析信息化項目建設(shè)各階段的特點基礎(chǔ)上，找出影響項目績效的關(guān)鍵因素，構(gòu)建了基于項目立項、項目過程、項目成效、項目發(fā)展的高校信息化項目實施績效的評價模型，并采用了層次分析法確定了各評價指標權(quán)重，利用模糊綜合評價法對評價結(jié)果進行了量化，最后通過具體實例驗證了模型的有效性.

1 模糊綜合評價模型

高校信息化項目實施績效評價的目的是通過科學(xué)的方法，客觀地評價項目實施績效，使決策者及時掌握項目實施的成效，為優(yōu)化教育信息化發(fā)展策略提供依據(jù).高校信息化項目實施績效評價過程分為兩步：一是構(gòu)建科學(xué)的評價指標體系；二是采用模糊數(shù)學(xué)方法綜合評價.

1.1 評價指標體系的構(gòu)建

1.1.1 評價內(nèi)容

高校信息化項目實施過程分為項目立項、項目過程、項目成效、項目發(fā)展等4個階段.評價項目實施的績效需要對每個階段進行科學(xué)合理地評價.

（1）項目立項.項目立項是項目實施之前的階段，需要評價項目的來源和項目的意義，包括項目必要性、程序規(guī)范性、需求充分性.項目必要性指當(dāng)前信息化項目建設(shè)的重要性和開發(fā)任務(wù)的迫切性；程序規(guī)范性指項目立項流程的合規(guī)性，主要評價立項依據(jù)，專家評審意見、招投標流程；需求充分性指項目用戶對信息化項目需求的明確程度，包括功能的完整性和技術(shù)的可行性.

（2）項目過程.項目過程是指項目開始到正式投入使用的過程，需要評價項目的實施質(zhì)量，包括投資控制、質(zhì)量控制、進度控制.投資控制指在項目投資預(yù)算條件下，評價各種費用開支的合理性；質(zhì)量控制指在達到項目目標的要求下，評價采取的技術(shù)措施和管理措施的有效性；進度控制指對工作進度進行時間的控制，評價項目計劃執(zhí)行的合理性.

（3）項目成效.項目成效是指項目投入使用后，分析項目運行的關(guān)鍵指標監(jiān)測數(shù)據(jù)，評價項目的應(yīng)用效果，包括用戶滿意度、系統(tǒng)性能、業(yè)務(wù)集成、決策輔助、穩(wěn)定性和安全性.用戶滿意度是評價項目對流程優(yōu)化、效率提高、成本節(jié)約、服務(wù)改進、工作條件改善而使用用戶滿意的程度；系統(tǒng)性能是評價項目的響應(yīng)時間、可靠性、易用性、技術(shù)成熟性和硬件利用率；業(yè)務(wù)集成是評價項目與內(nèi)外部業(yè)務(wù)系統(tǒng)的協(xié)同程度，包括數(shù)據(jù)采集規(guī)范性和數(shù)據(jù)共享的便利性；決策輔助是評價項目輔助各層決策的科學(xué)性和準確性；安全性是評價項目的安全等級、數(shù)據(jù)災(zāi)備和數(shù)據(jù)加密情況.

（4）項目發(fā)展.項目發(fā)展是指項目的可持續(xù)性發(fā)展的能力，需要評價項目運行維護、可擴充性、組織保障和廠商質(zhì)量.運行維護是根據(jù)項目日常運行情況，評價項目可維護性，主要包括日常運行的穩(wěn)定性、維護的及時性、工作日志的規(guī)范性和項目文檔的完整性；可擴充性是評價項目適應(yīng)新環(huán)境和新業(yè)務(wù)的能力，包括功能擴展、技術(shù)擴展和業(yè)務(wù)擴展；組織保障是評價項目管理機構(gòu)的完整程度和人員配置的健全程度；廠商質(zhì)量是評價實施項目廠家的質(zhì)量，包括廠家資質(zhì)、響應(yīng)時間、問題解決能力.

1.1.2 構(gòu)建評價指標體系

在詳細分析影響各階段績效關(guān)鍵因素的基礎(chǔ)上，遵循科學(xué)性、全面性和可操作性原則，提出了高校項目實施績效的評價指標，并通過信息化項目管理者和使用者的訪談和調(diào)研，修正與完善了指標體系，見表1.

表1 高校信息化項目績效評價指標體系

1.2 綜合評價指標體系權(quán)重

為了科學(xué)、全面地評價高校信息化項目實施績效，需要確定各指標的權(quán)重.評價指標權(quán)重的合理與否很大程度上影響綜合評價的正確性和科學(xué)性［4-6］.

1.2.1 基于層次分析法的指標權(quán)重方法

層次分析法是一種定性與定量相結(jié)合的系統(tǒng)分析和決策的方法，它將影響項目實施績效的各指標，劃分為相互關(guān)聯(lián)的層次結(jié)構(gòu)，并對每一層次的各指標進行相對重要性的比較，計算出各層次指標的權(quán)重，進而得到相對目標的權(quán)重［7-8］.其基本步驟主要有幾個方面［9-10］.

（1）根據(jù)指標屬性分類，建立評價指標的層次結(jié)構(gòu).

（2）構(gòu)造各層成對比較矩陣.采用兩兩比較法，在同一目標下評價兩個指標之間的重要性，并用1~9分制標示重要度，從而構(gòu)造各層成對比較矩陣A=（aij）n×n，其中各標度含義為（同等重要、稍微重要、明顯重要、強烈重要、極端重要），對應(yīng)的標度值為（1、3、5、7、9），標度2、4、6、8表示重要性介于兩奇數(shù)之間的中值.

（3）計算層次權(quán)重；采用和積法，分別計算各個成對比較矩陣的最大特征根和對應(yīng)特征向量.計算步驟如下：

Step1：將成對比較矩陣按列進行歸一化處理，得到矩陣B：

Step2：將歸一化處理后的矩陣B按行相加，得到向量元素ri：

Step3：對向量R=（r1，r2，…rn）T歸一化處理，得到向量元素wi：

其中，向量W=（w1，w2，…wn）T即為成對比較矩陣的特征向量.

Step4：計算最大特征根λmax：

Step5：為了減少不同人員對重要性的評判差異，確保評判結(jié)果與實際相符，需要對結(jié)果進行一致性檢驗，其檢驗公式為：

其中，RI為平均隨機一致性指標，它與矩陣階數(shù)n有關(guān)，當(dāng)n為3，4，5時，對應(yīng)的RI值為0.58，0.89，1.12.當(dāng)CR＜0.1時，則檢驗通過；否則修正成對比較矩陣.

1.2.2 確定綜合評價指標體系權(quán)重

采用多輪匿名調(diào)查方式，利用層次分析法計算出了高校信息化項目實施績效評價指標的層次權(quán)重和相對目標層權(quán)重，具體結(jié)果見表1.在相對評價目標的權(quán)重中，用戶滿意度（0.218）、投資控制（0.152）、系統(tǒng)性能（0.096）、項目必要性（0.088）、決策輔助（0.087）是權(quán)重最大且最重要的5個評價指標，是影響高校信息化項目績效的關(guān)鍵指標.為了提高信息化項目實施績效，可重點加強關(guān)鍵指標內(nèi)容的管理，優(yōu)化關(guān)鍵指標的實施水平.

1.3 模糊綜合評價

模糊綜合評價是以模糊數(shù)學(xué)為基礎(chǔ)的綜合評價方法，能較好地解決指標難于量化的問題，比較適用于高校信息化項目實施績效涉及到的非確定因素［11-12］.主要步驟如下：

（1）建立評價對象指標集U，假設(shè)當(dāng)前評價對象的指標有m個，則指標集U＝｛U1，U2，…，Um｝.

（2）建立評價等級集V＝｛V1，V2，…，Vn｝＝｛高，較高，一般，較低，低｝，各等級對應(yīng)的測量標度為G＝｛5，4，3，2，1｝.

（3）確定各層指標的模糊隸屬度矩陣D=（dij）m×n，表示第i個指標評為第j個等級的隸屬程度，即：

（4）綜合評價：根據(jù)各指標層的模糊隸屬矩陣右乘權(quán)重向量，得到各級指標的模糊綜合評價集：Mi=（mij）1×n=W1×mDm×n.

（5）量化結(jié)果：將模糊綜合評價集與等級標度值相乘，得到指標的量化結(jié)果S=MiGT.

2 模型應(yīng)用

2.1 評價過程

為了驗證高校信息化項目實施績效評價模型的有效性，以某高校辦公自動化項目實施為例，邀請了3名項目管理者、3名行業(yè)專家和4名學(xué)者共10人，對項目實施績效進行打分，得到二級指標的模糊隸屬度，見表2.

表2 指標的模糊隸屬度表

根據(jù)公式Mi=（mij）1×n=W1×mDm×n計算一級指標的模糊隸屬度，其中項目立項的隸屬度為（0.437，0.289，0.174，0.1，0），項目過程的隸屬度為（0.397，0.279，0.145，0.1，0.079），項目成效的隸屬度為（0.479，0.266，0.157，0.098，0），項目發(fā)展的隸屬度為（0.382，0.255，0.2，0.163，0）.同樣方法，計算出目標層的模糊隸屬度為（0.443，0.272，0.159，0.104，0.022）.最后，根據(jù)公式S=MiGT，得到最終評價結(jié)果為4.010 4.

2.2 評價結(jié)果分析

針對評價結(jié)果進行分析，首先，該校辦公自動化項目實施績效綜合評價得分為4.010 4，達到“較高”水平.同時，目標層的模糊評價為“高，較高，一般，較低，低”的隸屬度分別為0.443，0.272，0.159，0.104，0.022，根據(jù)最大隸屬度原則，該項目實施績效評價結(jié)果為“高”水平，因此，綜合分析可以得出該高校辦公自動化項目實施績效達到“較高”等級，但還有優(yōu)化空間；其次，影響目標層的項目立項、項目過程、項目成效、項目發(fā)展的綜合評價得分為4.064、3.815、4.127、3.855，說明項目立項和項目成效階段的績效水平達“較高”等級，而項目過程和項目發(fā)展的績效水平則處于一般和較高等級之間；最后，根據(jù)綜合評價結(jié)果可知，該項目實施偏弱環(huán)節(jié)在于項目過程，如需進一步提高信息化項目實施績效，應(yīng)著重提高項目過程管理，尤其是要加強具有較大權(quán)重的投資控制環(huán)節(jié)的管理.

3 結(jié)語

開展高校信息化項目實施績效評價，有利于準確把握信息化項目的應(yīng)用現(xiàn)狀和存在問題，找出制約信息化發(fā)展的關(guān)鍵因素，對促進高校教育信息化發(fā)展具有重要意義.在分析高校信息化項目實施的特點的基礎(chǔ)上，構(gòu)建了模糊綜合評價模型.采用層次分析法確定了評價指標的權(quán)重，采用模糊評價方法，實現(xiàn)了評價結(jié)果的量化.最后結(jié)合具體實例開展評價，結(jié)果表明，該模型簡單實用，不僅能夠評價高校信息化項目的各階段實施績效水平，還能夠為優(yōu)化高校信息化建設(shè)提供指導(dǎo)建議.