張 龍,肖琬蓉,施韶亭,楊生舉,曾碩勛
(甘肅省科學技術(shù)情報研究所,甘肅 蘭州 730000)
地方科技平臺績效評價支持系統(tǒng)開發(fā)研究*
張 龍,肖琬蓉△,施韶亭,楊生舉,曾碩勛
(甘肅省科學技術(shù)情報研究所,甘肅 蘭州 730000)
針對傳統(tǒng)績效評價模式在考核管理工作中的局限與不足,在對科技平臺評價主體、評價客體、評價指標、評價方法分析研究的基礎(chǔ)上,提出基于B/S模式的地方科技平臺績效評價解決方案。利用可視化控制、管理方法,構(gòu)建集考評信息采集、考評指標定義、專家用戶評議、考評分值計算、考評結(jié)果統(tǒng)計查詢于一體的綜合績效評價系統(tǒng),并充分考慮科技平臺未來演變與發(fā)展需求,建立評價指標體系的動態(tài)定義管理,以增強系統(tǒng)的靈活性與通用性。應(yīng)用結(jié)果表明:該系統(tǒng)規(guī)范了科技平臺績效考核流程,提升了考評管理工作效率,提高了考核結(jié)果的精準性,為科技平臺的科學評價與管理決策提供了有益支撐。
科技平臺,績效評價,支持管理系統(tǒng)
2004年科技部、財政部、發(fā)改委、教育部聯(lián)合頒布了 《2004~2010年國家科技基礎(chǔ)條件平臺建設(shè)綱要》,啟動實施了一批國家科技基礎(chǔ)條件平臺建設(shè)計劃。根據(jù)《綱要》精神,各省市為提升地方科技資源的有效利用,解決行業(yè)共性技術(shù)需求,結(jié)合自身經(jīng)濟和社會發(fā)展實際,也陸續(xù)建立了一批地方科技創(chuàng)新服務(wù)平臺[1]。目前,這些科技平臺已逐漸從資源建設(shè)轉(zhuǎn)向運行服務(wù)階段。為加強科技平臺的監(jiān)督管理,建立科學有效的激勵機制,推進科技資源的共享利用,科技平臺的績效評價工作在國家與各省市相繼展開,并成為當前科技平臺建設(shè)發(fā)展過程中一項十分重要和必要的工作。
科技平臺的績效評價是通過績效評價指標體系的構(gòu)建,對科技平臺的資源整合力度、共享服務(wù)成效、科技創(chuàng)新能力作出客觀、公正和準確的綜合評價,以此建立激勵機制,充分調(diào)動平臺參建各方的積極性,促進科技資源的開放共享與有效利用。同時,為國家或地方政府進一步的支持投入和制定科技政策提供決策依據(jù),以推進科技平臺持續(xù)健康發(fā)展??紤]到科技平臺涉及的資源類型復(fù)雜、覆蓋面廣,參建部門多,其資源整合方式、組織管理模式、共享服務(wù)機制等方面的差異性較大等因素,為規(guī)范科技平臺績效考核流程、提升科技平臺考評工作效率、提高考核結(jié)果的精準性,提出基于B/S(Browser/Server,瀏覽器/服務(wù)器)模式的地方科技平臺績效評價解決方案。
1.1 系統(tǒng)總體構(gòu)架
通過對地方科技平臺評價主體、評價客體、評價指標、評價方法的分析研究,設(shè)計開發(fā)了集考評信息采集、指標動態(tài)定義、專家用戶評議、考評分值計算、結(jié)果統(tǒng)計查詢于一體的綜合績效評價支持系統(tǒng)[2]。該系統(tǒng)采用基于B/S三層體系結(jié)構(gòu)將系統(tǒng)劃分為表示層、應(yīng)用層和數(shù)據(jù)層[3]。表示層是Web客戶端,即系統(tǒng)管理員、授權(quán)用戶、平臺用戶、專家用戶和服務(wù)對象等各級授權(quán)用戶的登錄接口;應(yīng)用層是系統(tǒng)的可視化管理模塊,由考核信息管理、考核配置管理、考核評價管理與考核結(jié)果管理等四大應(yīng)用模塊構(gòu)成,是本系統(tǒng)的核心;數(shù)據(jù)層是各類文件、系統(tǒng)數(shù)據(jù)及資源數(shù)據(jù)的存儲系統(tǒng)。考慮到科技平臺類型的差異與未來發(fā)展需求,其指標體系采用動態(tài)定義管理模式,以便于日后的修訂與完善,系統(tǒng)總體構(gòu)架如圖1所示。
1.2 系統(tǒng)功能結(jié)構(gòu)
1.2.1 系統(tǒng)應(yīng)用功能
根據(jù)科技平臺考評工作流程,系統(tǒng)功能設(shè)計采用可視化管理模式,來提升系統(tǒng)的易用性。整個系統(tǒng)由四大功能模塊構(gòu)成,即考核信息管理、考核配置管理、考核評價管理、考核結(jié)果管理[4]。其中,考核信息管理模塊包括:自評信息填報、填報信息審核、填報信息查看、填報信息維護等功能;考核配置管理模塊包括:系統(tǒng)權(quán)限管理、考核指標管理、指標權(quán)重管理、考核模型管理等功能,系統(tǒng)管理員具有該模塊唯一管理權(quán)限;考核評價管理包括:服務(wù)對象評價、專家評價、定性數(shù)據(jù)管理、定量數(shù)據(jù)管理、考核分數(shù)計算、考核等級評價;考核結(jié)果管理模塊包括:考核結(jié)果查詢、考核結(jié)果統(tǒng)計。系統(tǒng)應(yīng)用功能結(jié)構(gòu)如圖2所示。
圖1 系統(tǒng)總體構(gòu)架
圖2 系統(tǒng)功能結(jié)構(gòu)
1.2.2 系統(tǒng)用例設(shè)計
用例(Use Case)是UML中非常重要的概念,是貫穿整個系統(tǒng)開發(fā)的一條主線,它通過用例圖以一種可視化的方式形象的描述了系統(tǒng)功能需求,即:角色、用例以及它們之間的關(guān)系,展示了一個外部用戶能夠觀察到的系統(tǒng)功能模型圖[5]。本系統(tǒng)用例圖:采用分級權(quán)限管理機制,將用戶角色分為五類,即系統(tǒng)管理員、授權(quán)用戶、平臺用戶、服務(wù)對象和專家用戶等,角色在系統(tǒng)操作中的用例主要有權(quán)限管理、指標管理、考核模型管理、平臺信息填報、填報信息修改、填報信息管理、填報信息查看、填報信息審核、定性與定量數(shù)據(jù)管理、考核分值計算、考核等級評價、考核結(jié)果查詢、考核結(jié)果統(tǒng)計等,不同角色用戶具有不同的操作權(quán)限。其中,系統(tǒng)用戶主要負責用戶權(quán)限、評價指標、指標權(quán)重、考核模型等的管理;授權(quán)用戶負責填報信息審核、定性與定量數(shù)據(jù)管理、考核分值計算、考核等級評價,并具有填報信息查看、考核結(jié)果查詢、統(tǒng)計等權(quán)限;平臺用戶負責自評信息填報、服務(wù)對象授權(quán),同時具有填報信息維護、考評結(jié)果查詢等功能;服務(wù)對象負責對接受服務(wù)的平臺做出滿意度評價;專家用戶通過對各平臺自評信息的查閱,進行平臺定性考核指標的評價。系統(tǒng)用例如圖3所示。
圖3 系統(tǒng)用例圖
1.3 評價體系設(shè)計
1.3.1 指標體系
參考國家科技平臺績效評價總體框架[6],結(jié)合地方科技平臺功能定位、類型差異,認真分析研究區(qū)域科技平臺考核范圍、評價內(nèi)容[7],遵循客觀、公正、科學、規(guī)范的原則,采用定性和定量相結(jié)合的方法,分別從運行管理、共享服務(wù)、服務(wù)成效、創(chuàng)新能力四個方面制定了四個一級指標、11個二級指標和26個三級指標(見表1)。在指標權(quán)重比重設(shè)定上將針對平臺類型的不同有所側(cè)重,科技基礎(chǔ)條件平臺主要側(cè)重科技資源整合利用情況及科技服務(wù)范圍與社會效益,行業(yè)創(chuàng)新服務(wù)平臺則側(cè)重研發(fā)創(chuàng)新能力、技術(shù)服務(wù)成效及經(jīng)濟效益??紤]到未來的發(fā)展,在該系統(tǒng)功能設(shè)計中,指標與權(quán)重采用動態(tài)定義管理模式,這樣便于日后指標與權(quán)重的修訂與完善,提升考評工作的靈活性,并增強系統(tǒng)的通用性。
表1 地方科技平臺指標體系
1.3.2 評價模型
根據(jù)考核內(nèi)容的不同,構(gòu)建不同的考核模型[8],即定性評價模型、定量評價模型與混合評價模型。首先,分別應(yīng)用定性評價模型、定量評價模型完成定性與定量指標的計算,然后應(yīng)用混合評價模型對科技平臺的定性、定量評價結(jié)果進行綜合評議。由于不同平臺的同一指標存在不同質(zhì)的問題,因此在定量評價之前需要對相關(guān)指標進行無量綱化處理。
各評價模型與無量綱化處理方法如下:
1)定性評價模型:
其中,A——定性評價績效;
m——末級定性指標個數(shù);
n——評議專家(或用戶)數(shù)量;
Fj——末級指標權(quán)重;
Mi——評議專家(或用戶)評分分值;
Mmax——評議專家 (或用戶)中評分最高的分值;
Mmin——評議專家 (或用戶)中評分最低的分值;
2)定量評價模型:
其中,A——定量評價績效;
n——末級定量指標個數(shù);
Fj——末級定量指標權(quán)重;
Mj——末級定量指標分值。
3)混合評價模型:
其中,A——綜合績效;
k——此次考核包含定性與定量模型的個數(shù);
Aj——某個模型得分。
4)無量綱化處理方法:
其中,M——定量指標分值;
P——該平臺定量指標值;
2.1 系統(tǒng)開發(fā)運行環(huán)境
1)服務(wù)器端
系統(tǒng)運行平臺:MS Windows Server 2008。
Web服務(wù)器:Apache HTTP Server 2.2.8。
開發(fā)工具:采用PHP-5.0開發(fā)語言及Zend Stu-dio9.0.4集成開發(fā)環(huán)境。
建模工具:Sybase PowerDesigner 9。
數(shù)據(jù)庫:Microsoft SQL Server 2008。
通信協(xié)議:TCP/IP協(xié)議 。
2)客戶端
系統(tǒng)運行平臺:Windows XP/7/8。
瀏覽器:Microsoft Information Explorer(IE)8.0以上版本
2.2 考核信息管理模塊
根據(jù)考評工作需求,考評信息管理模塊是實現(xiàn)各被考核科技平臺考評信息采集、審核、查閱等的操作,即包括自評信息填報、填報信息審核、填報信息查看、填報信息打印與填報信息維護等功能。其中,自評信息填報是各科技平臺填報信息的入口,各科技平臺承擔單位根據(jù)所屬科技平臺類型,填報考核自評信息,其內(nèi)容包括自評表填寫、自評總結(jié)與相關(guān)附件清單上傳等功能;填報信息審核是對各科技平臺所填報的考核自評信息的規(guī)范性進行審核(由授權(quán)用戶進行審核),未通過審核的自評信息將退回相應(yīng)科技平臺承擔單位重新修改填報,通過審核的自評信息將作為考核評價的參考依據(jù)提交考評組,不能再做修改;填報信息查看主要是為平臺用戶、考評專家、授權(quán)用戶提供考評信息的查閱,授權(quán)用戶與考評專家可查看所有被考評平臺的填報信息,平臺用戶僅能查看自填信息;填報信息下載打印功能主要是為被考核平臺提交紙質(zhì)自評報告設(shè)計的,該功能對平臺用戶與授權(quán)用戶可用。
2.3 考核配置管理模塊
考核配置管理模塊是系統(tǒng)權(quán)限管理與評價體系管理的功能模塊。為推進科技平臺考評工作的科學化,評價指標體系應(yīng)在穩(wěn)定性和發(fā)展性的平衡中不斷進行優(yōu)化。考慮到考核對象自身的發(fā)展及評判價值觀的演變,本系統(tǒng)評價指標設(shè)置、指標權(quán)重賦值、考核模型選定采用了自定義方式[9],以增強系統(tǒng)的靈活性。系統(tǒng)評價指標管理界面如圖4所示。
圖4 評價指標管理界面
考核配置管理模塊主要包括考核指標管理、指標權(quán)重賦值、考核模型管理和系統(tǒng)權(quán)限管理四部分。其中,系統(tǒng)權(quán)限管理是用于用戶權(quán)限的管理模塊,系統(tǒng)管理員具有該模塊所有功能的管理權(quán)限,由系統(tǒng)管理員為授權(quán)用戶、評審專家、平臺用戶授權(quán),平臺用戶可對其服務(wù)對象授權(quán);考核指標管理(包括指標權(quán)重管理)可按樹狀結(jié)構(gòu)靈活構(gòu)建與管理指標樹,其定義內(nèi)容有指標名稱、指標類型、指標說明、指標權(quán)重等(如圖5所示);考核模型管理是根據(jù)考核對象的不同,選擇不同的考核模型,如定性評價模型、定量評價模型、混合評價模型等。
圖5 評價指標及權(quán)重自定義界面
2.4 考核評價管理模塊
考核評價管理模塊是考評工作的核心,功能包括:服務(wù)對象評價、專家評價、定性數(shù)據(jù)管理、定量數(shù)據(jù)管理、考核分數(shù)計算、考核等級評價等。其中,服務(wù)對象評價是用戶對平臺的評價,服務(wù)對象通過登錄系統(tǒng),提取用戶評價指標,對平臺服務(wù)情況進行評價打分;專家評價則是專家對平臺的評價,專家通過登錄系統(tǒng),閱讀各平臺自評報告,分別提取相應(yīng)平臺定性評價指標,對其進行評價打分(如圖6所示);定性數(shù)據(jù)管理功能將對通過專家與用戶評價的指標數(shù)據(jù)的規(guī)范化進行審核,未通過審核的數(shù)據(jù)將退回專家或用戶重新修改,通過審核的數(shù)據(jù)將作為績效評價的最終數(shù)據(jù),提交考核評價指標庫中;定量數(shù)據(jù)管理功能是通過直接提取各平臺填報的定量指標數(shù)據(jù),對其真實性、規(guī)范性進行進一步審核,未通過審核的數(shù)據(jù)將退回相應(yīng)平臺重新修改,通過審核的數(shù)據(jù)經(jīng)無量綱化處理后,提交到考核評價指標庫中;考核分數(shù)計算功能是根據(jù)定性、定量評價指標的不同,選擇相應(yīng)評價模型,提取相應(yīng)指標數(shù)據(jù)(定性或定量指標),進行分值計算,包括各定量指標的平均值計算,定性、定量及綜合績效分值計算,各頂級指標的計算及排序;考核等級評價功能則是根據(jù)各平臺頂級指標計算與排序結(jié)果以及綜合考評分值,填寫考評分析說明與考評意見,最終生成考評報告。
圖6 專家評審界面
2.5 考核評結(jié)果管理模塊
考核結(jié)果管理模塊包括考核結(jié)果查詢與考核結(jié)果統(tǒng)計功能,其中,考核結(jié)果查詢按年度提供平臺的考核結(jié)果查詢,包括各平臺定量指標分值、定性評價分值、綜合績效分值、考評意見等(如圖7所示)。系統(tǒng)用戶與授權(quán)用戶具有上述所有功能查詢權(quán)限,平臺用戶僅能查詢各自平臺的績效分值與考評意見;考核結(jié)果統(tǒng)計提供所有科技平臺的考核結(jié)果統(tǒng)計,可選擇按科技平臺類型進行統(tǒng)計,統(tǒng)計內(nèi)容包括:經(jīng)費投入、經(jīng)濟效益(分別統(tǒng)計直接與間接效益)、承擔項目(分別統(tǒng)計國家與省部級)、完成成果、獲獎及取得知識產(chǎn)權(quán)數(shù)量等統(tǒng)計。
圖7 考核結(jié)果查詢界面
科技平臺績效評價支持系統(tǒng)是根據(jù)地方科技平臺績效考核管理需求設(shè)計開發(fā)的,該系統(tǒng)是一個集考評信息采集、專家與用戶評議、考評分值計算、考評結(jié)果統(tǒng)計查詢?yōu)橐惑w的綜合性評價管理支持系統(tǒng),目前已應(yīng)用于甘肅省科技創(chuàng)新平臺的績效考評管理中,甘肅省科技廳利用該系統(tǒng)已完成了2012年與2013年兩年甘肅省的科技基礎(chǔ)條件平臺與行業(yè)技術(shù)服務(wù)平臺的考評工作。該系統(tǒng)的開發(fā)研究對甘肅省科技創(chuàng)新平臺的科學評價與管理決策提供了有益支撐。同時,系統(tǒng)在評價指標體系的應(yīng)用中采用了自定義模式,不僅提高了系統(tǒng)的靈活性,而且也增強了系統(tǒng)的通用性,為進一步推廣應(yīng)用奠定了基礎(chǔ)。
[1] 申屠俊捷,蘭文燕.公共科技創(chuàng)新服務(wù)平臺績效評估指標體系研究[J].2009,(7):90-93.
[2] 鐘久隆,周琪云,朱隆尹.基于B/S結(jié)構(gòu)的銀行績效考核系統(tǒng)的設(shè)計方案[J].計算機與現(xiàn)代化,2007,(7):73-77.
[3] 鄧良松,劉海巖,陸麗娜.軟件工程[M].西安:西安電子科技大學出版社,2004.
[4] 張華波,郝平,金永夫,等.基于DM的科技計劃項目績效評價系統(tǒng)的設(shè)計[J].控制工程,2009,16(9):114-116.
[5] M.L.Liu.分布式計算原理與應(yīng)用[M].北京:清華大學出版社,2004.
[6] 胡永健.基于多屬性決策的國家科技基礎(chǔ)條件平臺運行服務(wù)績效評估研究[J].中國科技論壇,2009,(12):3-7.
[7] 陳丹青,溫琴娜,周艷,等.基于AHP的區(qū)域創(chuàng)新科技服務(wù)平臺績效評價指標體系研究[J].消費導刊,2009,(2):206-207.
[8] 劉生建,洪洲.績效考核系統(tǒng)的產(chǎn)品化設(shè)計及實現(xiàn)[J].中國科技信息,2011,(14):145-146,151.
[9] 孫健英,王霞.基于科研機構(gòu)的績效考核系統(tǒng)設(shè)計[J].科技促進發(fā)展,2012,(10):16-165.
TP311
本文系甘肅省技術(shù)研究與開發(fā)專項計劃項目“甘肅省科技創(chuàng)新服務(wù)平臺績效考核指標體系構(gòu)建與評價支持系統(tǒng)開發(fā)研究”(1205TCYA040)研究成果之一。
△ 通訊作者:肖琬蓉,甘肅省科學技術(shù)情報研究所。