基于AHP的地方財政科技項目績效評價研究*
——以河南省焦作市為例

河南理工大學(xué) 鄧茹

基于AHP的地方財政科技項目績效評價研究*
——以河南省焦作市為例

河南理工大學(xué) 鄧茹

科技項目績效評價從政府財政支出的角度對科技投入的效益進行評估，為區(qū)域科技創(chuàng)新提供了重要支撐。文章在國內(nèi)外學(xué)者針對科技投入績效評價研究的基礎(chǔ)上，建立了科技項目績效評價體系，通過德爾菲法從業(yè)務(wù)評價和財務(wù)評價兩個方面設(shè)計9個二級評價指標、23個三級評價指標，運用層次分析法確定指標權(quán)重，結(jié)合多級綜合加權(quán)評價法構(gòu)建績效評價模型，并以河南省焦作市為例進行實證分析，驗證了績效評價體系的可行性與科學(xué)性，最后根據(jù)評價結(jié)果為焦作市科技資金使用提出優(yōu)化建議。

科技項目 績效評價 評價體系 層次分析法（AHP）

一、引言

財政科技投入作為地方經(jīng)濟發(fā)展的重要支撐，同時也是區(qū)域科技進步的物質(zhì)保障。隨著國家對科技創(chuàng)新的重視程度不斷提高，地方財政也在逐步加大科技投入，而科技項目作為財政科技資金最微觀的載體，項目完成后所產(chǎn)生的效益、效果及資金使用效率成為政府相關(guān)決策部門普遍關(guān)注的重點。

目前，在財政科技投入績效評價指標設(shè)計及方法選擇方面，國內(nèi)學(xué)者進行了許多系統(tǒng)的研究，如余振乾等（2005）提出在系統(tǒng)論的觀點下構(gòu)建財政科技投入績效評價模型，并指出評價指標的設(shè)計要以科技項目為主線分類進行評價；胡興旺（2007）指出要根據(jù)科技活動內(nèi)容不同，設(shè)立不同的績效目標，分別建立績效評價指標體系；尤建新等（2009）系統(tǒng)分析總結(jié)了國內(nèi)外科技項目績效管理研究的相關(guān)成果并指出其不足之處，提出未來科技項目的研究重點應(yīng)向績效管理模式傾斜；楊云等（2012）從科技項目績效評價與績效管理、公共績效評價的關(guān)系、科技工作績效的關(guān)系等幾個層面對科技項目績效評價進行了辨析，為科技項目績效評價的實施指明了方向；李潔（2014）以國家重大科技專項資金為例，從績效審計的角度構(gòu)建績效審計的框架并進行了應(yīng)用；袁旭梅等（2015）運用ANP理論構(gòu)建了科技項目績效評價模型，有效解決了評價因素之間相互影響的問題。通過上述文獻研究梳理發(fā)現(xiàn)，雖然眾多學(xué)者從指標設(shè)計、方法選擇等方面對財政科技投入績效進行了深入研究，但大部分研究成果還停留在理論階段，實證研究方面并不系統(tǒng)，研究的切入點基本上都從國家宏觀科技投入角度出發(fā)，在評價指標的設(shè)計過程中都是基于財政專項資金績效評價指標的基礎(chǔ)上構(gòu)建的，無法體現(xiàn)科技項目的側(cè)重點與特性，進而對評價結(jié)果的應(yīng)用造成了一定的影響，不利于科技部門及財政部門的決策。鑒于此，本文在前人研究的基礎(chǔ)上，結(jié)合科技項目資金應(yīng)用的特點，通過德爾菲法設(shè)計績效評價指標，運用層次分析法（AHP）設(shè)置指標權(quán)重，通過多級綜合加權(quán)評價法構(gòu)建績效評價模型，并以河南省焦作市為例進行實證研究，為地方政府財政科技項目績效評價提供借鑒和參考。

表1 財政科技項目績效評價指標體系

二、科技項目績效評價體系構(gòu)建

（一）科技項目績效評價指標設(shè)計財政科技項目資金績效評價指標是衡量、監(jiān)測和評價財政科技項目資金投入的經(jīng)濟性、效率性和有效性，揭示財政科技項目支出存在問題的重要量化手段，績效評價指標是否科學(xué)、適用是能否正確評判科技項目資金使用效率的關(guān)鍵。評價指標在設(shè)計過程中除了要考慮科學(xué)性、目的性、定量與定性相結(jié)合的原則外，還要考慮系統(tǒng)性、層次性、可操作性以及項目資金的導(dǎo)向性原則。

在評價指標設(shè)計過程中，筆者首先通過梳理相關(guān)文獻資料、深入相關(guān)企業(yè)進行實地走訪調(diào)研，充分了解了科技項目資金使用過程中的相關(guān)問題。然后在理論分析與實地調(diào)研的基礎(chǔ)上，形成初步的科技項目績效評價指標框架，運用德爾菲法，將初步設(shè)計的績效評價指標體系提請相關(guān)專家進行評判，在充分討論、反復(fù)論證的基礎(chǔ)上，最終從業(yè)務(wù)評價和財務(wù)評價兩個維度設(shè)計了2個一級指標、9個二級指標、23個三級指標，以此對科技項目資金使用情況進行全面、系統(tǒng)、科學(xué)的績效評價。其中業(yè)務(wù)評價指標主要包括科技項目管理情況、目標完成情況、項目的技術(shù)水平、經(jīng)濟效益、社會效益等方面；財務(wù)評價指標包括資金收支情況、財務(wù)管理制度等方面。具體指標如表1所示。

針對指標中的經(jīng)濟效益、社會和環(huán)境效益的評價，考慮到科技項目從技術(shù)研發(fā)成功到全面產(chǎn)業(yè)化的時間間隔較長，為提高評價結(jié)果的準確性，在評價過程中采用項目驗收后1-2年的相關(guān)數(shù)據(jù)進行評判。

（二）科技項目績效評價指標權(quán)重確定

（1）層次分析法的基本原理及步驟。20世紀70年代，美國著名運籌學(xué)家T.L.Santy提出了層次分析法（AHP），該方法是通過梳理各種因素之間的關(guān)系，將復(fù)雜的問題分為成不同的要素，根據(jù)各要素的關(guān)系及性質(zhì)將其歸納為不同的層次，構(gòu)建一個多層次的要素結(jié)構(gòu)層。針對不同的層級制定不同的規(guī)則，構(gòu)建同層次要素之間的判斷矩陣。在計算矩陣最大特征值和特征向量的基礎(chǔ)上，得出各要素層的權(quán)重值，為最優(yōu)方案的選擇提供依據(jù)。通過建立科學(xué)適用的績效評價指標體系，并運用AHP法進行權(quán)重分配，不僅有利于對科技項目資金的使用效率進行客觀評價，同時還可以從不同的角度反映各種因素對財政科技項目資金績效的影響，為政府相關(guān)部門決策提供參考。

AHP法具體操作步驟如下：

第一，構(gòu)造判斷矩陣。判斷矩陣是AHP的基本信息，也是進行相對重要度計算，進行層次單排序的依據(jù)。判斷矩陣是以上一級要素Z作為評價準則，對本級的要素進行兩兩比較來確定矩陣元素的。例如，以Z為評價準則的有n個要素，其判斷矩陣形式如表2所示：

表2 判斷矩陣

在判斷矩陣B中的元素bij表示依據(jù)評價準則Z，要素bi對bj的相對重要性。bij的值是根據(jù)資料數(shù)據(jù)、專家意見和評價主體的經(jīng)驗，經(jīng)過反復(fù)研究后確定的。通常人們所采用的標度為1～9比例標度。

依據(jù)上述原理，結(jié)合科技項目資金績效評價的特點，在專家組充分論證的基礎(chǔ)上確定了各級指標的權(quán)重，本文以一級指標和業(yè)務(wù)評價的二級指標為例進行權(quán)重的確定計算。具體權(quán)重如表3、表4所示：

表3 一級指標權(quán)重判斷矩陣

表4 業(yè)務(wù)評價二級指標權(quán)重判斷矩陣

將上述表3、表4轉(zhuǎn)換為矩陣形式如下：

第二，將判斷矩陣中每一列元素作歸一化處理，

其中一級指標歸一化處理后得出：

第五，一致性檢驗。采用AHP法確定的比較判斷矩陣，可能會由于不同因素之間的比較差異出現(xiàn)前后矛盾的結(jié)果，特別是當判斷因素較多時，容易出現(xiàn)誤差，因此需要對判斷結(jié)果進行一致性檢驗，一致性檢驗就是要滿足隨機一致性比率CR小于0.1的條件。具體計算過程如下：

表5 平均隨機一致性指標

根據(jù)上述一致性判斷原理，本文以業(yè)務(wù)評價二級指標為例進行一致性判斷，具體解析過程如下：

通過上述計算結(jié)果判定，矩陣通過一致性檢驗，各級指標權(quán)重合理，因此業(yè)務(wù)評價二級指標權(quán)重分別為：

同理，一級指標權(quán)重分別為：A1=0.75，A2=0.25

（2）其它各層級指標權(quán)重的確定。根據(jù)上述AHP法指標權(quán)重的確定原理和步驟，計算出其它各層級指標權(quán)重。

第一，其中業(yè)務(wù)評價部分三級指標權(quán)重如下：項目管理情況三級指標權(quán)重：B11=0.33，B12=0.67項目完成情況三級指標權(quán)重:B21=0.4，B22=0.6項目技術(shù)水平三級指標權(quán)重:B31=0.625，B32=0.238，B33=0.137

經(jīng)濟效益三級指標權(quán)重：B41=0.4，B42=0.4，B43=0.2

社會與環(huán)境效益三級指標權(quán)重：B51=0.55，B52=0.24，B53=0.21

第二，財務(wù)評價二級指標權(quán)重：B6=0.492，B7=0.306，B8=0.078，B9=0.125

財務(wù)評價部分三級指標權(quán)重如下：

資金到位情況三級指標權(quán)重：B61=0.5，B62=0.5資金支出情況三級指標權(quán)重：B71=0.4，B72=0.6會計信息質(zhì)量三級指標權(quán)重：B81=0.5，B82=0.25，B83= 0.25

財務(wù)管理狀況三級指標權(quán)重：B91=0.163，B92=0.54，B93= 0.297

上述二級指標及三級指標權(quán)重完全遵照AHP法的原理，經(jīng)驗證各級指標權(quán)重均通過一致性檢驗，不存在比較判斷矩陣自相矛盾現(xiàn)象。權(quán)重分配結(jié)果能夠較好的體現(xiàn)出該類指標的重要性程度，為評價結(jié)果的科學(xué)性、合理性奠定了基礎(chǔ)。

（三）科技項目績效評價模型構(gòu)建及評價標準

（1）科技項目績效評價模型構(gòu)建。通過上述運用德爾菲法和層次分析法（AHP）分別設(shè)計、確定的科技項目績效評價指標及權(quán)重，根據(jù)績效評價體系構(gòu)建的特點，將運用多級綜合加權(quán)評價法構(gòu)建科技項目績效評價模型。其中一級指標評價模型如下：

在上式中，YJZBi代表各個一級指標的績效評估值，其中i=1，2分別代表業(yè)務(wù)評價和財務(wù)評價兩個一級指標；Wij代表各個一級指標下二級指標的權(quán)重系數(shù)；m代表各個一級指標下二級指標的個數(shù)；n代表各個二級指標下三級指標的個數(shù)；Wijk代表二級指標下三級指標的權(quán)重系數(shù)；Vijk代表各個三級指標的評分值。

在一級指標分值確定的基礎(chǔ)上，根據(jù)業(yè)務(wù)評價和財務(wù)評價兩個一級指標的評價結(jié)果構(gòu)建科技項目績效評價整體模型，其模型為：，式中Wi代表各一級指標的權(quán)重系數(shù)

（2）科技項目績效評價標準?？冃гu價采取百分制的計分方式，績效評價結(jié)果分為優(yōu)秀、良好、中等、合格、差5個等級，其中90分及以上為優(yōu)秀，80～90分為良好（含80分），70～80分為中等（含70分），60～70分為合格（含60分），60分以下為差。

三、科技項目績效評價體系應(yīng)用

在上述科技項目績效評價體系構(gòu)建的基礎(chǔ)上，本文以焦作市為例，從宏觀和微觀兩個層面對科技資金使用情況進行績效評價。

（一）焦作市科技項目資金總體投入分析焦作市位于河南省西北部，轄5個市轄區(qū)、4個縣、代管2個縣級市。近年來，焦作市科技項目資金的投入力度不斷增強，為促進地方經(jīng)濟發(fā)展由要素驅(qū)動向創(chuàng)新驅(qū)動轉(zhuǎn)變提供了重要的支撐。焦作市財政科技項目資金投入主要包括科技計劃項目、科技獎勵、科技專項計劃三個方面，2011-2014年度科技項目資金投入具體如表6所示：

表6 2011-2014年度焦作市科技項目資金投入情況（單位：萬元）

表6中的科技計劃項目主要包括焦作市重大科技專項、創(chuàng)新人才培育、成果轉(zhuǎn)化及產(chǎn)業(yè)化、科技攻關(guān)、軟科學(xué)、貸款貼息項目等；科技獎勵主要針對省級和市級工程技術(shù)中心、院士工作站、高新技術(shù)企業(yè)在科技研發(fā)方面取得成果的獎勵；科技專項計劃主要包括星火培訓(xùn)、科技特派員、專利清零行動計劃專項等。通過表6的科技項目資金投入的規(guī)模和結(jié)構(gòu)可以看出，（1）近幾年來焦作市科技項目資金投入的力度不斷增強，為科技創(chuàng)新驅(qū)動發(fā)展戰(zhàn)略的實施提供了重要支撐；（2）科技計劃項目投入資金占據(jù)每年投入資金的50%以上，充分說明了焦作市對重大科技專項、科技攻關(guān)等方面的重視程度；（3）雖然資金總量相對于全省甚至國家來講比例很小，但對于焦作市科技創(chuàng)新的引導(dǎo)作用非常明顯。根據(jù)焦作市科技局統(tǒng)計數(shù)據(jù)顯示，2011年科技項目帶動企業(yè)投資9.85億元，新增銷售收入10.2億元，新增利稅1.1億元，獲得成果80余項，新增就業(yè)1500余人。2012年科技計劃項目帶動企業(yè)投資12億元，新增銷售收入11.7億元，新增利稅1.7億元，獲得成果100余項，新增就業(yè)1900余人。2013年帶動企業(yè)投資13億元，新增銷售收入15億元，新增利稅2.6億元，獲得成果90余項，新增就業(yè)2600余人。

（二）焦作市科技項目績效評價在科技項目總體分析的基礎(chǔ)上，本文選取了科技攻關(guān)、重大科技專項、國際科技合作三個類別的項目，結(jié)合上文構(gòu)建的績效評價體系進行評價。

表7 項目績效評價基本情況及結(jié)果

通過運用所構(gòu)建的科技項目績效評價體系，針對項目的業(yè)務(wù)評價和財務(wù)評價的相關(guān)指標進行了客觀的打分，最終得出項目A得分86.8分，等級為良好；項目B得分73.5分，等級為中等；項目C得分90.2分，等級為優(yōu)秀。通過上述績效評價體系的應(yīng)用發(fā)現(xiàn)，科技項目績效評價體系能夠真實的反映科技資金的績效情況，可以為地方財政、科技部門的管理提供參考。

五、結(jié)論及建議

（一）研究結(jié)論建立科學(xué)、適用的科技項目績效評價體系，全面評價財政科技項目的經(jīng)濟與技術(shù)目標完成情況、項目資金投入產(chǎn)生的各種效益及資金管理等內(nèi)容，不僅有利于提高政府科技項目資金支出決策水平，提供財政資金配置有效性的測度結(jié)論，而且還有利于強化財政科技資金支出的管理與監(jiān)督，促使科技項目承擔(dān)者進行項目目標管理。本文通過設(shè)計科技項目績效評價指標、確定指標權(quán)重、建立評價模型對2011-2014年焦作市財政科技項目進行了績效評價，為相關(guān)政府部門決策提供參考。通過研究主要得出以下結(jié)論：第一，通過指標權(quán)重的確定發(fā)現(xiàn)，科技項目績效評價的研究應(yīng)側(cè)重于經(jīng)濟效益、社會與環(huán)境效益、資金的落實與支出幾個方面，只有加強這些方面的監(jiān)管才能更加有效的提高科技項目資金的使用效率、效益。第二，科技項目績效評價體系適用性強，通過績效評價過程，能夠深刻揭示項目單位在資金運用過程中存在的相關(guān)問題，為今后規(guī)范科技項目資金使用提供改進方向。第三，績效評價結(jié)果表明，個別項目單位在資金使用過程中存在未能設(shè)置專賬、挪用資金現(xiàn)象；但大部分項目單位能夠做到專款專用，符合財政科技項目資金的使用范圍和目的，對焦作市區(qū)域經(jīng)濟發(fā)展的帶動作用明顯，科技項目資金總體績效評價結(jié)果良好。

（二）相關(guān)建議第一，繼續(xù)加大科技項目資金投入力度。近年來，焦作市科技項目投入不斷增加，但總量仍顯不足，落實的項目單位的資金額度較少，應(yīng)將科技項目投入作為預(yù)算保障的重點。建立完善的政府投入引導(dǎo)機制和健全的社會投入激勵機制，積極吸引社會資金，形成多元共建的科技創(chuàng)新體系。第二，優(yōu)化科技項目資金投入模式，提高資源配置效率。在科技項目資金投入過程中，可采用后補助模式，該模式是指項目單位對自主確定的研發(fā)項目先行投入資金實施，在完成計劃意向書約定目標任務(wù)，并通過驗收后，給予經(jīng)費補助的財政資助方式，從而夯實科技項目資金的使用效果和效益。同時，針對科技資金的投向要進行審慎選擇，明確資金投入的重點領(lǐng)域和重點行業(yè)，突出產(chǎn)業(yè)化導(dǎo)向，共建企業(yè)與政府聯(lián)動、互動的良好局面，進而提高科技資源配置效率。第三，積極培育專業(yè)評價中介機構(gòu)，完善科技績效評價的軟環(huán)境。當前，地方政府對于科技進步與創(chuàng)新、經(jīng)濟轉(zhuǎn)型發(fā)展非常重視，財政科技投入力度也在不斷增大，但由于時間和精力有限，往往存在“重投入，輕管理”現(xiàn)象，因此，應(yīng)當積極培育第三方機構(gòu)參與科技項目績效評價，形成獨立、公正、客觀的績效評價環(huán)境，切實保障績效評價工作的順利開展，為政府部門提供科學(xué)、詳實的決策建議。

*本文系河南省教育廳人文社會科學(xué)研究項目資助“地方財政科技投入績效評價體系構(gòu)建及應(yīng)用研究”（項目編號：2016-qn-129）、河南理工大學(xué)基本科研業(yè)務(wù)費專項項目“創(chuàng)新發(fā)展驅(qū)動戰(zhàn)略下地方財政科技投入效率研究”（項目編號：SKJYB2016-08）階段性研究成果。

［1］余振乾、余小方：《地方財政科技支出績效評價指標體系構(gòu)建及其實施》，《中國軟科學(xué)》2005年第4期。

［2］胡興旺：《財政科技支出績效管理研究》，《財政研究》2007年第7期。

［3］尤建新、曹顥、鄭海鰲：《國內(nèi)外科技項目績效管理理論研究述評》，《科技與管理》2009年第5期。

［4］楊云、龐宇、陶蕊：《辨析科技項目績效評價的四個關(guān)系》，《中國科技論壇》2012年第12期。

［5］袁旭梅、張旭、祝雅妹：《基于ANP理論的科技項目績效評價模型及應(yīng)用》，《科技管理研究》2015年第21期。

［6］李潔：《科技資金績效審計框架設(shè)計及應(yīng)用研究》，《中國注冊會計師》2014年第6期。

（編輯 劉姍）