李 彤 祝麗云 張曉忠 安 達
在全國奶業(yè)振興大背景下,身處中國四大黃金奶源帶的河北省,為進一步提升奶業(yè)競爭力,2018年制定了《河北省人民政府加快奶業(yè)振興行動計劃》。自此,河北省奶業(yè)進入重要轉型期。為加快河北奶業(yè)振興步伐,提高奶業(yè)技術創(chuàng)新,2019年度河北省省級科技計劃項目申報指南中設置了50項支持奶業(yè)振興重大技術創(chuàng)新專項項目,旨在構建全省現(xiàn)代奶牛良種繁育體系、高效精準飼養(yǎng)技術體系、優(yōu)質飼草飼料生產與加工體系、疫病防控體系和優(yōu)質安全乳制品加工體系。每個專項財政資金支持強度為50萬元左右,項目執(zhí)行期一般為2-3年。為探究奶業(yè)技術創(chuàng)新專項是否達到預期的效果,績效評價是一個有力工具。
國外科技項目績效評價工作開展時間較早,體系已較為健全。戴國慶和李麗亞(2005)對國外科技項目績效考評進行研究和借鑒,發(fā)現(xiàn)國外更注重政府對科技項目績效評價的管理過程和管理能力研究。隨著我國2003年《國家科技計劃項目評審行為準則督查辦法》的頒布,科技項目績效評價工作才逐漸規(guī)范化、制度化、體系化。陳小衛(wèi)等(2009)對我國科技項目評價進行了綜述研究;張淵等(2005)分析國內外科技計劃項目評估指標體系;肖鵬等(2018)對比研究了各種科技項目績效評價方法及其應用,主要包括灰色系統(tǒng)評價方法、數(shù)據包絡分析法、平衡計分卡方法。研究領域方面,主要集中在政府公共服務項目、科技興農項目、林業(yè)項目、農田水利建設項目、中央財政支農項目等方面,對畜牧業(yè)科技計劃項目績效評價相對欠缺。隨著奶業(yè)蓬勃發(fā)展,河北省加大了對奶業(yè)技術創(chuàng)新投資力度。為探究奶業(yè)技術創(chuàng)新專項是否達到預期效果,本文通過制定出一套比較科學系統(tǒng)地適用于河北奶業(yè)績效評價指標和評價方法,對河北奶業(yè)振興重大技術創(chuàng)新專項績效評價進行研究,一方面對奶業(yè)技術創(chuàng)新專項績效評價理論的研究有一定借鑒,另一方面對河北奶業(yè)重大技術創(chuàng)新專項的執(zhí)行和管理有著重要實踐意義。
2019年度河北省省級科技計劃項目申報指南設置的50項支持奶業(yè)振興重大技術創(chuàng)新專項項目中,科研院所承擔17項,占比34%;高等院校承擔14項,占比28%;政府單位承擔10項,占比20%;企業(yè)承擔9項,占比18%。按技術類別劃分,13項屬于乳品研發(fā)與品牌創(chuàng)建研究,占比最大,為26%;其次是優(yōu)質粗飼料生產技術12項,占比24%;營養(yǎng)與飼養(yǎng)技術和疫病防控技術均為9項,占比各為18%;奶牛良種繁育技術4項,占比8%;廢棄物資源化利用3項,占比6%。河北奶業(yè)振興重大技術創(chuàng)新專項是一個剛剛興起的項目,專家學者對該專項績效評價方面的研究目前尚少。
合理的科技計劃項目績效評價有利于推動科學技術創(chuàng)新和科技成果產業(yè)化,提升經濟、社會和環(huán)境效益,促進科技資源合理配置和財政資金科學投入。近幾年,河北省發(fā)布了多個省級科技計劃項目,績效評價方法較為單一,評價人員仍依靠自身經驗對評價指標權重進行主觀賦值,嚴重影響了評價結果的科學性和嚴謹性。對績效評價實施和項目驗收環(huán)節(jié)疏于管理,成果轉化率偏低。此外,目前尚無相關政策性法律法規(guī)保障河北省省級科技計劃項目績效評價工作順利開展。河北省財政廳2018年發(fā)布《河北省省級重大科技成果轉化項目績效評價報告》,通過設立績效評價指標并打分的方式,開展省級重大科技成果轉化項目績效評價工作,促進科技成果轉化項目實施取得了良好效益,可對河北省省級科技計劃項目績效評價起到借鑒作用。采用科學方法選擇適合奶業(yè)振興重大技術創(chuàng)新專項績效評價指標,并根據項目差異有針對性地進行指標調整,建立一套協(xié)調統(tǒng)一的績效評價體系,才能確保得到一個科學、合理、精確的評價結果。因此,河北奶業(yè)振興重大技術創(chuàng)新專項績效評價體系構建成為亟須解決的問題,該專項績效評價工作任重而道遠。
通過文獻查閱和資料收集,借鑒國內各省區(qū)市開展的科技計劃項目績效評價指標表,例如河北省現(xiàn)代農業(yè)技術體系創(chuàng)新團隊建設項目績效評價指標表、河北省省級引智項目績效評價評分表、內蒙古應用研究類項目績效評價指標表等,篩選出與科技計劃項目評價通用指標。再采用實地調查法,到河北奶業(yè)振興重大技術創(chuàng)新專項申請單位和企業(yè)進行調研,了解項目完成情況和項目產出情況,向專家征詢意見,增加一些體現(xiàn)河北奶業(yè)振興重大技術創(chuàng)新專項特點的指標,剔除一些不貼切不重要的指標,遵循科學性、系統(tǒng)性、可理解性等原則,采用層次型指標體系構建方法,建立一套包含3個一級指標,6個二級指標,22個三級指標的適合河北奶業(yè)振興重大技術創(chuàng)新專項績效評價指標體系,如圖1所示。
設計專家調查問卷分發(fā)給參與河北奶業(yè)振興重大技術創(chuàng)新專項的管理人員、財務人員,河北省奶牛產業(yè)體系各崗位專家,河北省奶源管理辦公室研究員,河北省畜牧良種工作站畜牧師等10位專家。
將10份專家調查問卷錄入YAAHP軟件,測算矩陣一致性,若一致性指標CR<0.1,則數(shù)據有效;若CR>0.1,則數(shù)據無效。10分調查問卷都通過了一致性檢驗。將專家打分去掉一個最高分和一個最低分后取眾數(shù),確定最終的河北奶業(yè)振興重大技術創(chuàng)新專項績效評價打分表。
將匯總打分表錄入YAAHP軟件,并通過一致性檢驗后,得到整個河北奶業(yè)振興重大技術創(chuàng)新專項績效評價指標權重,如圖2所示。
以A項目為例,結合所構建的績效評價指標體系,運用模糊綜合評價法進行奶業(yè)振興重大技術創(chuàng)新績效評價。A項目承擔單位是一家專門利用家畜胚胎移植及相關生物技術快速擴繁優(yōu)質奶牛、肉牛新品種的農業(yè)科技型股份制企業(yè)。A項目主要內容包括利用全基因組檢測技術選育荷斯坦牛核心育種群,研發(fā)優(yōu)質高產奶牛高效擴繁技術以及后備母牛精細化飼養(yǎng)管理技術。通過調研,收集了該專項實施過程中相關投入、產出指標,以及項目驗收考核指標。
1.構建評價因子集。對某一事物進行評價,如果評價的指標因子為n個,分別記為u1,u2,u3,…,un,則這n個評價因子便組成一個評價因子的有限集合U,U={u1,u2,u3,…,un}。例如項目決策(B1)的因子集為B1={立項依據充分性(C1),項目立項規(guī)范性(C2),績效目標合理性(C3)}。
2.構建評語等集。構建評語等集V={V1,V2,V3,V4,V5}={非常好,較好,一般,較差,非常差}
1.項目決策(B1)。因素集B1={立項依據充分性(C1),項目立項規(guī)范性(C2),績效目標合理性(C3)},根據10名專家對二級指標項目決策下的3個三級指標進行打分,得到單因素評定集:
再使用層次分析法得到三級指標D1、D2、D3的權重為0.1768、0.0589、0.1768,由 此 可 得 出 權 重 矩 陣 為:WB1=[0.1768,0.0589,0.1768]。
對BB1進行歸一化處理,得到BB1=[0.7143,0.1857,0.1,0,0]。由此得出,認為項目決策方面非常好的隸屬度為0.7143,較好的隸屬度為0.1857,一般的隸屬度為0.1,較差和非常差的隸屬度為0。根據模糊數(shù)學中隸屬度最大原則,從項目決策績效指標評價該項目為“非常好”。
2.項目投入(B2)。因素集B2={財政資金到位率(C4),自籌資金到位率(C5),預算編制合理性(C6),預算資金到位率(C7)},根據10名專家對二級指標項目投入下的4個三級指標進行打分,得到單因素評定集:
使用層次分析法計算得到三級指標C4、C5、C6、C7的權重,得出模糊綜合評價集:
對BB2進行歸一化處理,得到BB2=[0.3967,0.4619,0.1128,0.0286,0],由此得出,認為項目投入方面非常好的隸屬度為0.3967,較好的隸屬度為0.4619,一般的隸屬度為0.1128,較差的隸屬度為0.0286,非常差的隸屬度為0。根據模糊數(shù)學中隸屬度最大原則,從項目投入績效指標評價該項目為“較好”。
3.財務管理(B3)。因素集B3={財務管理制度健全性(C8),財務制度執(zhí)行有效性(C9),財務支出合理性(C10),財務支出與預算相符率(C11)},根據10名專家對二級指標財務管理下的4個三級指標進行打分,得到單因素評定集:
對BB3進行歸一化處理,得到BB3=[0.2693,0.4648,0.2659,0,0],由此得出,認為財務管理方面非常好的隸屬度為0.2693,較好的隸屬度為0.4648,一般的隸屬度為0.2659,較差和非常差的隸屬度為0。根據模糊數(shù)學中隸屬度最大原則,從財務管理績效指標評價該項目為“較好”。
4.組織管理(B4)。因素集B4={項目管理制度健全性(C12),項目管理制度有效性(C13),項目質量可控性(C14),信息公開實現(xiàn)率(C15)}。根據10名專家對二級指標財務管理下的4個三級指標進行打分,得到單因素評定集:
使用層次分析法計算得到三級指標C8、C9、C10、C11的權重,得出模糊綜合評價集:
對BB4進行歸一化處理,得到BB4=[0.1541,0.3757,0.3401,0.1072,0.0229],由此得出,認為組織管理方面非常好的隸屬度為0.1541,較好的隸屬度為0.3757,一般的隸屬度為0.3401,較差的隸屬度為0.1072,非常差的隸屬度為0.0229。根據模糊數(shù)學中隸屬度最大原則,從組織管理績效指標評價該項目為“較好”。
5.項目產出(B5)。因素集B5={實際完成率(C16),質量達標率(C17),完成及時率(C18)}。根據10名專家對二級指標項目產出下的3個三級指標進行打分,得到單因素評定集:
使用層次分析法計算得到三級指標C16、C17、C18的權重,得出模糊綜合評價集:
對BB5進行歸一化處理,得到BB5=[0.658,0.2678,0.0742,0,0],由此得出,認為項目產出方面非常好的隸屬度為0.658,較好的隸屬度為0.2678,一般的隸屬度為0.0742,較差和非常差的隸屬度均為0。根據模糊數(shù)學中隸屬度最大原則,從項目產出績效指標評價該項目為“非常好”。
6.項目成果(B6)。因素集B6={科研成果(C19),經濟效益(C20),社會效益(C21),環(huán)境效益(C22)}。根據10名專家對二級指標項目成果下的4個三級指標進行打分,得到單因素評定集:
使用層次分析法計算得到三級指標C19、C20、C21、C22的權重,得出模糊綜合評價集:
對BB6進行歸一化處理,得到BB6=[0.2235,0.6174,0.1591,0,0],由此得出,認為項目成果方面非常好的隸屬度為0.2235,較好的隸屬度為0.6174,一般的隸屬度為0.1591,較差和非常差的隸屬度均為0。根據模糊數(shù)學中隸屬度最大原則,從項目成果績效指標來評價該項目為“較好”。
為了對項目整體進行全面績效評價,需要在二級指標分析結果的基礎上,對一級指標進行更高層次模糊評價分析。
1.項目設置(A1)。因素集A1={項目決策(B1),項目投入(B2)}。根據10名專家對一級指標項目設置下的2個二級指標打分后計算得到的評價結果,進行歸一化處理后得到單因素評定集:
再應用層次分析法計算得到兩個二級指標B1、B2占整體績效評價的權重為0.4125、0.1375,則權重矩陣為WA1=[0.4125,0.1375],因此得出項目設置的模糊綜合評價集:
對BA1進行歸一化處理,得到BA1=[0.6349,0.255,0.1031,0.007,0],由此得出,項目設置方面非常好的隸屬度為0.6349,較好的隸屬度為0.255,一般的隸屬度為0.1031,較差的隸屬度為0.007,非常差的隸屬度為0。根據模糊數(shù)學中隸屬度最大原則,從項目設置績效指標來評價該項目為“非常好”。
2.項目管理(A2)。因素集A2={財務管理(B3),組織管理(B4)}。根據10名專家對一級指標項目管理下的2個二級指標打分后計算得到的評價結果,進行歸一化處理后得到單因素評定集:
使用層次分析法計算得到兩個二級指標B3、B4占整體績效評價的權重為0.035、0.1749,則權重矩陣為WA2=[0.035,0.1749],因此得出項目管理的模糊綜合評價集:
對BA2進行歸一化處理,得到BA2=[0.1734,0.3907,0.3277,0.0891,0.0191],即項目管理方面非常好的隸屬度為0.1734,較好的隸屬度為0.3907,一般的隸屬度為0.3277,較差的隸屬度為0.0891,非常差的隸屬度為0.0191。根據模糊數(shù)學中隸屬度最大原則,從項目管理績效指標評價該項目為“較好”。
3.項目效果(A3)。因素集A3={項目產出(B5),項目成果(B6)}。根據10名專家對一級指標項目效果下的2個二級指標打分后計算得到的評價結果,進行歸一化處理后得到單因素評定集:
使用層次分析法計算得到兩個二級指標B5、B6占整體績效評價的權重為0.1802、0.0601,則權重矩陣為WA2=[0.1802,0.0601],因此得出項目管理的模糊綜合評價集:
對BA3進行歸一化處理,得到BA3=[0.5491,0.3552,0.0957,0,0],由此得出,項目效果方面非常好的隸屬度為0.5491,較好的隸屬度為0.3552,一般的隸屬度為0.0957,較差和非常差的隸屬度均為0。根據模糊數(shù)學中隸屬度最大原則,從項目效果績效指標評價該項目為“非常好”。
通過以上研究,已經計算出全部層級指標的模糊綜合評價,并得出了各級指標層對項目績效不同等級評語的隸屬度。為了對項目進行整體績效評價,下面根據一級指標對項目進行模糊綜合評價。
項目整體績效因素集T={項目設置(A1),項目管理(A2),項目效果(A3)},根據上一節(jié)計算的一級指標分析結果,進行歸一化處理后得到單因素評定集:
使用層次分析法計算得到3個一級指標A1、A2、A3占整體績效評價的權重為0.5499、0.2098、0.2402,則權重矩陣為WT=[0.5499,0.2098,0.2402],因此得出項目模糊綜合評價集T:
對T進 行 歸 一 化 處 理,得 到T=[0.5175,0.3075,0.1485,0.0225,0.004],由此得出,整個項目績效非常好的隸屬度為0.5175,較好的隸屬度為0.3075,一般的隸屬度為0.1485,較差的隸屬度為0.0225,非常差的隸屬度為0.004。根據模糊數(shù)學中隸屬度最大原則,該項目的綜合績效評價結果為“非常好”。
本文中A項目屬于奶牛良種繁育技術,績效評價指標體系除了包括共性指標外,還重點考慮了關于奶牛良種繁育技術個性因素。因此,在構建科學全面有效的河北奶業(yè)振興重大技術創(chuàng)新專項績效評價指標體系過程中,在設立共性指標的基礎上,還需根據項目技術類別和特點,增加相應個性指標,以確??冃гu價工作更加規(guī)范合理。
本文采用層次分析法和模糊綜合評價法,在計算指標權重和對各階段績效情況打分時,對專家主觀判斷依賴性較強,忽略了少數(shù)派的意見,會在一定程度上影響評價結果。在未來研究中,尚需繼續(xù)探尋更科學合理的研究方法,綜合考慮項目每一階段和每個環(huán)節(jié),使績效評價工作更加科學、合理和高效。
提高專項成果信息公開透明度,有利于集思廣益,查漏補缺,并監(jiān)督和激勵項目承擔方。對于需要大范圍推廣和應用的基礎技術項目,要及時公開項目成果,加強科研單位、高等院校、企業(yè)等項目承擔單位之間交流,實現(xiàn)研究成果共享和整體技術水平提升。對于一些不宜公開的核心技術項目,承擔單位可增加適當保密措施;政府監(jiān)管部門可以制定嚴格的保密實施辦法,形成外部監(jiān)督力量。
項目承擔單位存在的不合理財務問題和不健全的管理制度,會大大影響項目實施進展和項目成果。因此項目承擔單位要引以為戒,完善財務制度和管理制度,保障資金規(guī)范、安全運行,做到專款專用;對科研工作嚴格建立規(guī)范的管理制度,切實把控項目進度和成果質量。