修購專項資金項目后評價指標體系的構(gòu)建

陳力，盛福深

（1.北京交通大學 基建與規(guī)劃處，北京 100044；2.海軍工程大學 勤務學院，天津 300450）

修購專項資金項目后評價指標體系的構(gòu)建

陳力1，盛福深2

（1.北京交通大學 基建與規(guī)劃處，北京 100044；2.海軍工程大學 勤務學院，天津 300450）

基于建設項目后評價的要求和后評價指標體系構(gòu)建的原則，針對修購專項資金項目的特點和專項支出績效報告的要求，開展對既有公共建筑改造項目全壽命周期的分析，借鑒國內(nèi)外的研究成果，改進了 Delphi法（專家規(guī)定程序調(diào)查法），探索了適用于修購專項資金項目后評價指標體系構(gòu)建的研究方案。文章以高校圖書館大修及節(jié)能改造工程為實例，將研究方案應用于該工程項目后評價指標體系的構(gòu)建，包括專家組的組建、調(diào)查問卷的設計和編制、征詢信息的處理、后評價指標庫的形成和后評價指標體系的構(gòu)建，最終形成了具有 40個第三層次指標的后評價指標庫，構(gòu)建了具有5個第一層次、20個第二層次的多層次后評價指標體系。評價結(jié)果表明，該指標體系符合修購專項資金項目特點，涵蓋專項支出績效報告要求的全部內(nèi)容，便于進行定性與定量相結(jié)合的項目后評價。

修購專項資金項目；后評價指標體系；Delphi法

0 引言

教育部和財政部為解決中央高校普遍面臨的經(jīng)費問題，在“十二五”期間擬集中資金優(yōu)先重點支持修購專項資金項目。此類項目涉及內(nèi)容繁多，主要包括完善安防、消防、防雷設施；修繕存在安全隱患的教室、學生宿舍、食堂、圖書館、體育館等房屋建筑物及校園藝術(shù)演出場地；改造完善地下管網(wǎng)綜合設施；購置相關(guān)設備；搶救性維修標志性建筑、古舊建筑；電力增容及供暖鍋爐改造；校園信息化建設等綜合性、系統(tǒng)性項目；適當兼顧學校教學實驗室改造、教學實驗室設備購置等教學條件提升項目［1］。后評價指標體系是項目的主要考察內(nèi)容，后評價指標體系的構(gòu)建是進行項目后評價的重要基礎［2］，對于專項資金的合理使用及風險控制具有重要意義。通過由所研究的對象和目標中科學地選取一些能夠客觀地反映目標對象的整體或部分特征的參數(shù)作為依據(jù)，在工程項目竣工投入使用后的一定時期內(nèi)，對前期工作、施工過程、效益、作用和影響進行全面的跟蹤、調(diào)查、分析，對工程項目做出客觀、系統(tǒng)的評估，并按照一定的層次結(jié)構(gòu)共同構(gòu)成的一個系統(tǒng)。后評價指標體系的構(gòu)建應遵循綜合性、集成性、整體性、適用性、既有性等原則［3］。

目前，針對建設項目后評價指標體系的構(gòu)建，學者們進行了廣泛的研究。王華提出國內(nèi)外對建設項目構(gòu)建后評價指標體系的方法主要有對比分類法、邏輯框架法、Delphi法、層次分析法等［2］。王清勤等采用Delphi法構(gòu)建了既有公共建筑節(jié)能改造工程的評價指標體系，由圍護結(jié)構(gòu)、通風與空調(diào)、設備運營與管理、環(huán)境影響、經(jīng)濟效益、采暖改造構(gòu)成［4］。朱學明等針對新建公共建筑構(gòu)建了后評價指標體系，由項目決策過程、實施過程、經(jīng)濟效益、可持續(xù)性、環(huán)境和社會效益構(gòu)成［5］。蔣宏等針對高校新建工程構(gòu)建了后評價指標體系，由社會微觀影響、社會宏觀影響、經(jīng)濟影響、環(huán)境影響構(gòu)成［6］。尤荻等針對圖書館建設項目構(gòu)建了社會效益后評價體系，由硬件和軟件、公共服務提供和用戶滿意度、信息和基礎設施可持續(xù)性構(gòu)成［7］。張華棟等針對老舊房屋改造項目構(gòu)建了社會經(jīng)濟效益后評價體系，由經(jīng)濟凈現(xiàn)值、經(jīng)濟內(nèi)部收益率、經(jīng)濟效益費用比構(gòu)成［8］。郭振勝針對高?；椖康捻椖抗芾砗笤u價進行了研究，評價體系由項目設計、施工管理、社會經(jīng)濟、環(huán)境評價構(gòu)成［9］。劉丹平等針對高?；椖康暮笤u價進行了研究，評價體系由立項決策、勘察設計、施工管理、竣工驗收、使用運行、社會效益、經(jīng)濟效益構(gòu)成［10］。上述文獻中的研究對象均為非營利性建設項目，對修購專項資金項目后評價體系的構(gòu)建具有重要的指導意義和參考價值，但是在項目的投資目的、資金來源、資金額度、工期要求、施工復雜性等方面與修購專項資金項目之間存在差異，故其研究方案和研究成果不能直接應用于本項目的后評價。

文章分析了修購專項資金項目績效報告的內(nèi)容要求，借鑒上述文獻中的研究方法和成果，采用改進后的Delphi法，建立關(guān)于圖書館大修及節(jié)能改造項目的研究方案和后評價指標體系，為項目高質(zhì)量完成專項支出績效報告奠定基礎，探索出一種針對修購專項資金項目中既有公共建筑改造工程類項目構(gòu)建后評價指標體系的研究方案。

1 研究方案的確定

根據(jù)后評價指標體系的構(gòu)建原則，首先從適用性、既有性原則出發(fā)，分析研究對象的特點和要求、明確研究思路，然后按照綜合性、集成性、整體性原則的要求，選擇研究方法，并確定研究方案。

1.1 研究思路

修購專項資金項目的目的是解決中央高校普遍面臨的資金緊張問題，其特點是資金額度有限、規(guī)定的資金完成周期短、大修工程施工條件復雜、預期社會效益大等。修購專項資金項目后評估的主要任務是高質(zhì)量完成專項支出績效報告。為此，修購專項資金項目后評估指標體系的構(gòu)建應針對專項資金項目申報書和專項支出績效報告的要求。

（1）專項資金項目申報書包括實施主要內(nèi)容、進度計劃、預期社會效益和經(jīng)濟效益、預算等內(nèi)容。

（2）專項支出績效報告包括年度預期總目標及階段性目標、項目基本性質(zhì)、用途、主要內(nèi)容及涉及范圍，項目資金使用和管理情況，項目組織實施情況，項目的經(jīng)濟性、效率性、有效性和可持續(xù)性，項目的后續(xù)工作計劃等內(nèi)容。

文章基于項目全壽命周期的 5個階段［2］（立項決策、設計、施工過程、竣工驗收、投入使用）來篩選后評價指標，形成后評價指標庫；針對專項支出績效報告的要求，將后評價指標按照實施過程、社會效益、環(huán)境影響、經(jīng)濟效益、可持續(xù)性進行分類，從而確定評價指標的各層次，并構(gòu)建多層次的后評價指標體系。

1.2 研究方法

Delphi法主要是由調(diào)查者擬定調(diào)查表，按照既定程序以函件的方式分別向?qū)＜医M成員進行征詢，專家組成員以匿名的方式（函件）背對背提交意見，經(jīng)過幾次反復征詢和反饋，專家組成員的意見逐步趨于集中，最后獲得具有很高準確率的集體判斷結(jié)果［3］。

利用 Delphi法可以充分發(fā)揮每一位專家的作用，避免權(quán)威人士的意見影響他人；但專家之間缺少思想的溝通交流，觀點可能存在一定的主觀片面性；容易忽視少數(shù)人的意見而導致預測的結(jié)果偏離實際；存在組織者主觀影響等。

為了改善上述問題，應對 Delphi法進行如下的改進：

（1）聘請的專家不僅應該具有專業(yè)性、代表性，還必須與組織者有長期良好的合作關(guān)系，從而保證研究過程中積極、主動、富有責任心，以保證資金和人力投入較小的情況下，高效地獲得準確的征詢結(jié)果；

（2）專家在完成每一輪調(diào)查問卷過程中，對評價指標的含義進行補充，對評價指標的設置建議和說明，以保證專家準確、充分地表達思想；

（3）回收問卷后，組織者對問卷信息進行信息匯總、統(tǒng)計、整理，并在下一輪調(diào)查問卷中，將這些信息完全提供給專家，以保證專家之間良好的思想溝通交流，避免組織者的主觀影響。

通過這樣的改進，既達到使決策結(jié)果準確、全面的目的，又形成了專家之間良好的思想溝通交流，保證評價指標體系的客觀性。

1.3 研究方案

根據(jù)上述改進Delphi法的思想，針對修購專項資金項目中既有公共建筑改造工程類項目，確定其后評價指標體系構(gòu)建的研究方案，如圖1所示。

圖1 修購專項資金項目后評價指標體系構(gòu)建的研究方案圖

2 評價指標體系的構(gòu)建

構(gòu)建評價指標體系的過程包括：前期資料的準備、專家組的組建、調(diào)查問卷的編制、征詢和信息匯總、評價指標體系的構(gòu)建。

2.1 前期資料的準備

修購專項資金項目后評價的前期資料主要包括兩部分。

（1）指導性資料 專項資金項目申報書和專項支出績效報告。

（2）輔助性資料 設計、招投標、工程管理、竣工驗收、審計結(jié)算、竣工后運行情況統(tǒng)計和使用單位滿意度調(diào)查等方面的資料。

2.2 專家組的組建

根據(jù)修購專項資金項目資金額度有限、全壽命周期短的特點，選擇專家時應側(cè)重其對同類工程后評價的針對性、專業(yè)性、責任心等，以保證調(diào)查問卷和征詢過程的科學性、客觀性、適用性以及100%的回收率。據(jù)此，在實際操作中，專家人數(shù)不宜太多，但應具有長期的修購專項資金項目工程管理經(jīng)驗或高校后勤運行管理經(jīng)驗，并與項目后評估的組織者保持良好的合作關(guān)系。

2.3 調(diào)查問卷的設計和編制

調(diào)查問卷的設計和編制是研究的關(guān)鍵，決定改進 Delphi法的應用效果。

文章將調(diào)查問卷設計成3個部分，即

（1）問卷說明 包括本項目構(gòu)建后評價指標體系的目的和意義、前期資料、填寫方法、提交期限等，供專家參考以全面了解項目的情況和答卷要求。

（2）問卷調(diào)查表 包括評價指標篩選部分和專家建議部分，供專家勾選評價指標的重要度、發(fā)表個人建議、進行補充說明。

（3）附件 是將專家對后評價指標的說明和建議進行信息匯總、統(tǒng)計、整理所形成的說明和反饋資料，供專家參考以便形成專家之間的良好溝通。

將調(diào)查問卷的編制程序設計成2個階段，即

（1）在專家組中選擇幾位專家代表，背對背分別對指導性資料的要求進行拆分和細化，對輔助性資料進行分析，匿名提出一定數(shù)量的待選后評價指標，并對所提出的指標給出詳細說明。

（2）組織者按照項目全壽命周期的5個階段，將專家代表提出的待選后評價指標進行簡單匯總形成評價指標篩選部分，將待選后評價指標的詳細說明進行整理形成附件。

2.4 征詢和信息處理

征詢和信息處理是研究的重點和難點，決定改進 Delphi法的執(zhí)行準確性。

將調(diào)查問卷以函件的方式分別發(fā)給專家組全部成員進行征詢，專家組成員背對背以匿名的方式逐一填表評價各指標的重要度并提出個人建議，按期返回問卷。對回收的調(diào)查問卷進行信息匯總、統(tǒng)計和整理。

（1）匯總 對每個指標在各評價等級的專家評價進行求和；

（2）統(tǒng)計 對每個指標計算評價得分的均值和方差，由式（1）、（2）表示為

式中：m為參加指標評分的專家數(shù)；aij為第 i專家對j指標的評分。其中，均值反應了多數(shù)專家的意見趨向，均值接近的等級是多數(shù)專家的意見趨向的等級；方差的大小反應了專家意見一致的程度，方差越大說明專家意見越分散，方差越小則說明專家意見越集中。

（3）整理 對于符合刪除條件的指標，在調(diào)查問卷的三個部分中刪除其相關(guān)信息。對于保留的指標，建立信息匯總表（在信息匯總表中，填入專家評價評價結(jié)果、均值和方差的計算結(jié)果，標注專家有建議的指標）、完善附件（將專家對評價指標的補充說明添加到附件、將專家關(guān)于增加評價指標的建議及理由添加到附件）。

（4）進行多輪征詢 將新的調(diào)查表和信息匯總表一并發(fā)給專家組全部成員，請各位專家參考其中信息并進行下一輪評價。重復進行上述過程，直到所有評價指標打分結(jié)果均達到要求的集中程度，最終確定全部評價指標并形成評價指標庫。

2.5 后評價指標體系的構(gòu)建

首先分析專項支出績效報告的要求。在專項支出績效報告中將項目的后評價分為5個方面，即

（1）項目概況 包括項目的基本情況、年度預期總目標及階段性目標；

（2）項目資金使用及管理情況 包括資金安排落實、總投入、資金實際使用、資金管理（管理制度、辦法的制訂及執(zhí)行情況）；

（3）項目組織實施情況 包括組織（招投標、調(diào)整、驗收等）、管理（管理制度建設、日常檢查監(jiān)督管理等）；

（4）項目績效情況 包括經(jīng)濟性、效率性、有效性和可持續(xù)性等方面；

（5）項目的后續(xù)工作計劃

將此作為指導思想，借鑒文獻［6］、［9］和［10］中關(guān)于高?；A建設項目的后評價指標體系構(gòu)建的思路，確定后評價體系的第一層次按照實施過程、社會效益、經(jīng)濟效益、環(huán)境影響、可持續(xù)性進行分類。

然后利用文獻［4］、［5］、［7］中關(guān)于既有公共建筑改造項目和高校基礎建設項目后評價指標體系歸類方法和思路，將評價指標庫中指標作為第三層次指標，分類歸納形成與第一層次相對應的第二層次指標。確定評價指標的各層次，構(gòu)建多層次后評價指標體系。

3 實例應用

以高校圖書館大修改造項目作為修購專項資金項目中既有公共建筑改造類項目的實例，應用上述理論和研究方案構(gòu)建后評價指標體系。

按照2.1準備項目的前期資料，編寫問卷說明。聘請15位專家組成專家組，其中 10位是來自其他高校的修購專項資金項目工程管理人員（均參與同類項目工程管理或擔任過同類項目工程負責人）、5位是學校后勤管理人員（均從事現(xiàn)崗位工作超過5年且參與該圖書館日常運行管理工作）。

選擇專家組中擔任過同類項目工程負責人的5位專家作為專家代表，每人匿名提出不少于 20項的后評價指標并對指標給出詳細說明，進行匯總得到共56個初步評價指標，形成調(diào)查問卷表的評價指標篩選部分（見表1）和附件（見表3），專家建議部分見表2。表1中以 A～E分級表示各指標的重要度，分別對應非常重要、很重要、重要、可考慮、不重要5個評價等級。

表1 圖書館大修及節(jié)能改造工程后評價項目調(diào)查問卷—調(diào)查問卷表（評價指標篩選部分）

表2 圖書館大修及節(jié)能改造工程后評價項目調(diào)查問卷—調(diào)查問卷表（專家建議部分）

表3 圖書館大修及節(jié)能改造項目后評價評價指標信息匯總表

將調(diào)查問卷以函件的方式分別發(fā)給 15位專家進行征詢。各位專家按照問卷說明，參考前期資料，背對背以匿名的方式對調(diào)查問卷的篩選部分各指標的重要度進行勾選，給出個人建議，按期返回問卷。以某一位專家為例，其勾選情況見表 1，個人建議見 表2。

圖2 高校圖書館大修節(jié)能改造工程后評價指標體系圖

對第一輪回收的調(diào)查問卷進行信息匯總、統(tǒng)計，即形成第一輪調(diào)查結(jié)果的信息匯總表，并對附件進行補充。

（1）信息匯總表 表4中，對應每個指標，在A ～E列填入相應的專家評分總和，在均值和方差填入計算結(jié)果，在專家建議列標注“*”提示在附件中該指標有專家建議。

（2）附件 將專家對原有評價指標的補充說明（見表1中實例）添加到附件中相應部分，并在信息匯總表中專家建議列標注“*”；將專家建議增加的評價指標的名稱和理由、詳細說明（見表 2中實例）分別添加到指標篩選部分和附件中相應位置。

再對信息匯總、統(tǒng)計結(jié)果進行分析、整理。

（1）對于均值＜3且方差＜1的指標，說明大部分專家認為不重要，在表1～4中刪除相關(guān)內(nèi)容，例如“決策過程和程序”；

（2）對于均值＞3且方差＜1的指標，說明大部分專家認為重要，保留在表 1～4中，在后續(xù)征詢過程中，專家無需勾選只進行補充說明，例如“資金來源”；

（3）對于方差 ＞1的指標，說明專家評價意見比較分散，需要進行下一輪調(diào)查，例如“立項依據(jù)”。

形成新的調(diào)查問卷篩選部分、附件和信息匯總表（見表3）。

將新的調(diào)查問卷和信息匯總表一并發(fā)給 15位專家，請各位專家參考信息匯總情況，進行第二輪打分。重復進行上述過程到第三輪后，評價指標的征詢結(jié)果均達到要求的集中程度，評價指標數(shù)量最終確定為40個，形成評價指標庫。

根據(jù)專項支出績效報告要求構(gòu)建多層次的后評價指標體系，見圖 2。將后評價指標體系分為 3個層次，第一層次有5個：實施過程、社會效益、經(jīng)濟效益、環(huán)境影響、可持續(xù)性等 5個方面指標，第二層次有20個，第三層次評價指標為40個。

文章構(gòu)建的后評價指標體系的具有以下幾方面的作用和特點：

（1）評價指標來源于項目的全壽命周期，涵蓋實施過程、社會效益、經(jīng)濟效益、環(huán)境影響、可持續(xù)性5個方面，因此，滿足綜合性、集成性、整體性的原則；

（2）很多評價指標提煉于修購專項資金項目項支出績效報告要求，因此，具有針對性強，滿足適用性、既有性的原則；

（3）對評價指標設置了補充說明，為后續(xù)采用定量與定性結(jié)合的方法進行項目的后評價奠定基礎；

（4）補充說明保留了征詢過程中專家組的全部思想，為后續(xù)采用主觀、客觀相結(jié)合的方法進行每個指標的量化評價奠定基礎。

（5）各評價指標的均值在后續(xù)項目后評價過程中將作為確定各評價指標權(quán)重的主要參考信息。

基于此后評價指標體系，對第三層次指標進行了數(shù)據(jù)采集、處理和量化賦值，采用成功度模糊綜合評價法對本項目進行了后評價，所得到本項目的模糊綜合評價結(jié)果由式（3）表示為

B＝X×R＝（0.79，0.15，0.06，0.00） （3）

根據(jù)最大隸屬度原則確定了本項目成功度隸屬等級為 A，并對評價結(jié)果進行了有效性驗證，驗證結(jié)果表明本項目綜合成功度隸屬等級的有效性為A。

4 結(jié)語

文章采用改進的Dephi法，分析了修購專項資金項目的特點，針對專項資金項目申報書和專項支出績效報告的要求，借鑒前人所提供的研究方法和評價指標體系，主要做到了確定適合修購專項資金項目的后評價指標體系構(gòu)建的研究方案；組織前期資料、組建專家組、設計調(diào)查問卷和征詢過程；進行三輪調(diào)查問卷的發(fā)出、回收，以及問卷信息的匯總、統(tǒng)計、整理，最終形成由40個后評價指標構(gòu)成的后評價指標庫。構(gòu)建了 5個第一層次指標（實施過程、社會效益、經(jīng)濟效益、環(huán)境影響、可持續(xù)性）和20個第二層次指標（設計、成本、工程質(zhì)量等）的后評價指標體系。利用這一體系對某高校圖書館大修及節(jié)能改造工程進行了后評價，效果顯著。

［1］ 財政部教科文司，教育部財務司.關(guān)于開展中央高校修購專項資金2012—2015年項目申報工作的通知［Z］.財教便函〔2011〕253號，2011.

［2］ 王華.建設項目評估［M］.北京：北京大學出版社，2008.

［3］ 陳志偉.項目后評價指標體系的構(gòu)建原則與指標選取研究［J］.中國化工貿(mào)易，2015，7（31）：65－66.

［4］ 王清勤，何維達.既有公共建筑節(jié)能改造評價指標體系構(gòu)建的探討［J］.建筑節(jié)能，2011，39（4）：73－76.

［5］ 朱學明，李飛鵬.天津西站景觀工程項目后評價指標體系研究［J］.天津城市建設學院學報，2012，18（2）：140－143.

［6］ 蔣宏，劉宇濤，胡昊.高校新校區(qū)建設項目影響后評價指標體系的構(gòu)建與應用［J］.建筑經(jīng)濟，2010（1）：41－44.

［7］ 尤荻，梁雙陸.公共圖書館建設項目社會效益后評價體系研究［J］.圖書館，2015（10）：102－105.

［8］ 張華棟，左中杰，李芳，等.老舊房屋改造的社會經(jīng)濟效益評價體系［J］.建筑結(jié)構(gòu)，2012（42）：472－475.

［9］ 郭振勝.基于 AHP的高?；椖抗芾砗笤u價研究［J］.黑龍江大學工程學報，2015，6（2）：30－33，41.

［10］劉丹平，王建青，楊志明.高?；窘ㄔO項目后評估層次分析模型［J］.中國管理科學，2005，13（Z1）：98－102.

［11］何應時.項目后評價指標體系與量化評價體系研究［J］.中國工程咨詢，2013（1）：44－49.

［12］吳昌龍.電網(wǎng)建設項目后評價指標體系研究［J］.城市建設理論研究（電子版），2015，5（29）：2175－2176.

［13］王慶，庫亞榮，蔣燕，等.建設工程項目后評價研究［J］.科技和產(chǎn)業(yè)，2010，10（8）：65－66，116.

［14］王天怡，張秀媛.既有居住區(qū)交通改造評價指標體系研究［J］.交通信息與安全，2010，28（5）：31－33.

［15］韓中庚.數(shù)學建模方法及其應用（第2版）［M］.北京：高等教育出版社，2009.

Post-evaluation index system construction of special funds projects for the maintenance and procurement

Chen Li1，Sheng Fushen2
（1.Construction and Planning Office，Beijing Jiaotong University，Beijing 100044，China；2.Logistics College，Naval University of Engineering，Tianjin 300450，China）

Based on the requirements of post-evaluation of construction projects and the principles of construction of the post-evaluation index system，targeting at the characteristics of the special funds projects for the maintenance and procurement and the requirements of special expenditure performance report，carrying out analysis on the whole life cycle of existing public buildings renovation project，referring to domestic and foreign research achievement，improvements were made on Delphi method，and the research program for the post-evaluation index system of special funds projects for the maintenance and procurement was explored.This paper took the university library overhaul and energy-saving renovation project as an example，applied the research program to the construction of the post-evaluation index system of the project，including the formation of the expert group，the design and preparation of the survey questionnaire，the processing of consulting information，the formation of the post-evaluation index database，and the construction of the post-evaluation index system，finally the post-evaluation index database with 40 third level indexes was formulated and the multi-level postevaluation index system with 5 first level indexes and 20 second level indexes was constructed.The results show that the index system is in accordance with the characteristics of the special funds projectsfor the maintenance and procurement，covering all the contents of the requirements of special expenditure performance report，and conducive to the qualitative and quantitative analysis of the postevaluation of the project.

special funds projects for the maintenance and procurement；post-evaluation index system；Delphi method

TU242.3

A

1673－7644（2016）05－0483－08

2016－07－03

陳力（1969－），女（滿），講師，碩士，主要從事高等院校工程管理等方面的研究.E-mail：chenli＠bjtu.edu.cn