基于WBS客觀評(píng)價(jià)方法的科技項(xiàng)目評(píng)價(jià)體系探索

王欣 胡璐璐 董斌 劉臻 來則鳴 徐欣慧 劉小溪

摘 要：探索了一種基于WBS客觀評(píng)價(jià)方法的科技項(xiàng)目評(píng)價(jià)體系。介紹了現(xiàn)有項(xiàng)目評(píng)價(jià)方法的局限性，詳細(xì)闡釋了基于WBS的項(xiàng)目評(píng)價(jià)體系的主要內(nèi)容、評(píng)價(jià)要素等，并總結(jié)了該評(píng)價(jià)方法的作用以及評(píng)價(jià)過程中存在的問題。

關(guān)鍵詞：WBS;科技項(xiàng)目;成熟度;創(chuàng)新度;先進(jìn)度

中圖分類號(hào)：G301 ? ? 文獻(xiàn)標(biāo)志碼：A ? ? 文章編號(hào)：1003-5168（2022）7-0131-04

DOI：10.19968/j.cnki.hnkj.1003-5168.2022.07.030

Abstract：This paper explores a science and technology project evaluation system which based on WBS objective evaluation method. The author introduces the limitations of the existing project evaluation methods， explains the main elements and the evaluation elements of the WBS-based project evaluation system. Then the author summarises the role of the evaluation method and the problems that exist in the evaluation process.

Keywords： WBS; science and technology project; maturity; innovation; advanced

0 引言

科技項(xiàng)目評(píng)價(jià)是指對(duì)科技項(xiàng)目開展的評(píng)估評(píng)價(jià)工作，是科技管理的重要手段?！吨泄仓醒朕k公廳、國(guó)務(wù)院辦公廳印發(fā)<關(guān)于深化項(xiàng)目評(píng)審、人才評(píng)價(jià)、機(jī)構(gòu)評(píng)估改革的意見>的通知》（中辦發(fā)〔2018〕37號(hào)）指出，“以改革科研項(xiàng)目評(píng)審、人才評(píng)價(jià)、機(jī)構(gòu)評(píng)估為關(guān)鍵，統(tǒng)籌自然科學(xué)和哲學(xué)社會(huì)科學(xué)等不同學(xué)科門類，推進(jìn)分類評(píng)價(jià)制度建設(shè)。”面對(duì)國(guó)家政策導(dǎo)向，筆者認(rèn)為應(yīng)探索符合吉林省省情，同時(shí)具備科學(xué)性、客觀性、可操作性特點(diǎn)的科技項(xiàng)目評(píng)價(jià)體系。

1 國(guó)內(nèi)外現(xiàn)狀

一直以來國(guó)內(nèi)外關(guān)于科技評(píng)估方面的報(bào)道較多，但針對(duì)科技項(xiàng)目評(píng)價(jià)論述較少。早期科技項(xiàng)目評(píng)價(jià)方法[1-2]有數(shù)據(jù)包絡(luò)分析法、模糊評(píng)價(jià)法、層次灰色評(píng)價(jià)法等，此外還有定量的文獻(xiàn)計(jì)量分析法、經(jīng)濟(jì)回報(bào)率分析法[3]等輔助評(píng)價(jià)方法;而當(dāng)前科技項(xiàng)目評(píng)價(jià)方法有同行評(píng)議方法、案例分析方法、回顧性分析方法與指標(biāo)分析法[3]等，其中以同行評(píng)議方法較常用。

2 傳統(tǒng)評(píng)價(jià)方法的局限性

通過對(duì)傳統(tǒng)項(xiàng)目評(píng)價(jià)方法進(jìn)行分析，筆者發(fā)現(xiàn)傳統(tǒng)方法存在一定的局限性。首先，評(píng)審專家主觀因素易干擾評(píng)價(jià)結(jié)果。傳統(tǒng)項(xiàng)目評(píng)價(jià)方法中專家評(píng)審意見往往占據(jù)主導(dǎo)地位，而專家雖然專業(yè)儲(chǔ)備較強(qiáng)，但其對(duì)項(xiàng)目認(rèn)知有限，僅根據(jù)項(xiàng)目材料、項(xiàng)目產(chǎn)出等做出判斷，評(píng)價(jià)過程中可能會(huì)受到對(duì)項(xiàng)目的了解誤區(qū)、主觀印象等因素影響，干擾評(píng)價(jià)結(jié)果客觀性。其次，評(píng)審專家缺少客觀評(píng)價(jià)依據(jù)和標(biāo)準(zhǔn)。評(píng)審專家在評(píng)審中會(huì)根據(jù)項(xiàng)目組提供的研究報(bào)告、產(chǎn)出成果、自述材料等做出判斷，并沒有第三方佐證材料或其他種類評(píng)價(jià)標(biāo)準(zhǔn)支撐，由于缺乏對(duì)照標(biāo)準(zhǔn)和依據(jù)，評(píng)價(jià)結(jié)果易出現(xiàn)偏差。最后，科研管理部門對(duì)專家意見依賴性較強(qiáng)?？蒲泄芾聿块T對(duì)項(xiàng)目進(jìn)行評(píng)審時(shí)，會(huì)召開專家論證會(huì)，并采納專家組的意見為最終評(píng)審結(jié)果。而科研管理部門會(huì)過多依賴于評(píng)審專家意見，當(dāng)某一項(xiàng)目領(lǐng)域的評(píng)審專家出現(xiàn)知識(shí)空缺時(shí)，項(xiàng)目的評(píng)價(jià)結(jié)果極有可能失真。

3 評(píng)價(jià)體系的提出及構(gòu)建

針對(duì)傳統(tǒng)科技項(xiàng)目評(píng)價(jià)模式的局限性，筆者提出構(gòu)建基于WBS客觀評(píng)價(jià)方法的科技項(xiàng)目評(píng)價(jià)體系。

3.1 評(píng)價(jià)體系的提出

2014年青島市提出加入創(chuàng)新度和先進(jìn)度概念的科技成果標(biāo)準(zhǔn)化評(píng)價(jià)體系[4]，主張將工作分解結(jié)構(gòu)（WBS）思路引入科技成果評(píng)價(jià)中，通過評(píng)價(jià)成果的成熟度、創(chuàng)新度和先進(jìn)度來提高成果評(píng)價(jià)的客觀性。2017年廣東省將技術(shù)成熟度評(píng)價(jià)方法[5]應(yīng)用于省級(jí)重大科技專項(xiàng)中期評(píng)估實(shí)踐，主張定性與定量相結(jié)合的科技項(xiàng)目評(píng)價(jià)模式。受到上述評(píng)價(jià)方法的啟發(fā)，筆者探索性地提出了基于WBS客觀評(píng)價(jià)方法的科技項(xiàng)目評(píng)價(jià)體系。

3.2 評(píng)價(jià)體系的構(gòu)建

本體系以標(biāo)準(zhǔn)化評(píng)價(jià)思路為導(dǎo)向，以客觀公正為準(zhǔn)則，根據(jù)不同類別科技項(xiàng)目特征，通過建立工作分解結(jié)構(gòu)，對(duì)每個(gè)工作分解單元的相關(guān)指標(biāo)按等級(jí)評(píng)定，從而得出客觀評(píng)價(jià)結(jié)果。

3.2.1 評(píng)價(jià)要素。體系中主要包含項(xiàng)目工作分解結(jié)構(gòu)（WBS）和評(píng)價(jià)三要素（成熟度、技術(shù)創(chuàng)新度、技術(shù)先進(jìn)度）。

①項(xiàng)目WBS。在項(xiàng)目評(píng)價(jià)過程中，首先要對(duì)科技項(xiàng)目建立工作分解結(jié)構(gòu)[6]（WBS）。工作分解結(jié)構(gòu)（WBS）是一種面向可交付成果的項(xiàng)目元素分組。這個(gè)分組組織并定義了全部的項(xiàng)目工作范圍，每下降一級(jí)都表示一個(gè)更加詳細(xì)的項(xiàng)目工作分組。在對(duì)項(xiàng)目?jī)?nèi)容進(jìn)行梳理后，首先要對(duì)項(xiàng)目劃分WBS，找到最底層能夠獨(dú)立表達(dá)、獨(dú)立測(cè)量、獨(dú)立評(píng)價(jià)的基本工作單元，如圖1所示為項(xiàng)目的WBS圖。從圖中以看出，項(xiàng)目的整體脈絡(luò)十分清晰，項(xiàng)目的WBS圖不但可以幫助評(píng)估師更好地了解項(xiàng)目的工作內(nèi)容，還可以使評(píng)估師準(zhǔn)確找到項(xiàng)目的核心工作單元以進(jìn)行細(xì)分評(píng)價(jià)。

項(xiàng)目核心工作單元是指項(xiàng)目中所進(jìn)行的探索性研究/自主研發(fā)部分的主要工作單元，而非直接使用現(xiàn)有技術(shù)或借鑒他人研究成果的工作單元。其應(yīng)體現(xiàn)在項(xiàng)目的最底層工作單元中，核心工作單元原則上會(huì)涵蓋項(xiàng)目的創(chuàng)新點(diǎn)或核心工作，同時(shí)項(xiàng)目的核心工作單元也是其他評(píng)價(jià)要素的評(píng)價(jià)基礎(chǔ)。

②成熟度。成熟度概念最早由美國(guó)NASA提出，也被稱為技術(shù)就緒度（TRL）。其是在以技術(shù)服務(wù)于生產(chǎn)作為技術(shù)成熟標(biāo)志的前提下，科技成果在被評(píng)價(jià)時(shí)所處的發(fā)展階段，它是一個(gè)科技成果研發(fā)情況最重要的表現(xiàn)形式。該要素通過評(píng)價(jià)項(xiàng)目核心工作單元的完成情況來評(píng)價(jià)項(xiàng)目的整體完成情況。

在科技項(xiàng)目評(píng)價(jià)中，項(xiàng)目按照不同類別主要分為技術(shù)類項(xiàng)目和基礎(chǔ)研究類項(xiàng)目?jī)纱箢?。技術(shù)類項(xiàng)目可產(chǎn)生實(shí)質(zhì)性技術(shù)或科研成果，對(duì)其進(jìn)行成熟度等級(jí)評(píng)價(jià)時(shí)可參照青島科技成果標(biāo)準(zhǔn)化評(píng)價(jià)[5]中的13級(jí)技術(shù)成熟度等級(jí)標(biāo)準(zhǔn)進(jìn)行評(píng)價(jià)，其具體表述如表1所示。

基礎(chǔ)研究類項(xiàng)目以發(fā)現(xiàn)并闡釋事物客觀規(guī)律或探索建立出完整理論方法為目標(biāo)導(dǎo)向，其往往無法產(chǎn)生實(shí)質(zhì)性且應(yīng)用性較強(qiáng)的科研成果。如果按照技術(shù)類成熟度13級(jí)進(jìn)行劃分評(píng)價(jià)，就會(huì)出現(xiàn)基礎(chǔ)研究類項(xiàng)目成熟度等級(jí)均較低的情況，且對(duì)應(yīng)的等級(jí)描述并不符合基礎(chǔ)研究類項(xiàng)目特點(diǎn)，進(jìn)而導(dǎo)致成熟度評(píng)價(jià)結(jié)果不客觀。針對(duì)此種情況，筆者提出針對(duì)基礎(chǔ)研究類項(xiàng)目的成熟度等級(jí)參照表，將基礎(chǔ)研究類項(xiàng)目成熟度分成5級(jí)，如表2所示。表中將基礎(chǔ)研究類項(xiàng)目的全周期過程進(jìn)行科學(xué)劃分及細(xì)化描述，基本符合此類型項(xiàng)目特點(diǎn)和研發(fā)過程。

③技術(shù)創(chuàng)新度。技術(shù)創(chuàng)新度是指一項(xiàng)技術(shù)或理論創(chuàng)新的程度，該要素主要用來評(píng)價(jià)科技項(xiàng)目的核心技術(shù)是否具備新穎性以及其新穎性程度如何，此評(píng)價(jià)過程與科技項(xiàng)目查新具有一定的共性。但在科技項(xiàng)目查新過程中，查新報(bào)告的結(jié)論多為單一性判斷結(jié)論，而非層次清楚且具有一定縱深度的對(duì)比性結(jié)論[6]。因此，筆者借鑒科技成果標(biāo)準(zhǔn)化評(píng)價(jià)[5]中的4級(jí)技術(shù)創(chuàng)新度標(biāo)準(zhǔn)，將科技項(xiàng)目評(píng)價(jià)中創(chuàng)新度等級(jí)設(shè)定為7級(jí)，如表3所示。通過創(chuàng)新度評(píng)價(jià)，評(píng)審專家可對(duì)項(xiàng)目的創(chuàng)新性水平有縱深性的直觀了解。

④技術(shù)先進(jìn)度。技術(shù)先進(jìn)度是指一項(xiàng)技術(shù)應(yīng)用后產(chǎn)生的作用或效果所處的水平，該要素主要用于評(píng)價(jià)項(xiàng)目的技術(shù)先進(jìn)性，通常用技術(shù)或產(chǎn)品的核心指標(biāo)與對(duì)照物指標(biāo)進(jìn)行對(duì)比來判定技術(shù)先進(jìn)度等級(jí)。本文借鑒科技成果標(biāo)準(zhǔn)化評(píng)價(jià)方法[5]中的7級(jí)技術(shù)先進(jìn)度標(biāo)準(zhǔn)對(duì)科技項(xiàng)目進(jìn)行評(píng)價(jià)，如表4所示。技術(shù)先進(jìn)度評(píng)價(jià)，可使項(xiàng)目的先進(jìn)性水平清晰量化，為專家提供評(píng)價(jià)依據(jù)，并且有助于專家發(fā)現(xiàn)項(xiàng)目核心技術(shù)的硬實(shí)力。

3.2.2 評(píng)價(jià)流程?？萍柬?xiàng)目評(píng)價(jià)體系的評(píng)價(jià)流程為：①評(píng)估機(jī)構(gòu)受理待評(píng)估項(xiàng)目，由評(píng)估師確定項(xiàng)目類別、評(píng)估目標(biāo)、評(píng)估對(duì)象等;②評(píng)估師與項(xiàng)目組針對(duì)項(xiàng)目?jī)?nèi)容進(jìn)行溝通，確認(rèn)項(xiàng)目核心工作、創(chuàng)新點(diǎn)等;③評(píng)估師根據(jù)被評(píng)項(xiàng)目?jī)?nèi)容梳理出項(xiàng)目WBS圖、WBS表及項(xiàng)目核心工作單元，再進(jìn)行文獻(xiàn)檢索分析等;④評(píng)估師按照評(píng)價(jià)三要素等級(jí)進(jìn)行項(xiàng)目評(píng)價(jià);⑤評(píng)估師、項(xiàng)目組及領(lǐng)域?qū)＜裔槍?duì)評(píng)價(jià)結(jié)果進(jìn)行確認(rèn)或反復(fù)修改，直至三方意見達(dá)成統(tǒng)一;⑥評(píng)估師撰寫科技項(xiàng)目評(píng)價(jià)報(bào)告，并由評(píng)估機(jī)構(gòu)將評(píng)價(jià)報(bào)告提交科技評(píng)審部門。評(píng)價(jià)流程如圖2所示。

4 評(píng)價(jià)體系的作用和不足

為驗(yàn)證該體系的可行性，筆者對(duì)部分科技項(xiàng)目進(jìn)行了試評(píng)價(jià)研究，通過實(shí)踐總結(jié)出該體系的作用和不足之處。

4.1 體系的作用

筆者認(rèn)為，該評(píng)價(jià)體系在彌補(bǔ)現(xiàn)有項(xiàng)目評(píng)價(jià)方法不足的基礎(chǔ)上，能夠幫助項(xiàng)目組對(duì)項(xiàng)目?jī)?nèi)容、指標(biāo)等進(jìn)行修正或調(diào)整。主要體現(xiàn)在3個(gè)方面。

4.1.1 輔助評(píng)審專家做出客觀評(píng)價(jià)。多角度分級(jí)量化評(píng)價(jià)，可為評(píng)審專家提供客觀評(píng)價(jià)依據(jù)，將項(xiàng)目整體情況進(jìn)行等級(jí)可視化后，會(huì)盡可能減少專家主觀因素對(duì)項(xiàng)目評(píng)價(jià)結(jié)果的影響，從而輔助專家對(duì)項(xiàng)目做出客觀公正的評(píng)價(jià)結(jié)論。

4.1.2 為科研管理部門提供評(píng)價(jià)途徑。該體系可為科研管理部門增加科技項(xiàng)目評(píng)價(jià)途徑。第三方評(píng)估機(jī)構(gòu)的介入，可以有效減少科研管理部門對(duì)評(píng)審專家意見以及同行評(píng)議形式的依賴，進(jìn)而提高項(xiàng)目評(píng)審質(zhì)量和管理部門的公信力。

4.1.3 幫助項(xiàng)目組驗(yàn)證/修正技術(shù)路線及核心技術(shù)指標(biāo)的合理性。項(xiàng)目申報(bào)書中的技術(shù)路線是評(píng)審專家了解項(xiàng)目預(yù)期實(shí)施過程的重要依據(jù)。申報(bào)人對(duì)技術(shù)路線圖的繪制不清晰，易導(dǎo)致無法突出項(xiàng)目研究重點(diǎn)，甚至出現(xiàn)研究?jī)?nèi)容與項(xiàng)目標(biāo)題不符的情況。對(duì)項(xiàng)目進(jìn)行WBS分解，可幫助項(xiàng)目組對(duì)申報(bào)書中技術(shù)路線圖進(jìn)行合理性驗(yàn)證。

4.2 體系的不足

目前該評(píng)價(jià)體系正處于探索階段，因此有較多不足之處。主要表現(xiàn)為3個(gè)方面。

4.2.1 評(píng)價(jià)等級(jí)設(shè)置合理性待探討。體系在要素等級(jí)設(shè)置和級(jí)別定義過程中，除借鑒科技成果標(biāo)準(zhǔn)化評(píng)價(jià)方法外，還自定義了部分要素等級(jí)及等級(jí)描述，但由于實(shí)操樣本量較少，要素等級(jí)和描述的設(shè)定是否合理無法進(jìn)一步考證，后續(xù)還需大量研究工作進(jìn)行支撐。

4.2.2 項(xiàng)目類別未能全面涵蓋。筆者認(rèn)為，該體系目前僅適合基礎(chǔ)研究類、成果轉(zhuǎn)化類或技術(shù)應(yīng)用/攻關(guān)類等類別的項(xiàng)目，而不適合對(duì)平臺(tái)/基地建設(shè)類、服務(wù)類或人才類項(xiàng)目進(jìn)行評(píng)價(jià)。

4.2.3 評(píng)價(jià)適應(yīng)性受限。在實(shí)操過程中，筆者發(fā)現(xiàn)部分評(píng)價(jià)要素的適應(yīng)性受限，即不同類別或處于不同階段的項(xiàng)目其側(cè)重的評(píng)價(jià)要素可能會(huì)出現(xiàn)不同。如基礎(chǔ)研究類項(xiàng)目和某些應(yīng)用類項(xiàng)目無法評(píng)價(jià)技術(shù)先進(jìn)度。

5 結(jié)語

在探索過程中，筆者借鑒了多種科技項(xiàng)目及成果評(píng)價(jià)方法，設(shè)計(jì)出基于WBS的科技項(xiàng)目評(píng)價(jià)體系，通過實(shí)踐發(fā)現(xiàn)該體系目前仍不夠完善，其具備較大的提升空間，隨著后續(xù)不斷被改進(jìn)及應(yīng)用，該評(píng)價(jià)體系會(huì)更具備合理性和實(shí)用性。

參考文獻(xiàn)：

[1] 國(guó)家科技評(píng)估中心，中國(guó)科技評(píng)估與成果管理研究會(huì).科技評(píng)估方法與實(shí)務(wù)[M].北京：北京理工大學(xué)出版社，2019.

[2] 劉志強(qiáng)，王慧晴，溫穎.科技評(píng)估方法綜述及簡(jiǎn)評(píng)[J].科技與創(chuàng)新，2021（10）：19-22.

[3] 曹詩嘉，孫占輝，程明，等.美日科技評(píng)估體系比較[J].世界科技研究與發(fā)展，2021（2）：204-215.

[4] 青島市科學(xué)技術(shù)局.科技成果標(biāo)準(zhǔn)化評(píng)價(jià)理論與實(shí)務(wù)[M].北京：知識(shí)產(chǎn)權(quán)出版社，2018.

[5] 李俠廣，雷柏茂，吳國(guó)棟.廣東省應(yīng)用型科技研發(fā)項(xiàng)目技術(shù)就緒度評(píng)價(jià)案例研究[J].科技管理研究，2021（1）：43-47.

[6] 劉小溪，董斌，王欣，等.基于WBS分解的科技查新新穎性量化評(píng)價(jià)體系研究[J].科技與創(chuàng)新，2019（21）：121-123.