裝備研制項(xiàng)目績效評估指標(biāo)選擇與分析方法

摘要：對裝備研制項(xiàng)目開展績效評估是查找研制過程和研制結(jié)果中的問題與不足并改進(jìn)項(xiàng)目管理的重要前提。為充分發(fā)揮績效評估在項(xiàng)目管理方面的作用，采用檢討式評估思路，從研制任務(wù)完成情況、研制成效情況和研制過程管理情況三個方面研究選擇評估指標(biāo)，提供基于評估指標(biāo)結(jié)果分析潛在問題的思路及改進(jìn)項(xiàng)目管理的措施建議，對提高績效評估應(yīng)用效益具有重要意義。

關(guān)鍵詞：裝備研制項(xiàng)目；績效；評估指標(biāo)；指標(biāo)選擇；檢討式評估

0 引言

在裝備建設(shè)中，裝備研制項(xiàng)目包括研制新型裝備、對現(xiàn)役裝備改進(jìn)改型等不同形式，可直接影響未來的裝備體系的構(gòu)成和作戰(zhàn)能力。隨著裝備組成變得越來越復(fù)雜，“拖進(jìn)度、降指標(biāo)、漲費(fèi)用”成為裝備研制項(xiàng)目常見的問題。因此，開展裝備研制項(xiàng)目績效評估與分析，有助于檢驗(yàn)裝備研制效果，查找研制過程中的問題與不足，為后續(xù)批量購置、作戰(zhàn)運(yùn)用裝備及改進(jìn)裝備研制管理等提供依據(jù)。

目前關(guān)于裝備研制項(xiàng)目績效評估已有較多研究。例如，何榕等^[1]研究了基于熵權(quán)TOPSIS的裝備建設(shè)項(xiàng)目評估指標(biāo)與評估方法；苗欣宇等^[2]研究了裝備科研項(xiàng)目采購績效的評估指標(biāo)和系統(tǒng)動力學(xué)模型；劉少紅等^[3]從質(zhì)量、進(jìn)度、成本等方面研究建立了裝備研制項(xiàng)目評估指標(biāo)；沈延安等^[4]研究了裝備管理績效與評估指標(biāo)；王晶等^[5]研究了裝備采購計劃執(zhí)行情況的評估指標(biāo)與評估方法；張憲等^[6]研究了裝備規(guī)劃績效的評估指標(biāo)遴選方法。以上研究大多是關(guān)于規(guī)劃計劃或單個裝備項(xiàng)目的績效評估指標(biāo)選擇與評估方法的研究，且突出取得的正面成效，而缺乏對研制過程中潛在問題的分析，不利于后續(xù)改進(jìn)工作的開展。本文采用檢討式評估思路，研究建立裝備研制項(xiàng)目績效評估指標(biāo)，并利用評估指標(biāo)結(jié)果對相關(guān)問題進(jìn)行分析，旨在更好地發(fā)揮裝備研制項(xiàng)目績效評估作用，解決項(xiàng)目管理中的問題與不足。

1 裝備研制項(xiàng)目績效

1.1 績效的概念內(nèi)涵

績效作為管理學(xué)概念，包括成績和成效兩個方面的內(nèi)涵?？冃?nèi)涵會隨評估對象、評估目的不同而改變。對裝備研制項(xiàng)目而言，績效是指研制交付的新型裝備及其取得的軍事、經(jīng)濟(jì)、社會等方面效益。

從項(xiàng)目管理角度分析，績效可作為裝備研制工作的“指揮棒”，指導(dǎo)和牽引各種研制活動。按照評估時機(jī)，績效評估可以分為事前預(yù)測、事中監(jiān)測和事后總結(jié)三大類。其中，事前預(yù)測在裝備研制前開展，主要用于支撐裝備研制論證；事中監(jiān)測在裝備研制過程中的重要里程碑節(jié)點(diǎn)開展，主要用于支撐裝備研制的轉(zhuǎn)階段決策和研制計劃調(diào)整；事后總結(jié)在裝備研制活動結(jié)束并交付新型裝備后開展，主要用于總結(jié)研制效果，支撐后續(xù)購置計劃與作戰(zhàn)運(yùn)用決策。本文主要研究事后總結(jié)形式的績效評估指標(biāo)選擇與分析方法。

1.2 績效評估的主要內(nèi)容

根據(jù)裝備研制項(xiàng)目績效的內(nèi)涵，主要評估內(nèi)容包括裝備研制的過程、方式方法、交付的新型裝備、取得的效益等方面。同時，這些評估內(nèi)容中也包括潛在問題的表現(xiàn)。

績效評估內(nèi)容是評估指標(biāo)選擇的依據(jù)，評估指標(biāo)可視為對評估內(nèi)容的細(xì)化描述。在實(shí)際評估中，由于裝備研制項(xiàng)目的具體情況不同，評估內(nèi)容的重點(diǎn)也可能不同。

1.3 檢討式評估方法

任何評估都具有特定的目的。在裝備研制項(xiàng)目結(jié)束后開展績效評估，已經(jīng)難以直接影響研制結(jié)果，單純的正面評價雖然可以分析研制的成效，但是對裝備建設(shè)發(fā)展的實(shí)際意義有限。所以，本文提出檢討式評估方法，即從發(fā)現(xiàn)與解決問題的角度開展評估分析，總結(jié)研制過程中的經(jīng)驗(yàn)與教訓(xùn)，以便支撐后續(xù)批量購置與作戰(zhàn)運(yùn)用，改進(jìn)其他裝備研制管理。檢討式評估結(jié)果不僅包括取得的各方面成績和成效，還包括存在的問題清單。

檢討式評估與其他評估方法的最大區(qū)別在于，其圍繞常見的“拖、降、漲”問題對評估結(jié)果開展追溯分析，即根據(jù)評估結(jié)果分析可能存在的問題并挖掘問題原因。因檢討式評估聚焦于問題，所以在評估指標(biāo)選擇時更加突出與問題相關(guān)的指標(biāo)。

2 裝備研制項(xiàng)目績效評估指標(biāo)選擇

2.1 主要原則

根據(jù)檢討式評估的目的，裝備研制項(xiàng)目績效評估指標(biāo)的選擇原則除了應(yīng)遵循常用的全面性、系統(tǒng)性、獨(dú)立性和可操作性等原則，還應(yīng)遵循以下原則：

（1）定性與定量結(jié)合。根據(jù)是否便于采用數(shù)值形式描述，既應(yīng)包括定性描述的指標(biāo)，也應(yīng)包括量化數(shù)值描述的指標(biāo)。

（2）成績與問題結(jié)合。根據(jù)評估內(nèi)容的重點(diǎn)，既應(yīng)包括體現(xiàn)研制成績和成效的指標(biāo)，也應(yīng)包括反映潛在問題的指標(biāo)。

（3）過程與結(jié)果結(jié)合。根據(jù)指標(biāo)描述的研制階段與所需信息，既應(yīng)包括描述研制過程情況的指標(biāo)，也應(yīng)包括描述研制結(jié)果情況的指標(biāo)。

（4）表征與內(nèi)因結(jié)合。根據(jù)內(nèi)容描述的層次，既應(yīng)包括描述績效表征的指標(biāo)，也應(yīng)包括影響績效內(nèi)在因素的指標(biāo)。

（5）絕對與相對結(jié)合。根據(jù)評估時判定準(zhǔn)則的特點(diǎn)，既應(yīng)包括具有固定判定準(zhǔn)則的指標(biāo)，也應(yīng)包括不存在固定判定準(zhǔn)則的指標(biāo)。

2.2 評估指標(biāo)體系建立

針對績效評估目的，采用樹狀層次結(jié)構(gòu)從三個方面選擇評估指標(biāo)，具體如下。

2.2.1 研制任務(wù)完成情況的評估指標(biāo)

其指依據(jù)研制合同，完成規(guī)定的研制任務(wù)要求的情況，從研制任務(wù)完成程度、經(jīng)費(fèi)開支情況和時間進(jìn)度達(dá)標(biāo)程度三個方面細(xì)化選擇評估指標(biāo)。裝備研制任務(wù)完成情況的評估指標(biāo)見表1。

2.2.2 研制成效情況的評估指標(biāo)

其指研制過程和交付的新型裝備在提升部隊(duì)?wèi)?zhàn)斗力、牽引帶動相關(guān)領(lǐng)域進(jìn)步等方面取得的軍事、經(jīng)濟(jì)和社會效益，從先進(jìn)性、作戰(zhàn)能力、輻射帶動作用三個方面細(xì)化選擇評估指標(biāo)。裝備研制成效情況的評估指標(biāo)見表2。

2.2.3 研制過程管理情況的評估指標(biāo)

其指裝備研制過程中的日常管理滿足相關(guān)規(guī)定要求的情況，從研制程序規(guī)范性、重要要求落實(shí)程度兩個方面細(xì)化選擇評估指標(biāo)。裝備研制過程管理情況的評估指標(biāo)見表3。

3 裝備研制項(xiàng)目績效評估指標(biāo)判定與分析

3.1 評估指標(biāo)判定方法

當(dāng)應(yīng)用上述評估指標(biāo)對裝備研制項(xiàng)目開展績效評估時，應(yīng)基于研制過程、研制結(jié)果中的相關(guān)信息，采用合適的方法判定每項(xiàng)評估指標(biāo)的結(jié)果。在上述評估指標(biāo)中，二級指標(biāo)描述的是裝備研制項(xiàng)目的詳細(xì)情況，因此也是指標(biāo)判定的重點(diǎn)。評估指標(biāo)的判定方法見表4。

在檢討式評估中，為更多地保留研制過程和研制結(jié)果的原始信息，對二級評估指標(biāo)結(jié)果不進(jìn)行聚合計算，而是直接用以描述各方面的績效情況。

3.2 評估指標(biāo)結(jié)果的分析方法

評估指標(biāo)結(jié)果反映了裝備研制項(xiàng)目的全面情況。當(dāng)其中的某個指標(biāo)結(jié)果較差時，通常說明可能存在某些方面的問題，對此需要開展重點(diǎn)分析。由評估指標(biāo)結(jié)果分析的典型問題及其可能原因見表5。

3.3 解決措施

對于上述問題，應(yīng)采取針對性解決措施：一方面，應(yīng)盡可能地降低以上問題對裝備運(yùn)用和戰(zhàn)斗力生成的影響，使研制交付的裝備發(fā)揮出最大成效；另一方面，應(yīng)為其他裝備研制提供經(jīng)驗(yàn)教訓(xùn)，以提高裝備研制項(xiàng)目管理水平。另外，還應(yīng)注意分析不同問題之間的關(guān)系，針對典型問題抓住核心關(guān)鍵解決措施，具體見表6。

4 結(jié)語

裝備研制項(xiàng)目績效評估對于最大化發(fā)揮項(xiàng)目研制成效、提升項(xiàng)目管理水平至關(guān)重要。開展檢討式評估有助于從研制結(jié)果、研制過程的表現(xiàn)中分析挖掘潛在問題與不足，為后續(xù)改進(jìn)完善提供依據(jù)。本文建立的裝備研制項(xiàng)目績效評估指標(biāo)不同于正面評價指標(biāo)，其突出了與潛在問題的關(guān)聯(lián)。本研究是拓展績效評估應(yīng)用的一次嘗試，后續(xù)還需結(jié)合實(shí)際應(yīng)用不斷完善。

參考文獻(xiàn)

[1]何榕，常壯，鄭維偉. 軍事裝備建設(shè)項(xiàng)目評估模型構(gòu)建與應(yīng)用研究[J]. 軍事運(yùn)籌與評估，2022，37（1）：61-66.

[2]苗欣宇，程中華，李思雨，等. 基于系統(tǒng)動力學(xué)的裝備科研項(xiàng)目采購績效評估模型[J]. 軍事運(yùn)籌與系統(tǒng)工程，2020，34（3）：33-39.

[3]劉少紅，王倩，肖偉. 裝備研制項(xiàng)目量化評價體系的研究與應(yīng)用[J]. 中國電子科學(xué)研究院學(xué)報，2022，17（3）：263-269.

[4]沈延安，張君彪，王海濤，等. 裝備管理績效內(nèi)涵及評估指標(biāo)體系構(gòu)建[J]. 指揮控制與仿真，2019，41（3）：62-66.

[5]王晶，劉彬. 裝備采購計劃執(zhí)行情況績效評估模型及方法[J]. 項(xiàng)目管理技術(shù)，2020，18（10）：66-72.

[6]張憲，薛奇，劉彬. 裝備規(guī)劃績效評估指標(biāo)遴選框架及其技術(shù)研究[J]. 軍事運(yùn)籌與系統(tǒng)工程，2020，34（4）：31-37.

收稿日期：2024-06-27

作者簡介：

卜廣志（1974—），男，博士，副研究員，研究方向：裝備體系評估。

王彬彬（通信作者）（1994—），男，博士，助理研究員，研究方向：重大裝備建設(shè)評估。