裝備綜合保障包評價方法研究

(1.中國人民解放軍92942部隊，北京 100000； 2.北京鈦航信息技術(shù)有限公司，北京 100041)

0 引言

綜合保障包(Integrated Support Package,ISP)，也稱產(chǎn)品保障包，是所有保障要素信息的綜合并具有維修和保障活動的管理功能的一種信息產(chǎn)品，是保障系統(tǒng)的組成部分，保障包是產(chǎn)品保障系統(tǒng)的可交付成果之一，也是合同所要求的可交付成果。研制和交付產(chǎn)品保障包是產(chǎn)品保障分析[1]的目標，通過產(chǎn)品保障分析結(jié)果的后勤產(chǎn)品數(shù)據(jù)產(chǎn)生，并將保障系統(tǒng)各保障要素的有關(guān)信息打包，成為產(chǎn)品保障包的信息產(chǎn)品[2]。綜合保障包包含了綜合保障要素包和可應(yīng)用的保障功能，是保障要素的可交付形式。它與將要部署的裝備配套，作為保障系統(tǒng)的一部分交付。顯然，保障包是保障要素的綜合，傳統(tǒng)的保障要素主要有十項。2011年，美國國防部在原有十項要素[3]的基礎(chǔ)上，新增了產(chǎn)品保障管理和持續(xù)保障工程要素，形成了新的12項保障要素，如圖1所示。

圖1 新的綜合保障要素及其相互關(guān)系

綜合保障包(ISP)的研制結(jié)果是否符合要求，或者是否能夠達到綜合保障系統(tǒng)實現(xiàn)保障特性的水平需要進行評估或評價[4、5]。評價的時間貫穿裝備的全壽命周期，即裝備的論證階段、裝備的研制階段和裝備的使用維護階段。作為隨主裝備同步交付的保障產(chǎn)品，需建立綜合保障包驗收評價方法體系。

通過研究分析綜合保障包的評價方法和評價機制，確立保障包的評價時機、評價過程、評價內(nèi)容、評價方法等關(guān)鍵評價要素的具體構(gòu)成，從保障要素、保障包特性、保障包數(shù)據(jù)以及保障包信息系統(tǒng)等幾個角度定量和定性的對綜合保障包(ISP)的生成過程及成果予以評價，論證并分析保障包評價實施的過程、指標體系、評價模型，最終實現(xiàn)對保障包產(chǎn)品的綜合評價和改進[6]。

1 綜合保障包評價的一般要求

1.1 綜合保障包的評價目標

綜合保障包(ISP)是保障系統(tǒng)的數(shù)據(jù)產(chǎn)品和核心內(nèi)容，與保障系統(tǒng)的設(shè)計、研制和交付同步。保障包的價值在于提供覆蓋全部保障要素的信息資源以及保障活動的管理與協(xié)調(diào)，從另一個層面來看，保障包是裝備保障方案的實踐內(nèi)容[7]，因此評價保障包的研制水平等同于評價裝備保障方案的設(shè)計水平，評價保障包的過程實際上也是在評價裝備保障方案的過程。

綜合保障包(ISP)的評價是一項復雜的工作，需要組織來自多個層次和領(lǐng)域的專家共同決策。在評價的過程中可能運用定性的分析方法，或者定量分析方法，或者定性定量相結(jié)合的方法，也會是基于研討的多種方法的綜合運用。

對綜合保障包進行評價，實質(zhì)上是依據(jù)作戰(zhàn)保障的理想模式，借助定量評估、定性說明及綜合評價等手段，對使用綜合保障包進行保障系統(tǒng)核心構(gòu)建的作用效果進行全面評價，形成評價結(jié)論，出具評價報告的過程[8]。

根據(jù)作用效果，可以導出綜合保障包(ISP)評價的核心目標為三性，即完整性、合理性和有效性。保障包的功能和結(jié)構(gòu)根據(jù)保障要素進行設(shè)置，完整性評價考察的就是保障要素的覆蓋度，合理性和有效性是對保障包對各保障要素進行協(xié)調(diào)一致和管理活動能力的客觀評價。

1.2 綜合保障包的評價對象

1.2.1 評價主體

綜合保障包(ISP)的評估主體即是解決由誰來評價的問題。評價對象即評估主體，對于任何一個評估主體，由于自身特定的評估視角和認知態(tài)度的不同，具有其自身優(yōu)勢，然而不同身份的評估主體都有自身難以克服的評估局限，這些優(yōu)勢和局限性都會對評估效果的有效性產(chǎn)生較大的影響。因此需要多角度選擇綜合保障包的評估主體。

綜合保障包(ISP)的評估主體主要來自3個方面。

1)裝備保障主管部門:

即裝備保障的管理和業(yè)務(wù)指導部門，作為評估主體之一能夠從宏觀上掌握裝備綜合保障系統(tǒng)和保障包研制的目標和方向，通過親自開展評估和收集其他相關(guān)評估主體的信息反饋，能夠取得更全面、真實、有效的信息，更好的發(fā)揮指導、監(jiān)控作用。

2)裝備保障實施者:

即裝備保障的一線工作人員，包括保障指揮人員、保障管理人員、技術(shù)保障人員。裝備保障實施者是整個裝備保障活動的親身體驗者和直接受益者，作為評估主體，能夠準確把握保障系統(tǒng)的使用效果、薄弱環(huán)節(jié)和關(guān)鍵著力點，是最直接、最客觀的評估主體之一。

3)裝備保障評估專家:

即院校和科研院所中裝備保障方面的專家，他們要參與綜合保障包評估的全過程。專家作為評估主體具有獨特的優(yōu)勢，具有完全的獨立性，不會受到任何的約束和限制，又具有一定的權(quán)威性和專業(yè)性。

1.2.2 評價客體

評估客體解決的是“評估誰”的問題。裝備綜合保障包的評估客體是指保障包的研制單位以及為保障包提供產(chǎn)品保障性分析數(shù)據(jù)的裝備研制方。評價的直接對象是保障包的數(shù)據(jù)產(chǎn)品和信息系統(tǒng)。評價的主要內(nèi)容是保障包的綜合特性、保障包的保障要素、保障包的數(shù)據(jù)內(nèi)容以及保障包的信息系統(tǒng)。

1.3 綜合保障包評價的一般步驟

在準備對保障包進行評價之前，需要明確保障包的研制過程及階段形式，如圖2所示。

圖2 保障包的研制過程

評估的步驟是有效進行評估的保證，一般步驟包括以下幾步：

1)明確系統(tǒng)目標，熟悉系統(tǒng)方案；

2)分析系統(tǒng)要素；

3)確定評估指標體系；

4)制定評估結(jié)果和評估準則；

5)確定評估方法；

6)系統(tǒng)綜合評估。

2 綜合保障包的評價內(nèi)容

2.1 綜合保障包的評價流程

綜合保障包(ISP)的評價過程是分布在裝備的論證、研制和使用等全壽命周期各個階段的。保障包的評價就是基于裝備保障方案、保障系統(tǒng)設(shè)計以及保障包研制等相關(guān)數(shù)據(jù)和信息，按預期的評估目標構(gòu)建評估指標體系，選擇適當?shù)脑u估方法，實現(xiàn)對保障包的綜合評估，并對評估結(jié)果和各項指標進行具體分析，達到完全認識、改進綜合保障包(ISP)總體水平及其發(fā)展的要求。

其評價流程如下：

1)明確評估對象；

2)構(gòu)建保障包(ISP)評估指標體系；

3)建立保障包(ISP)評估模型；

4)保障包(ISP)信息需求分析；

5)保障包(ISP)信息收集與處理；

6)保障包(ISP)評估實施。

2.2 綜合保障包的評價范圍和內(nèi)容

綜合保障包(ISP)的評價范圍包括四個方面：保障包綜合評價、保障要素評價、保障包數(shù)據(jù)準備評價和保障包的信息系統(tǒng)評價方面。采用層次分析法(Analytic Hierarchy Process, AHP)構(gòu)建保障包的三級指標體系，設(shè)置并優(yōu)化指標權(quán)重模型。

保障包綜合評價主要是圍繞保障包的6個基本特性收集相關(guān)數(shù)據(jù)和信息，使用基礎(chǔ)評價方法，建立評價模型，采用定性的方式整體評價綜合保障包研制的合理性。保障包的六個特性即：層次性、交付性、覆蓋性、功能性、綜合性、持續(xù)性。

保障要素評價主要是圍繞保障包所覆蓋的12項保障要素收集相關(guān)數(shù)據(jù)和信息，使用基礎(chǔ)評價方法，建立評價模型，采用定性、定量結(jié)合的方式評價保障包要素實現(xiàn)的完整性和有效性。保障要素主要分為資源類要素和管理類要素兩大類，資源類要素主要包括保障設(shè)備、技術(shù)資料、訓練及訓練保障、人力和人員、設(shè)施和基礎(chǔ)設(shè)施、計算機資源；管理類要素主要包括產(chǎn)品保障管理、設(shè)計接口、持續(xù)保障工程、供應(yīng)保障、維修規(guī)劃和管理。

保障包的數(shù)據(jù)準備評價主要是圍繞保障包的數(shù)據(jù)內(nèi)容、數(shù)據(jù)來源以及形成的數(shù)據(jù)產(chǎn)品成果(紙質(zhì)或電子)進行相應(yīng)的評價準備，針對數(shù)據(jù)的完整性、數(shù)據(jù)一致性以及數(shù)據(jù)關(guān)聯(lián)性，采用定性、定量的方式進行完整性和有效性評價。

保障包的信息系統(tǒng)評價主要是把保障包的數(shù)據(jù)產(chǎn)品看成是一個信息系統(tǒng)，圍繞典型信息系統(tǒng)的技術(shù)要求(需方)、需求分析(開發(fā)方)、功能和性能等內(nèi)容的構(gòu)成和設(shè)計進行合理性、完整性評價。

2.3 綜合保障包評價的指標體系

構(gòu)建裝備綜合保障包的評價指標體系，是非常復雜的系統(tǒng)工程，也是具有開創(chuàng)性的工作，可以采用文獻總結(jié)、調(diào)查問卷、因子分析、層次分析等方法構(gòu)建綜合保障包的評價指標體系。

首先，多渠道、多方面從文獻和實踐中分析裝備保障體系的構(gòu)成要素和主要內(nèi)容，了解并熟悉裝備保障方案和保障系統(tǒng)設(shè)計的目標和內(nèi)容，建立保障包評價的層次模型，提煉保障包評價的一級指標和二級指標，再通過問卷調(diào)查和因子分析方法，對二級指標進行分解，形成三級指標(基礎(chǔ)指標)，從評估方式、評估要點等方面構(gòu)建保障包的綜合指標體系，分析評估指標的作用機理，最后經(jīng)過實踐和優(yōu)化形成可推廣使用的評估標準體系。

3 綜合保障包的評價方法

3.1 采用層次分析法(AHP)實現(xiàn)評價指標綜合的方案

在保障包的評價過程中主要采用層次分析法(AHP)[9]進行單指標問題分析和綜合評價指標體系的設(shè)計工作。

層次分析法 AHP是根據(jù)問題的性質(zhì)和要達到的目標分解出問題的組成因素，并按因素間的相互關(guān)系及隸屬關(guān)系，將因素層次化，組成一個層次結(jié)構(gòu)模型，然后按層次分析，最終獲得最低層因素對于最高層的重要性權(quán)值，再進行優(yōu)劣性排序。在AHP中遞階層次思想占據(jù)核心地位，通過分析建立一個合理有效的遞階層次結(jié)構(gòu)對于能否成功的解決問題具有決定性意義。

使用層次法AHP進行保障包評價的一般步驟：

1)建立層次結(jié)構(gòu)模型；

2)構(gòu)造判斷矩陣并求其最大特征值和特征向量；

3)單層排序的一致性檢驗及調(diào)整；

4)計算各層元素對系統(tǒng)目標的合成權(quán)重并進行排序；

5)總排序一致性檢驗及調(diào)整。

3.2 保障包綜合特性評價方法

保障包綜合評價主要是圍繞保障包的6個基本特性收集相關(guān)數(shù)據(jù)和信息，使用基礎(chǔ)評價方法，建立評價模型，采用定性的方式整體評價綜合保障包研制的完整性、合理性和有效性。保障包的六個特性即：層次性、交付性、覆蓋性、功能性、綜合性、持續(xù)性[10]。

綜合保障包(ISP)綜合特性的評價方法主要是從保障的六個基本特性出發(fā)，評價其完整性、有效性和合理性。

完整性的評價目標主要是兩個方面：一是結(jié)構(gòu)完整性，即保障包的各項要素均已設(shè)計，沒有缺項；二是內(nèi)容規(guī)范性，即保障包的各項要素設(shè)計符合規(guī)范的要求。因此，開展保障包綜合評價時，可從結(jié)構(gòu)完整和內(nèi)容規(guī)范這兩方面入手。在保障包的綜合特性評價過程主要是關(guān)注功能性特性和覆蓋性特性兩個屬性的完整性。

有效性的評價目的主要是從保障包的運行效果進行評判，在裝備論證和研制初期可采用仿真手段來進行評價驗證；在裝備的使用階段時，則采用現(xiàn)場的保障互動信息收集和裝備狀態(tài)信息的收集方式進行研制。在保障包的綜合特性評價過程主要是關(guān)注交付性特性和持續(xù)性特性兩個屬性的有效性。在裝備使用階段，保障包的有效性評價需要使用下圖3的評價參數(shù)體系。

圖3 保障包有效性評價參數(shù)體系

合理性的評價目標主要是用于評價保障包的承制單位依據(jù)研制要求設(shè)計的綜合保障包的合理程度、適用程度，即綜合保障包是否符合裝備保障方案要求，實現(xiàn)保障系統(tǒng)核心需求，并且是否和現(xiàn)有的客戶條件能夠相適應(yīng)。裝備綜合保障包的完整性反映的是要素的齊全，而保障包的合理性是在完整性的基礎(chǔ)上判斷各要素是否合理。在保障包的綜合特性評價過程主要是關(guān)注層次性特性和綜合性特性兩個屬性的合理性。

3.3 保障包信息系統(tǒng)評價方法

保障包的信息系統(tǒng)評價主要是把保障包的數(shù)據(jù)產(chǎn)品看成是一個信息系統(tǒng)，圍繞典型信息系統(tǒng)的技術(shù)要求(需方)、需求分析(開發(fā)方)、功能和性能等內(nèi)容的構(gòu)成和設(shè)計進行合理性、完整性評價。如下圖4為保障包作為信息系統(tǒng)的功能結(jié)構(gòu)和組成。

圖4 保障包作為信息系統(tǒng)的功能結(jié)構(gòu)和組成

3.3.1 典型信息系統(tǒng)的評價方法和指標體系

因為對信息系統(tǒng)的評價具有多元化、多視角的特點，所以判斷一個信息系統(tǒng)好壞與否，是一個比較難說清的問題。典型對信息系統(tǒng)的評價主要從系統(tǒng)功能、性能、易用性和擴展性等四方面進行考慮[11]。

1)系統(tǒng)功能評價：信息系統(tǒng)的功能和能產(chǎn)生的經(jīng)濟效益對于最終用戶來說是最關(guān)注的問題。只通過幾次功能演示達到讓用戶全面掌握大型信息系統(tǒng)使用的目的是非常困難的一件事情。但是數(shù)據(jù)和信息是信息系統(tǒng)需要處理的核心元素，所以可以考慮通過評價數(shù)據(jù)和信息的存儲結(jié)構(gòu)對信息系統(tǒng)進行功能評價。通過存儲結(jié)構(gòu)中的基礎(chǔ)數(shù)據(jù)定義來認識系統(tǒng)能大大提高用戶掌握信息系統(tǒng)使用的效率。當然，通過基礎(chǔ)數(shù)據(jù)對信息系統(tǒng)功能進行評價只是一個必要條件，并不是一個充分條件，即任何信息系統(tǒng)的功能都離不開基數(shù)數(shù)據(jù)的定義[12]。

2)系統(tǒng)性能評價：穩(wěn)定性和響應(yīng)速度是信息系統(tǒng)正式運行后影響用戶體驗的兩個重要指標。穩(wěn)定性是指信息系統(tǒng)運行過程中發(fā)生故障的頻率或概率；響應(yīng)速度是指信息系統(tǒng)運行過程中從用戶發(fā)出指令到指令動作執(zhí)行完畢所花費的時間，這個時間越短越好。對信息系統(tǒng)的性能評價主要考慮這兩個指標。

3)系統(tǒng)易用性評價：如果信息系統(tǒng)的操作非常繁瑣，很容易使用戶產(chǎn)生抵觸情緒，進而發(fā)展為用戶不愛用甚至放棄信息系統(tǒng)的情況，最終導致信息系統(tǒng)實施失敗，所以信息系統(tǒng)的易用性是決定該系統(tǒng)能否實施成功的關(guān)鍵因素。而對易用性的評價也應(yīng)從用戶操作角度考慮，可以從用戶操作頻率比較高的幾個方面進行考慮。一是用戶交互界面，即UI界面，UI界面的設(shè)計應(yīng)充分考慮到用戶的個性化需求或偏好，對于用戶頻繁使用的功能應(yīng)在系統(tǒng)主菜單或主界面中設(shè)計快捷菜單和按鈕，盡量減少用戶進入該功能需要點擊的鼠標次數(shù)；二是可操作性，就是信息系統(tǒng)的使用流程是否符合用戶的操作習慣，比如對于需要進行數(shù)據(jù)采集的信息系統(tǒng)在設(shè)計時應(yīng)考慮與其他軟件平臺(如word、excel)的接口集成功能，這樣可以方便用戶將其他系統(tǒng)中的數(shù)據(jù)直接導入到信息系統(tǒng)中，如果數(shù)據(jù)量大還應(yīng)考慮批量數(shù)據(jù)導入功能?？傊?，對操作性的評價標準就是是否簡單、直觀、易學易用；三是對專業(yè)業(yè)務(wù)領(lǐng)域的支持力度，即信息系統(tǒng)在設(shè)計時對專業(yè)業(yè)務(wù)的考慮是否周到、細致，是否能夠提供支撐數(shù)據(jù)供用戶進行決策操作，是否能夠提供多種決策方案供用戶進行選擇，這些決定了用戶使用信息系統(tǒng)進行業(yè)務(wù)處理時的靈活性與方便性。

4)系統(tǒng)可擴展性評價：可擴展性代表了當業(yè)務(wù)流程發(fā)生變化或產(chǎn)生新的業(yè)務(wù)流程時，信息系統(tǒng)是否能夠通過適當調(diào)整來適應(yīng)這些變化的能力，它也可稱為系統(tǒng)的柔性。對于業(yè)務(wù)快速發(fā)展或變化較快的客戶來說，選擇一個可擴展性差的信息系統(tǒng)，后續(xù)存在很大的系統(tǒng)改造或重建風險。

以上四方面評價能夠幫助用戶或評價機構(gòu)對信息系統(tǒng)整體進行一個評價，從而完成對信息系統(tǒng)的篩選。當然，最終對信息系統(tǒng)的選型還需要用戶根據(jù)自身的業(yè)務(wù)需求、管理重點和實施目標，通過信息系統(tǒng)加載用戶業(yè)務(wù)數(shù)據(jù)進行完整的流程展示后，結(jié)合展示過程慎重選擇。

3.3.2 保障包的功能模塊評價方法

保障包信息系統(tǒng)功能模塊的評價過程，結(jié)合研制要求、保障系統(tǒng)設(shè)計要求，采用上述評估指標體系，評估保障包功能的完整性和有效性。

1)配置管理功能。綜合保障包(ISP)應(yīng)具有完善的配置管理體系，實現(xiàn)保障包全部數(shù)據(jù)和信息的配置管理功能，能夠記錄配置信息、控制配置項目的更改及其特性的變化。

2)維修計劃和維修管理功能。綜合保障包(ISP)應(yīng)具有維修計劃和維修管理功能，能夠?qū)崿F(xiàn)裝備全壽命周期維修、保障方案與要求的制定、確立以及管理功能。

3)供應(yīng)保障計劃功能。綜合保障包(ISP)應(yīng)具有供應(yīng)計劃保障管理功能，具有為裝備及其保障系統(tǒng)的保障實施確定、獲取、接收、存儲、轉(zhuǎn)移、發(fā)放和處置過程的計劃和管理功能。為裝備準備和提交備件及用具等各種供應(yīng)品的初始供應(yīng)計劃，并為后續(xù)供應(yīng)計劃的修改提供建議。

4)技術(shù)資料管理功能。綜合保障包(ISP)應(yīng)具有技術(shù)資料管理功能，具有對紙質(zhì)文件(A類)、電子文件(B類)、IETM(C類)等不同類型的技術(shù)文件和技術(shù)圖紙進行收集、存儲、下載、檢索、查詢、分析以及版本控制等管理功能。

5)人力資源管理功能。綜合保障包(ISP)應(yīng)具有人力資源管理功能，能夠記錄和查詢裝備維修人力資源基本情況和培訓考核記錄，為安排裝備周期計劃、季度計劃、周計劃時選擇合適人員的提供依據(jù)。在平時和戰(zhàn)時裝備的使用期內(nèi)，保障包(ISP)能夠根據(jù)使用和保障裝備系統(tǒng)所要求的技能等級標準，確定人員使用和保障裝備所要求的技能等級的能力。

6)訓練管理和訓練保障功能。綜合保障包(ISP)應(yīng)具有訓練管理和訓練保障功能，能夠?qū)崿F(xiàn)個人和團隊的培訓、新設(shè)備培訓，正式培訓和崗位培訓，以及訓練設(shè)備、訓練設(shè)施的技術(shù)狀態(tài)管理和信息管理功能。

7)大修功能。綜合保障包(ISP)應(yīng)具有大修計劃、大修工作管理功能。

8)庫存管理功能。綜合保障包(ISP)應(yīng)具有庫存管理功能。

9)編碼系統(tǒng)功能。綜合保障包(ISP)應(yīng)具有裝備編碼管理功能。

10)綜合保障包(ISP)推薦具有裝備IETM的信息接口和數(shù)據(jù)服務(wù)、數(shù)據(jù)轉(zhuǎn)換服務(wù)功能或接口。

11)綜合保障包(ISP)推薦具有裝備PHM的信息接口和數(shù)據(jù)服務(wù)、數(shù)據(jù)轉(zhuǎn)換服務(wù)功能或接口。

12)綜合保障包(ISP)推薦具有產(chǎn)品保障分析功能和保障數(shù)據(jù)采集功能。

3.3.3 保障包的性能評價方法

保障包信息系統(tǒng)性能的評價過程，結(jié)合研制要求、保障系統(tǒng)設(shè)計要求，采用上述評估指標體系，評估保障包性能的合理性和可行性。保障包性能方面的指標有：

1)實用性。綜合保障包中包含有各類保障要素，應(yīng)具有其完備的功能，在部隊裝備日常保障工作和戰(zhàn)時裝備實時保障中均能發(fā)揮重要的作用。

2)易用性。綜合保障包在設(shè)計時，應(yīng)充分考慮界面布局的美觀大方以及操作導引的清晰準確，相關(guān)專業(yè)操作人員以和非相關(guān)人員都可以輕松駕馭使用。

3)可恢復性。當裝備系統(tǒng)軟硬件發(fā)生故障時，依靠綜合保障包所提供的完整的軟硬件備份手段，應(yīng)可以保證系統(tǒng)不間斷運行，在一定的時間內(nèi)將數(shù)據(jù)恢復到故障發(fā)生以前的狀態(tài)。

4)可擴展性。在數(shù)據(jù)訪問量擴大以及相關(guān)業(yè)務(wù)數(shù)據(jù)加大時，綜合保障包在設(shè)計時就應(yīng)預留足夠的軟硬件擴充接口，這時就只需要增加相關(guān)硬件部分；即使出現(xiàn)了新的裝備業(yè)務(wù)信息系統(tǒng)，也只要完善接口，而不用改動之前的軟件模塊。

4 結(jié)束語

通過系統(tǒng)研究美軍裝備綜合保障相關(guān)文獻及相關(guān)系統(tǒng)開發(fā)經(jīng)驗，重點研究構(gòu)建了裝備綜合保障包技術(shù)體系所需的評價方法，并將其應(yīng)用于裝備綜合保障體系中，是解決評價指標和評價標準模糊性問題的有效嘗試，既克服了人為主觀臆斷，又使評價結(jié)果更加科學準確，為新體制下裝備綜合保障體系建設(shè)的進一步發(fā)展提供了參考和支撐。