基于模糊綜合評價法的標(biāo)準(zhǔn)實施效果評價研究
——安全生產(chǎn)(化工)領(lǐng)域地方標(biāo)準(zhǔn)

柏 萍正高級工程師 張 麗

(江蘇省安全生產(chǎn)科學(xué)研究院,江蘇 南京 210042)

0 引言

2018年1月,修訂的《標(biāo)準(zhǔn)化法》第29條明確規(guī)定“應(yīng)當(dāng)建立標(biāo)準(zhǔn)實施信息反饋和評估機(jī)制”;2019年12月,江蘇省市場監(jiān)督管理局發(fā)布《江蘇省地方標(biāo)準(zhǔn)管理規(guī)定》第28條規(guī)定“省、設(shè)區(qū)的市人民政府標(biāo)準(zhǔn)化行政主管部門應(yīng)當(dāng)依法建立標(biāo)準(zhǔn)實施信息反饋和評估機(jī)制,并根據(jù)反饋和評估情況對所制定地方標(biāo)準(zhǔn)進(jìn)行復(fù)審”。開展標(biāo)準(zhǔn)實施效果評價是強(qiáng)化標(biāo)準(zhǔn)實施監(jiān)督的有效手段。國內(nèi)標(biāo)準(zhǔn)審評機(jī)構(gòu)、標(biāo)準(zhǔn)化研究機(jī)構(gòu)、各省質(zhì)量監(jiān)督管理局都開展了相關(guān)標(biāo)準(zhǔn)實施效果評價的研究,目前獲得了一些國家標(biāo)準(zhǔn)、地方標(biāo)準(zhǔn)評價的研究成果[1-5],但都只是針對某項標(biāo)準(zhǔn)開展的效果評估,沒有形成統(tǒng)一的評價方法和評價指標(biāo),難以大范圍推廣。本文提出因子權(quán)重排序估計法和模糊綜合評價相結(jié)合的方法對標(biāo)準(zhǔn)實施效果進(jìn)行評價,在評價指標(biāo)選擇及設(shè)置、評價的方法、評價的機(jī)制等方面形成可復(fù)制、可推廣的模式,為未來安全生產(chǎn)領(lǐng)域地方標(biāo)準(zhǔn)實施效果評價提供技術(shù)性支撐。

1 評價內(nèi)容

1.1 評價指標(biāo)體系構(gòu)建

評價指標(biāo)體系是標(biāo)準(zhǔn)實施效果評價的基礎(chǔ),是由一系列相互聯(lián)系、相互依存、能反映被評價對象實際情況的指標(biāo)構(gòu)成的有機(jī)整體,本文以《國家標(biāo)準(zhǔn)實施效果評價工作指南(試用版)》為基礎(chǔ),根據(jù)標(biāo)準(zhǔn)評價的目的和要求、相關(guān)標(biāo)準(zhǔn)的內(nèi)容及標(biāo)準(zhǔn)評價的學(xué)術(shù)研究成果,充分考慮安全生產(chǎn)(化工)領(lǐng)域標(biāo)準(zhǔn)作為涉及保障人身健康和生命安全標(biāo)準(zhǔn)的特點,以及化工行業(yè)、領(lǐng)域的實際情況,結(jié)合日常的安全檢查、標(biāo)準(zhǔn)化評審等工作經(jīng)驗,最終確定地方標(biāo)準(zhǔn)實施效果的評價指標(biāo)體系包含:3個一級指標(biāo),分別為標(biāo)準(zhǔn)內(nèi)容評價C1、標(biāo)準(zhǔn)實施應(yīng)用評價C2、標(biāo)準(zhǔn)實施效益評價C3;25個二級指標(biāo)。各級指標(biāo),見表1。

表1 地方標(biāo)準(zhǔn)實施效果各級評價指標(biāo)及編號Tab.1 Evaluation index and number of local standard implementation effect at all levels

1.2 指標(biāo)含義

1.2.1 標(biāo)準(zhǔn)內(nèi)容評價

標(biāo)準(zhǔn)在制定階段,應(yīng)廣泛征求技術(shù)專家、生產(chǎn)經(jīng)營單位、行政監(jiān)管部門等的意見,充分考慮標(biāo)準(zhǔn)的適用領(lǐng)域、使用者;標(biāo)準(zhǔn)技術(shù)內(nèi)容應(yīng)與法律、法規(guī)、規(guī)章、標(biāo)準(zhǔn)及產(chǎn)業(yè)發(fā)展政策相協(xié)調(diào);標(biāo)準(zhǔn)與當(dāng)?shù)卣畼?biāo)準(zhǔn)體系相協(xié)調(diào);標(biāo)準(zhǔn)的編制應(yīng)嚴(yán)謹(jǐn)準(zhǔn)確、結(jié)構(gòu)合理、要素完備、條文說明清晰無歧義;滿足生產(chǎn)實際及產(chǎn)業(yè)發(fā)展需求,標(biāo)準(zhǔn)應(yīng)具有先進(jìn)性。因此,標(biāo)準(zhǔn)內(nèi)容評價應(yīng)包括以下內(nèi)容:

(1)范圍適用性C11:標(biāo)準(zhǔn)化對象是否準(zhǔn)確,適用領(lǐng)域、使用者和內(nèi)容的用途是否清晰。

(2)條款適用性C12:標(biāo)準(zhǔn)內(nèi)容是否全面,技術(shù)內(nèi)容是否嚴(yán)謹(jǐn)、合理,與當(dāng)前最新技術(shù)法規(guī)標(biāo)準(zhǔn)相比內(nèi)容是否有更新,規(guī)范性引用文件是否現(xiàn)行有效。

(3)先進(jìn)性C13:是否有相應(yīng)的國際標(biāo)準(zhǔn)、國家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn),技術(shù)指標(biāo)與相應(yīng)的國際標(biāo)準(zhǔn)、國家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)的差異性。

(4)與法律、法規(guī)、規(guī)章或產(chǎn)業(yè)政策的協(xié)調(diào)性C14:是否與法律、法規(guī)、規(guī)章或產(chǎn)業(yè)政策相協(xié)調(diào)。

(5)與其他標(biāo)準(zhǔn)的協(xié)調(diào)性C15:是否與國家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)、地方標(biāo)準(zhǔn)相協(xié)調(diào),是否列入地方或國家安全生產(chǎn)標(biāo)準(zhǔn)體系。

(6)結(jié)構(gòu)規(guī)范性C16:文本結(jié)構(gòu)是否合理,各要素是否完備、準(zhǔn)確。

(7)表述規(guī)范性C17:條款表述是否清晰,語言是否準(zhǔn)確、簡潔、無歧義。

(8)格式規(guī)范性C18:要素的編寫是否符合GB/T 1.1—2020《標(biāo)準(zhǔn)化工作導(dǎo)則 第1部分:標(biāo)準(zhǔn)化文件的結(jié)構(gòu)和起草規(guī)則》。

1.2.2 標(biāo)準(zhǔn)實施應(yīng)用評價

在實際生產(chǎn)活動中,標(biāo)準(zhǔn)落地的重要途徑是標(biāo)準(zhǔn)的傳播、宣貫、執(zhí)行和被引用。標(biāo)準(zhǔn)從發(fā)布到被應(yīng)用,需要政府部門提供標(biāo)準(zhǔn)查閱、獲取渠道,來保證標(biāo)準(zhǔn)使用方能及時獲取;也需要行業(yè)主管部門加強(qiáng)宣貫確保標(biāo)準(zhǔn)使用方熟悉標(biāo)準(zhǔn)、會用標(biāo)準(zhǔn)。因此在標(biāo)準(zhǔn)的實施應(yīng)用階段,標(biāo)準(zhǔn)實施應(yīng)用評價應(yīng)包括以下內(nèi)容:

(1)相關(guān)政府部門傳播C21:標(biāo)準(zhǔn)主管部門、行業(yè)主管部門是否在公共平臺發(fā)布標(biāo)準(zhǔn)信息、是否公開標(biāo)準(zhǔn)文本或提供標(biāo)準(zhǔn)查閱途徑。

(2)企業(yè)傳播C22:企業(yè)是否及時獲取標(biāo)準(zhǔn)信息和文本,企業(yè)內(nèi)部是否及時轉(zhuǎn)發(fā)標(biāo)準(zhǔn)信息和標(biāo)準(zhǔn)文本,并告知相關(guān)人員。

(3)行業(yè)主管部門(標(biāo)準(zhǔn)化技術(shù)委員會)宣貫C23:行業(yè)主管部門、標(biāo)準(zhǔn)化技術(shù)委員會是否開展標(biāo)準(zhǔn)宣貫活動,開展標(biāo)準(zhǔn)宣貫活動的次數(shù),開展標(biāo)準(zhǔn)宣貫活動的規(guī)模。

(4)企業(yè)宣貫C24:企業(yè)開展標(biāo)準(zhǔn)培訓(xùn)的次數(shù),企業(yè)參加標(biāo)準(zhǔn)培訓(xùn)的人員規(guī)模。

(5)行業(yè)主管部門執(zhí)行C25:行業(yè)主管部門是否出臺相關(guān)文件并推動標(biāo)準(zhǔn)實施,行業(yè)主管部門是否及時跟蹤標(biāo)準(zhǔn)執(zhí)行。

(6)企業(yè)執(zhí)行C26:企業(yè)是否將標(biāo)準(zhǔn)納入企業(yè)標(biāo)準(zhǔn)體系并執(zhí)行,執(zhí)行標(biāo)準(zhǔn)是否取得成果。

(7)地方政府文件引用C27:是否被各級地方政府文件引用。

(8)地方標(biāo)準(zhǔn)引用C28:是否被地方標(biāo)準(zhǔn)引用。

(9)科技文獻(xiàn)引用C29:是否被科技圖書、期刊文獻(xiàn)、專利、科技報告、會議文獻(xiàn)、學(xué)位論文等引用。

1.2.3 標(biāo)準(zhǔn)實施效益評價

安全生產(chǎn)(化工)領(lǐng)域標(biāo)準(zhǔn)的實施效益體現(xiàn)在標(biāo)準(zhǔn)實施前后所獲得的經(jīng)濟(jì)效益、對社會的貢獻(xiàn)、對生態(tài)環(huán)境的保護(hù)[6-8]。首先,經(jīng)濟(jì)效益不僅體現(xiàn)在安全生產(chǎn)管理質(zhì)量水平的提高對經(jīng)濟(jì)收益的影響,還體現(xiàn)在安全生產(chǎn)事故減少帶來的經(jīng)濟(jì)損失降低及合理落實安全生產(chǎn)投入,目前對于潛在損失和經(jīng)濟(jì)效益的度量尚無特別合適的科學(xué)標(biāo)準(zhǔn),因此本文選取了定性評價指標(biāo);二是社會效益,通過標(biāo)準(zhǔn)的制定和實施,持續(xù)提升本質(zhì)安全水平、保障民生和安全、推動行業(yè)高質(zhì)量發(fā)展、防范化解重特大風(fēng)險,保障安全;三是生態(tài)效益,通過標(biāo)準(zhǔn)的實施應(yīng)用,遏制事故發(fā)生,達(dá)到不污染、破壞自然環(huán)境,推進(jìn)節(jié)能減排。因此標(biāo)準(zhǔn)實施效益評價應(yīng)包括以下內(nèi)容:

(1)經(jīng)濟(jì)節(jié)約C31:人力、時間、設(shè)備、原材料等成本是否得到節(jié)約,安全衛(wèi)生、勞動保護(hù)、減少職業(yè)病、降低事故等方面是否得到節(jié)約。

(2)經(jīng)濟(jì)收益C32:生產(chǎn)效率或產(chǎn)量的提高是否促進(jìn)經(jīng)濟(jì)收益,產(chǎn)品(服務(wù))質(zhì)量和水平的提高是否促進(jìn)經(jīng)濟(jì)收益。

(3)達(dá)標(biāo)所需投入C33:企業(yè)為了達(dá)標(biāo)投入的成本是否科學(xué)可控。

(4)規(guī)范及推動行業(yè)高質(zhì)量發(fā)展C34:是否增強(qiáng)企業(yè)主體責(zé)任感,是否促進(jìn)企業(yè)改善設(shè)備、設(shè)施,是否規(guī)范作業(yè)人員作業(yè)行為,是否促進(jìn)企業(yè)改善作業(yè)環(huán)境,是否提升企業(yè)管理水平。

(5)保障公共安全C35:是否有效防范、遏制生產(chǎn)安全事故發(fā)生。

(6)塑造企業(yè)品牌與形象C36:是否降低社會輿情的影響,客戶滿意度是否提高,業(yè)內(nèi)的影響力、品牌和知名度是否提升。

(7)保護(hù)生態(tài)環(huán)境C37:是否減少了泄漏等事故的發(fā)生,是否降低了環(huán)境污染風(fēng)險。

(8)推進(jìn)節(jié)能減排C38:是否控制三廢產(chǎn)生和污染源的排放,是否推進(jìn)節(jié)能減排。

2 評價方法

2.1 指標(biāo)權(quán)重確定

各級指標(biāo)權(quán)重系數(shù)采用因子權(quán)重的排序估計法[9-10]計算。通過邀請專家對各個指標(biāo)重要性進(jìn)行排序的方式來獲取他們對各個指標(biāo)相對重要性的判斷,然后統(tǒng)計每一個指標(biāo)出現(xiàn)在每一個位次上的比例,將每一個指標(biāo)在某一排序位置上的狀態(tài)進(jìn)行量化,從而計算該指標(biāo)的排序值,排序值越大則重要性越強(qiáng),最后經(jīng)過歸一化處理得到指標(biāo)的權(quán)重。

本文根據(jù)安全生產(chǎn)(化工)領(lǐng)域標(biāo)準(zhǔn)的特點,選擇20 位包括標(biāo)準(zhǔn)審評專家、化工安全領(lǐng)域?qū)＜?、安全生產(chǎn)理論與法規(guī)標(biāo)準(zhǔn)研究專家、標(biāo)準(zhǔn)質(zhì)量研究專家等進(jìn)行調(diào)查,對評價體系的3個一級指標(biāo)和25個二級指標(biāo)分別進(jìn)行重要性排序。經(jīng)統(tǒng)計、計算和歸一化處理,計算出各指標(biāo)權(quán)重系數(shù),表2為一級指標(biāo)層3個指標(biāo)的權(quán)重W計算結(jié)果,表3-5為25個二級指標(biāo)層各指標(biāo)的權(quán)重計算結(jié)果。各指標(biāo)的權(quán)重向量為:

W=(0.325,0.4083,0.2667)

W1=(0.1803,0.1734,0.1442,0.1734,0.1289,0.0652,0.0999,0.0347)

W2=(0.1322,0.0889,0.1622,0.1089,0.1478,0.1744,0.1067,0.0522,0.0267)

W3=(0.1077,0.1575,0.0470,0.1616,0.2017,0.1022,0.1519,0.0704)

從表2中可見,通過專家們的反饋意見計算,一級指標(biāo)中標(biāo)準(zhǔn)實施應(yīng)用權(quán)重相對較高,標(biāo)準(zhǔn)內(nèi)容評價次之,實施效益權(quán)重系數(shù)相對較低。

表2 標(biāo)準(zhǔn)實施效果評價指標(biāo)重要性排序及權(quán)重Tab.2 The importance ranking and weight of evaluation index of standard implementation effect

表3 標(biāo)準(zhǔn)內(nèi)容評價指標(biāo)重要性排序及權(quán)重Tab.3 The importance ranking and weight of standard content evaluation index

表4 標(biāo)準(zhǔn)實施應(yīng)用評價指標(biāo)重要性排序及權(quán)重Tab.4 The importance ranking and weight of evaluation index of standard implementation and application

表5 標(biāo)準(zhǔn)實施效益評價指標(biāo)重要性排序及權(quán)重Tab.5 The importance ranking and weight of standard implementation efficiency evaluation index

2.2 模糊綜合評價

模糊綜合評價法是以模糊數(shù)學(xué)為基礎(chǔ),以隸屬函數(shù)為橋梁,利用模糊關(guān)系合成原理,將一些模糊的、不易定量的因素進(jìn)行量化,用模糊集合表示,并對多種影響因素做出全面評價的一種高效的多因素決策方法[11-12]。

對標(biāo)準(zhǔn)實施給予一定的等級劃分,即確定評價等級,給出評語集,本研究給出的評語集為V={V1,V2,V3,V4,V5}={優(yōu)秀,良好,一般,差,很差},評價等級為5級。利用德爾菲法[10]選擇多個專家,按照二級評價指標(biāo)對標(biāo)準(zhǔn)實施效果進(jìn)行打分,將打分所對應(yīng)的百分制區(qū)間按照表6進(jìn)行等級劃分,再將每個指標(biāo)的打分等級按照專家人數(shù)進(jìn)行歸一化處理,得到的模糊評價綜合結(jié)果作為該二級指標(biāo)所對應(yīng)的不同評語元素的隸屬度。通過采用模糊數(shù)學(xué)法來計算單因素評價和多因素評價,得到最終的評價結(jié)果。

對某個或某類對象中的某個因素或某個部分進(jìn)行評價,稱為單一評價,從眾多的單一評價中獲得對某個或某類對象的整體評價,即為綜合評判。

表6 評價等級換算表Tab.6 Evaluation grade conversion table

利用模糊評價矩陣Ri來計算單因素評價結(jié)果,按照模糊綜合評價的方法,可以得到評價結(jié)果矩陣Bi:

Bi=Wi×Ri,i=1,2,3

(1)

3 實例分析

以DB 32/T 3958—2020《化工企業(yè)安全生產(chǎn)信息化管理平臺建設(shè)技術(shù)規(guī)范》為例,數(shù)據(jù)來源于調(diào)查問卷,為保證抽樣調(diào)查對象的廣泛性,抽樣調(diào)查主要面向標(biāo)準(zhǔn)的使用方、監(jiān)管方,包括:適用范圍內(nèi)的危險化學(xué)品生產(chǎn)、倉儲經(jīng)營企業(yè)、應(yīng)急管理部門、安全評價機(jī)構(gòu)、化工安全領(lǐng)域?qū)＜?共發(fā)放調(diào)查問卷116份,收回調(diào)查問卷116份,其中16份調(diào)查問卷沒有填寫完整,有效問卷100份。

3.1 判斷模糊矩陣建立

DB 32/T 3958—2020實施效果評價通過100份有效調(diào)查問卷分別對各二級指標(biāo)進(jìn)行評價和判斷,將判斷結(jié)果按照表6進(jìn)行歸類,建立單因素評價矩陣Ri={rjk}。其中j表示第j個一級評價指標(biāo),rjk表示該一級評價指標(biāo)下第j個二級評價指標(biāo)的評價結(jié)果等級k,其中i=1,2,3;j=1,2,…,n;k=優(yōu)秀、良好、一般、差、較差。將問卷的評價情況作為3個一級指標(biāo)打分的隸屬度,從而建立單因素評價矩陣Ri,得到的評價矩陣如下所示:

3.2 單因素評價

將利用因子權(quán)重排序法計算得到的權(quán)重向量Wi和評價矩陣Ri代入公式(1),得到結(jié)果如下,其中矩陣B1、B2、B3分別表示調(diào)查問卷中每個受訪者對每個指標(biāo)的評價情況:

B1=W1×R1=(0.2065,0.2171,0.2660,0.1894,0.1210)

B2=W2×R2=(0.4408,0.2737,0.1875,0.0387,0.0593)

B3=W3×R3=(0.1628,0.4483,0.2360,0.1020,0.0509)

將評價結(jié)果按照百分制進(jìn)行換算,可以得到:

各指標(biāo)分值與排序結(jié)果,見表7。

表7 各指標(biāo)分值與排序結(jié)果Tab.7 Every index score value and sorting result

由表7可以看出,專家對標(biāo)準(zhǔn)實施應(yīng)用和標(biāo)準(zhǔn)實施效益的評價均在80分以上,說明該標(biāo)準(zhǔn)在執(zhí)行、宣貫以及帶來的社會效益等方面比較好,這2項指標(biāo)評價結(jié)果屬于良好。標(biāo)準(zhǔn)內(nèi)容的得分低于80分,說明該標(biāo)準(zhǔn)語言描述、格式規(guī)范性上還需進(jìn)一步完善,該項指標(biāo)評價結(jié)果為一般。

3.3 多因素評價

綜合3個一級指標(biāo),對DB 32/T 3958—2020實施效果做評價分析,采用與單因素評價同樣的方法,按照模糊綜合評價的方法,將一級指標(biāo)的權(quán)重向量和各一級指標(biāo)的評價結(jié)果帶入公式(1),得到綜合評價結(jié)果矩陣B,計算結(jié)果如下:

B=W×R=(0.325,0.4083,0.2667)×

=(0.2905,0.3019,0.2259,0.1046,0.0771)

換算成百分制可得:

B′=0.2905×95+0.3019×85+0.2259×75+0.1046×65+0.0771×55=81.24

即該標(biāo)準(zhǔn)的總體評價得分?jǐn)?shù)為81.24分,處于良好等級。

3.4 各指標(biāo)評價分析結(jié)論

3.4.1 標(biāo)準(zhǔn)內(nèi)容

根據(jù)問卷調(diào)查統(tǒng)計分析,標(biāo)準(zhǔn)的適用范圍、技術(shù)內(nèi)容與當(dāng)前行業(yè)發(fā)展的水平相當(dāng),標(biāo)準(zhǔn)不存在與其他標(biāo)準(zhǔn)主要技術(shù)指標(biāo)或要求相矛盾的情況,但也存在一定的問題:部分條款表述不明確,可能會出現(xiàn)使用者因理解差異而存在執(zhí)行困難;格式不規(guī)范,圖、表、注、規(guī)范性引用文件的編寫與GB/T 1.1—2020的要求存在一定的差距。

3.4.2 標(biāo)準(zhǔn)實施應(yīng)用

根據(jù)問卷調(diào)查和實地調(diào)研統(tǒng)計分析,自標(biāo)準(zhǔn)發(fā)布以來,省應(yīng)急管理廳、各市應(yīng)急管理部門多次開展該項標(biāo)準(zhǔn)的宣貫、解讀,宣貫對象覆蓋面廣,同時標(biāo)準(zhǔn)文本在官方平臺上均容易獲取,便于查詢和使用,標(biāo)準(zhǔn)也被省、市應(yīng)急管理部門的文件所引用。截止2022年底全省按標(biāo)準(zhǔn)的技術(shù)要求完成信息化管理平臺建設(shè)的危險化學(xué)品企業(yè)1955家,取得了顯著成果。

3.4.3 標(biāo)準(zhǔn)實施效益

根據(jù)調(diào)查問卷統(tǒng)計分析,在執(zhí)行該標(biāo)準(zhǔn)過程中,大部分企業(yè)采用技術(shù)措施增加了成本,但增加的成本基本可控,大部分標(biāo)準(zhǔn)使用者認(rèn)為該標(biāo)準(zhǔn)的實施,在保障民生和安全、推動行業(yè)高質(zhì)量發(fā)展、保護(hù)生態(tài)環(huán)境、塑造良好企業(yè)形象等方面都具有積極作用。

綜上,該標(biāo)準(zhǔn)符合目前相關(guān)政策規(guī)定,可操作性較強(qiáng),實施效果較好。

4 結(jié)論

本文通過對DB 32/T 3958—2020實施效果評價的分析和研究,積累了一些評價經(jīng)驗。

(1)建立一套科學(xué)、合理的評價體系,將標(biāo)準(zhǔn)實施前、實施中、實施后3個階段涉及的內(nèi)容納入到評價指標(biāo)中,使評價體系更完整。

(2)通過因子權(quán)重排序估計法確定評價指標(biāo)的權(quán)重,采用模糊綜合評價法,使各指標(biāo)對總體評價的影響程度及重要作用更加科學(xué)合理。

(3)整個評價過程實現(xiàn)定性和定量分析有效地結(jié)合,使得評價結(jié)果客觀公正,符合實際情況,具有較高的可信度。