• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法研究

    2022-07-10 13:45:31趙東蕾魏志強(qiáng)張保學(xué)張?jiān)篮?/span>晏天錢飛李慶超
    海洋開發(fā)與管理 2022年5期
    關(guān)鍵詞:質(zhì)量管理體系

    趙東蕾 魏志強(qiáng) 張保學(xué) 張?jiān)篮?晏天 錢飛 李慶超

    摘要:為保證海洋調(diào)查觀測監(jiān)測工作質(zhì)量,滿足合法合規(guī)的要求,自然資源管理部門對海洋檢驗(yàn)檢測機(jī)構(gòu)的質(zhì)量管理體系運(yùn)行情況進(jìn)行定期檢查或評估,確保其能支撐各項(xiàng)海洋任務(wù)得到可信的數(shù)據(jù)結(jié)果。然而,這些評估多采用定性方式,對這些機(jī)構(gòu)的質(zhì)量管理體系運(yùn)行的有效性進(jìn)行系統(tǒng)性量化評價(jià)的科學(xué)方法仍需進(jìn)一步研究。文章以海洋調(diào)查觀測監(jiān)測工作的特殊要求為導(dǎo)向,從資源配置、實(shí)施過程和結(jié)果成效3個(gè)方面,識別人員、設(shè)備、方法及其使用、質(zhì)量控制、成果載體和改進(jìn)6項(xiàng)評價(jià)指標(biāo),并引入機(jī)構(gòu)資質(zhì)合法性、數(shù)據(jù)真實(shí)性和質(zhì)量驗(yàn)收結(jié)果3個(gè)“一票否決”指標(biāo);基于加權(quán)累加法建立評價(jià)模型,使用層次分析法確定各項(xiàng)指標(biāo)的權(quán)重,設(shè)置評價(jià)標(biāo)準(zhǔn)和等級界限;構(gòu)建海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性評價(jià)綜合評價(jià)方法,并給出覆蓋海洋調(diào)查觀測監(jiān)測工作的事前、事中、事后的評價(jià)流程建議;以承擔(dān)海洋生態(tài)預(yù)警監(jiān)測任務(wù)的檢驗(yàn)檢測機(jī)構(gòu)為例進(jìn)行評價(jià)示范,體現(xiàn)該評價(jià)方法具有實(shí)用性。

    關(guān)鍵詞:海洋檢驗(yàn)檢測機(jī)構(gòu);質(zhì)量管理體系;綜合評價(jià)方法

    中圖分類號:P7??? 文獻(xiàn)標(biāo)志碼:A??? 文章編號:1005-9857(2022)05-0095- 1 1

    A Comprehensive Method for Evaluating Running Effectiveness of Quality Management Systems of Ocean Inspection Bodies and Laboratories

    ZHAO Donglei,WEI Zhiqiang,ZHANG Baoxue,ZHANG Yuehong,YAN Tian,QIAN Fei,LI Qingchao

    (South China Sea Standards and Metrology Centre,SOA,Guangzhou 510300,China)

    Abstract:In order to ensure the quality of the results of ocean investigation,observation and moni-toring as well as to ensure their compliance of relative laws,branches of Ministry of Natural Re-sources regularly assessed the running status of the quality management systems of the ocean in-spection bodies and laboratories,which was to confirm their ability of obtaining reliable data and results from the marine tasks. However,these assessments were usually based on qualitative methods;a systematic and quantitative method required further research. The paper focused on the particular requirements of marine tasks,recognized 3 relative aspects:deployment of resources,processes of implementation and effectiveness of results,and divided them into 6 indicators:em-ployees,instruments,methods and their application,quality controlling,carriers of outputs and improvement. Meanwhile,3 “one-vote veto”indicators were distinguished:legitimacy of the or-ganization's qualification,authenticity of the data and result,of the quality acceptance test. On the basis of these,an evaluation model depending on weighted accumulation method was established,the weights were acquired through Analytic Hierarchy Process method,the standards and the rule of grading were set,and an index system to evaluate running effectiveness of quality management systems of ocean inspection bodies and laboratories was constructed. At the end of the paper,an advised procedure to conduct the evaluation method was illustrated,and a demonstration on asses-sing the marine ecology monitoring organizations was given,which showed the practicability of the evaluation method.

    Keywords:Ocean inspection bodies and laboratories,Quality management systems,Comprehensive evaluation method

    0??? 引言

    近年來,隨著我國經(jīng)濟(jì)由高速增長轉(zhuǎn)向高質(zhì)量發(fā)展階段,“質(zhì)量第一”和“質(zhì)量強(qiáng)國”被同時(shí)寫進(jìn)黨的十九大報(bào)告中,海洋開發(fā)與利用領(lǐng)域?qū)|(zhì)量的認(rèn)識也愈發(fā)深刻。自然資源部辦公廳、國家林業(yè)和草原局辦公室發(fā)布《自然資源調(diào)查監(jiān)測質(zhì)量管理導(dǎo)則(試行)》(自然資辦發(fā)〔2021〕49號),要求作業(yè)單位建立并運(yùn)行覆蓋本單位調(diào)查監(jiān)測業(yè)務(wù)的質(zhì)量管理體系。這其中的一項(xiàng)重要工作,便是海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系的建立和健全。

    海洋檢驗(yàn)檢測機(jī)構(gòu)是自然資源管理部門履行海洋開發(fā)利用和保護(hù)的監(jiān)督管理職責(zé)、開展海洋調(diào)查觀測監(jiān)測工作的主體,其質(zhì)量管理體系運(yùn)行情況,直接影響海洋調(diào)查觀測監(jiān)測任務(wù)的實(shí)施效果。我國海洋檢驗(yàn)檢測機(jī)構(gòu)包括各海洋觀測預(yù)報(bào)防災(zāi)減災(zāi)、海洋生態(tài)預(yù)警監(jiān)測、近海斷面調(diào)查和遠(yuǎn)洋調(diào)查等任務(wù)承擔(dān)單位和海洋研究所等,其工作內(nèi)容常涉及海洋站(點(diǎn))和調(diào)查船等遠(yuǎn)程或移動的、分散的實(shí)驗(yàn)場所,以及多個(gè)海區(qū)的調(diào)查觀測監(jiān)測數(shù)據(jù)整合,對結(jié)果數(shù)據(jù)質(zhì)量提出嚴(yán)峻挑戰(zhàn)。

    為了保證海洋調(diào)查觀測監(jiān)測任務(wù)結(jié)果質(zhì)量,自然資源管理部門對海洋檢驗(yàn)檢測機(jī)構(gòu)的質(zhì)量管理體系的運(yùn)行情況進(jìn)行定期檢查或評估。然而,這些檢查往往存在關(guān)注點(diǎn)分散、評價(jià)標(biāo)準(zhǔn)不統(tǒng)一、評價(jià)范圍不明確等問題,無法科學(xué)高效地得到客觀、量化的評價(jià)結(jié)論?;谏鲜霈F(xiàn)狀,本研究旨在建立一種以支撐海洋調(diào)查觀測監(jiān)測任務(wù)能力為導(dǎo)向的、相對客觀的、具有可操作性的海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法。

    1??? 質(zhì)量管理體系綜合評價(jià)的一般方法

    1.1?? ?國內(nèi)外質(zhì)量管理體系綜合評價(jià)研究

    綜合評價(jià)方法是海水水質(zhì)評價(jià)、海洋保護(hù)區(qū)生態(tài)風(fēng)險(xiǎn)評價(jià)、海岸整治修復(fù)效果評價(jià)、海島開發(fā)潛力評價(jià)、海洋漁業(yè)產(chǎn)業(yè)競爭力評價(jià)、海洋垃圾狀況評價(jià)、海灘旅游資源質(zhì)量評價(jià)和海洋經(jīng)濟(jì)發(fā)展質(zhì)量評價(jià)等海洋自然資源監(jiān)督管理領(lǐng)域評價(jià)評估常用的研究方法[1-8]。綜合評價(jià)方法的建立一般包括選取評價(jià)指標(biāo)、確定各指標(biāo)權(quán)重、確定各指標(biāo)的評價(jià)標(biāo)準(zhǔn)、建立綜合評價(jià)模型和確定評價(jià)結(jié)果的等級數(shù)量界限等[9]。質(zhì)量管理體系有效性的綜合評價(jià)是指用比較系統(tǒng)的、規(guī)范的方法對于多個(gè)指標(biāo)、多個(gè)機(jī)構(gòu)的質(zhì)量管理體系有效性同時(shí)進(jìn)行評價(jià)。

    質(zhì)量管理體系的綜合評價(jià)可分為質(zhì)量管理體系本身的有效性和質(zhì)量管理體系運(yùn)行的有效性評價(jià)。在該領(lǐng)域國內(nèi)外已有較多研究:Saraph等[10]識別了8項(xiàng)企業(yè)質(zhì)量管理體系評價(jià)的關(guān)鍵要素,在424家企業(yè)的參與下,篩選得到具有有效性、可靠性的綜合的評價(jià)指標(biāo)體系,Badri等[11]則加大調(diào)查樣本,證實(shí)了該評價(jià)模型的有效性和可靠性;Flynn 等[12]在Saraph等[10]研究的基礎(chǔ)上,識別了質(zhì)量管理的7個(gè)維度,探討了工廠和車間操作層面的質(zhì)量管理體系有效性評價(jià);韓福榮等[3]從無形資產(chǎn)評估的角度運(yùn)用收益法和成本法對質(zhì)量管理體系的總體價(jià)值進(jìn)行評價(jià);韓福榮等[14]在前期研究的基礎(chǔ)上,通過問卷調(diào)查,由各獲證企業(yè)對其質(zhì)量管理體系運(yùn)行進(jìn)行“優(yōu)、良、中、低、差”的評價(jià),再分別利用模糊綜合法的最大隸屬度原則和灰色關(guān)聯(lián)分析法的關(guān)聯(lián)度分析確定評價(jià)結(jié)果;楊理琴[15]參照波多里奇質(zhì)量獎(jiǎng)和歐洲質(zhì)量獎(jiǎng)評價(jià)模型,根據(jù)ISO 9001:2000標(biāo)準(zhǔn)的過程模式對質(zhì)量管理體系有效性進(jìn)行評價(jià);郭子雪等[16]采用一種基于直覺模糊集的TOPSIS法,通過構(gòu)建直覺模糊評價(jià)矩陣,確定直覺模糊正理想解和負(fù)理想解,計(jì)算每個(gè)參評企業(yè)的直覺模糊評價(jià)值到直覺模糊理想解的距離,得到質(zhì)量管理體系運(yùn)行的評價(jià)結(jié)果;余崇林[17]采用層次分析法確定指標(biāo)權(quán)重,并采用模糊數(shù)學(xué)綜合評價(jià)法,由專家組依據(jù)每項(xiàng)指標(biāo)對機(jī)構(gòu)作出“優(yōu)秀、良好、一般、較差、很差”的評價(jià),通過最大隸屬度原則確定評價(jià)結(jié)果對政府部門ISO 9000質(zhì)量管理體系進(jìn)行有效性評價(jià)等。此外,1951年創(chuàng)辦的日本戴明獎(jiǎng)[17]、1988年創(chuàng)辦的美國波多里奇質(zhì)量獎(jiǎng)[18]、1991年創(chuàng)辦的歐洲質(zhì)量獎(jiǎng)[19],面向制造業(yè)和服務(wù)業(yè)企業(yè)給出了最精煉和具代表性的質(zhì)量管理體系評價(jià)指標(biāo)和評價(jià)準(zhǔn)則,并至今仍具活力。

    1.2??? 國內(nèi)外質(zhì)量管理有效性綜合評價(jià)方法

    通過對比分析國內(nèi)外質(zhì)量管理有效性綜合評價(jià)方法,可為選取海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性的評價(jià)指標(biāo)、評價(jià)模型以及確定定權(quán)方法等提供參考。

    (1)美國波多里奇質(zhì)量獎(jiǎng)評價(jià)體系[Baldrige National Quality Award(最新)][19]。主要評價(jià)指標(biāo)共7個(gè)條目(對應(yīng)19個(gè)款項(xiàng)),包括:領(lǐng)導(dǎo);戰(zhàn)略規(guī)劃;顧客;信息和分析;人力資源;過程管理;經(jīng)營結(jié)果。評價(jià)指標(biāo)選取方式:分析選取。定權(quán)方法:根據(jù)認(rèn)為的影響程度,直接給出各條目和條款的分值。評價(jià)模型:通過設(shè)置評分細(xì)則,由評審委員給出各款項(xiàng)的評分并累加。評價(jià)模型選取方式為直接選定(給出了評分細(xì)則的編制說明)。

    (2)歐洲質(zhì)量獎(jiǎng)評價(jià)體系[European Foundation For Quality Management (最新)][20]。主要評價(jià)指標(biāo)共9個(gè)要素,包括:領(lǐng)導(dǎo)力;人員素質(zhì);政策和策略;合作伙伴與資源;過程;人力資源開發(fā);顧客結(jié)果;社會效益;最終核心表現(xiàn)。評價(jià)指標(biāo)選取方式:分析選取。定權(quán)方法:根據(jù)認(rèn)為的影響程度,直接給出各要素的評分占比。評價(jià)模型:通過設(shè)置評分細(xì)則,由評審委員給出各要素的評分并累加。評價(jià)模型選取方式為直接選定(給出了評分細(xì)則的編制說明)。

    (3)日本戴明獎(jiǎng)評價(jià)體系[Deming Prize(最新)][18]。主要評價(jià)指標(biāo)共3個(gè)方面(對應(yīng)5個(gè)條款):經(jīng)營目標(biāo)、戰(zhàn)略和最高管理的領(lǐng)導(dǎo)力建立;全面質(zhì)量管理的利用和實(shí)踐;全面質(zhì)量管理的結(jié)果。評價(jià)指標(biāo)選取方式:分析選取。定權(quán)方法:根據(jù)認(rèn)為的影響程度,直接給出各條目和條款的分值。評價(jià)模型:通過設(shè)置評分細(xì)則,由評審委員給出各款項(xiàng)的評分并累加。評價(jià)模型選取方式為直接選定(給出了評分細(xì)則的編制說明)。

    (4)Saraph等[10]提出的質(zhì)量管理評價(jià)方法。主要評價(jià)指標(biāo)共8個(gè)關(guān)鍵因素:管理層領(lǐng)導(dǎo)和質(zhì)量政策;質(zhì)量管理部門;培訓(xùn);產(chǎn)品、服務(wù)設(shè)計(jì);供貨方質(zhì)量管理;流程管理;質(zhì)量數(shù)據(jù)和報(bào)告;員工關(guān)系。評價(jià)指標(biāo)選取方式:過預(yù)設(shè)評價(jià)的8個(gè)關(guān)鍵因素,通過信度分析和效度分析的方式,證明選取的8個(gè)指標(biāo)可靠有效。定權(quán)方法:無。評價(jià)模型:通過問卷調(diào)查,由參與者進(jìn)行1至5的打分,表征“強(qiáng)烈同意”到“強(qiáng)烈不同意”的定性結(jié)果。評價(jià)模型選取方式為直接選定。

    (5)Flynn等[12]提出的質(zhì)量管理評價(jià)方法。主要評價(jià)指標(biāo)包括7個(gè)方面(對應(yīng)11個(gè)評價(jià)指標(biāo)):最高管理支持;質(zhì)量信息;流程管理;產(chǎn)品設(shè)計(jì);勞動力管理;供應(yīng)商參與;顧客參與。評價(jià)指標(biāo)選取方式:采用文獻(xiàn)分析法,歸納并預(yù)設(shè)14個(gè)指標(biāo),通過信度分析和效度分析的方式對指標(biāo)進(jìn)行篩選,最終得到11個(gè)評價(jià)指標(biāo)。定權(quán)方法:無。評價(jià)模型:通過問卷調(diào)查,由參與者進(jìn)行1至5的打分,表征“強(qiáng)烈同意”到“強(qiáng)烈不同意”的定性結(jié)果。評價(jià)模型選取方式為直接選定。

    (6)韓福榮等[14]提出的質(zhì)量管理體系有效性評價(jià)綜合模型。主要評價(jià)指標(biāo)共3個(gè)子目標(biāo)(對應(yīng)9個(gè)屬性指標(biāo)):選取質(zhì)量方針和目標(biāo);產(chǎn)品質(zhì)量穩(wěn)定性;質(zhì)量改進(jìn)與創(chuàng)新。評價(jià)指標(biāo)選取方式為直接選定。定權(quán)方法:采用基于層次分析法的定權(quán)方法。評價(jià)模型:模糊綜合法和灰色關(guān)聯(lián)分析法。評價(jià)模型選取方式為直接選定。

    (7)楊理琴[15]提出的軟件企業(yè)質(zhì)量管理體系有效性評價(jià)方法。主要評價(jià)指標(biāo)共5個(gè)大類指標(biāo)(對應(yīng)24個(gè)屬性指標(biāo)):最高管理者過程;資源管理;產(chǎn)品實(shí)現(xiàn);測量、分析和改進(jìn);運(yùn)行結(jié)果。評價(jià)指標(biāo)選取方式:參照波多里奇質(zhì)量獎(jiǎng)和歐洲質(zhì)量獎(jiǎng)評價(jià)模型,根據(jù)ISO 9001:2000標(biāo)準(zhǔn)的過程模式和質(zhì)量管理體系有效性的要求,分析選取。定權(quán)方法:采用基于層次分析法的定權(quán)方法。評價(jià)模型:未知測度評價(jià)法。評價(jià)模型選取方式:通過詳列方法的特點(diǎn)和優(yōu)點(diǎn),分析選取。

    (8)郭子雪等[16]提出的質(zhì)量管理體系有效性評價(jià)綜合模型。主要評價(jià)指標(biāo)共5個(gè)評價(jià)準(zhǔn)則(對應(yīng)17個(gè)因素):質(zhì)量方針目標(biāo);產(chǎn)品質(zhì)量穩(wěn)定性;質(zhì)量改進(jìn)與創(chuàng)新;資源管理;財(cái)務(wù)運(yùn)行狀況。評價(jià)指標(biāo)選取方式:直接選定。定權(quán)方法:采用基于層次分析法的定權(quán)方法。評價(jià)模型:采用基于直覺模糊集的TOPSIS法。評價(jià)模型選取方式為直接選定。

    (9)余崇林[17]提出的政府部門ISO9000質(zhì)量管理體系有效性評價(jià)方法。主要評價(jià)指標(biāo)共4個(gè)一級指標(biāo)包括(對應(yīng)10個(gè)二級指標(biāo)和23個(gè)三級指標(biāo)):總體管理;服務(wù)實(shí)現(xiàn)管理;持續(xù)改進(jìn);滿意度評價(jià)。評價(jià)指標(biāo)選取方式:通過歸納政府部門1SO9000質(zhì)量管理體系有效性的表征,分析選取。定權(quán)方法:采用基于層次分析法的定權(quán)方法。評價(jià)模型:模糊數(shù)學(xué)綜合評價(jià)法。評價(jià)模型選取方式:通過闡述方法的特點(diǎn)和優(yōu)點(diǎn),分析選取。

    2??? 海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性評價(jià)要求

    為明確海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法的各個(gè)要素,包括篩選和確定評價(jià)指標(biāo),確定各評價(jià)指標(biāo)權(quán)重,建立單個(gè)指標(biāo)的評價(jià)標(biāo)準(zhǔn),建立綜合評價(jià)模型并劃分評價(jià)結(jié)果的等級數(shù)量界限,必須先明確海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性的評價(jià)要求,以該要求作為各個(gè)要素的選取或確定依據(jù)。本研究歸納海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性評價(jià)的要求如下。

    2.1??? 有效性

    應(yīng)可以有效地表征機(jī)構(gòu)質(zhì)量管理體系運(yùn)行得以支撐海洋觀測、海洋生態(tài)預(yù)警監(jiān)測、海洋防災(zāi)減災(zāi)和近海斷面調(diào)查等各項(xiàng)海洋調(diào)查觀測監(jiān)測任務(wù)的程度。

    2.2??? 客觀性

    應(yīng)強(qiáng)調(diào)客觀依據(jù),相對量化地得出評價(jià)結(jié)論,使評價(jià)結(jié)果較少地受到不同評價(jià)主體的主觀判斷的影響。

    2.3??? 全面性

    應(yīng)識別并考慮機(jī)構(gòu)質(zhì)量管理體系運(yùn)行影響任務(wù)開展的所有關(guān)鍵環(huán)節(jié)。其中,海洋檢驗(yàn)檢測機(jī)構(gòu)作為對社會出具公正數(shù)據(jù)的檢驗(yàn)檢測機(jī)構(gòu),須通過檢驗(yàn)檢測機(jī)構(gòu)資質(zhì)認(rèn)定(CMA),須根據(jù)RB/T 214—2017《檢驗(yàn)檢測機(jī)構(gòu)資質(zhì)認(rèn)定能力評價(jià)檢驗(yàn)檢測機(jī)構(gòu)通用要求》建立質(zhì)量管理體系,RB/T 214—2017對實(shí)驗(yàn)室質(zhì)量管理體系的要求則參照ISO/IEC 17025:2017《檢測和校準(zhǔn)實(shí)驗(yàn)室能力的通用要求》中對檢測實(shí)驗(yàn)室的要求給出,因此,建立的評價(jià)方法應(yīng)對檢測實(shí)驗(yàn)室質(zhì)量管理體系的人、機(jī)、料、法、環(huán)、測的所有環(huán)節(jié)進(jìn)行考慮。而ISO/IEC 17025:2017的質(zhì)量管理體系要求又根據(jù)ISO 9001:2015《質(zhì)量管理體系要求》給出,因此,建立的評價(jià)方法也應(yīng)考慮ISO 9001:2015中給出的質(zhì)量管理的7項(xiàng)原則,包括以顧客為關(guān)注焦點(diǎn)、領(lǐng)導(dǎo)作用、全員積極參與、過程方法、循證決策、改進(jìn)、關(guān)系管理。除此之外,還應(yīng)將海洋調(diào)查觀測監(jiān)測工作的特殊要求進(jìn)行全面的分析和考慮。

    2.4??? 系統(tǒng)性

    應(yīng)具有嚴(yán)謹(jǐn)有序的規(guī)則系統(tǒng),指標(biāo)層與指標(biāo)層之間、同層級指標(biāo)之間應(yīng)具有清晰的邏輯關(guān)系,系統(tǒng)地反映機(jī)構(gòu)質(zhì)量管理體系運(yùn)行的整體情況。

    2.5??? 可行性

    應(yīng)切實(shí)可行,具有一定的可操作性,考慮時(shí)間、空間的現(xiàn)實(shí)限制,具有實(shí)際運(yùn)用的基礎(chǔ)。

    2.6??? 可比性

    應(yīng)既可用于不同機(jī)構(gòu)間的橫向比較,又可用于同一個(gè)機(jī)構(gòu)不同時(shí)間的縱向比較,應(yīng)可服務(wù)于評價(jià)結(jié)果的動態(tài)可視。

    2.7??? 高效性

    應(yīng)兼顧效率,以海洋調(diào)查監(jiān)測觀測任務(wù)的關(guān)鍵點(diǎn)為導(dǎo)向,對機(jī)構(gòu)接受資質(zhì)認(rèn)定復(fù)查評審或監(jiān)督檢查時(shí)已反復(fù)關(guān)注的一些檢查內(nèi)容作出適當(dāng)精簡;通過建立的評價(jià)方法,評價(jià)主體可直觀、快速、便捷地得出評價(jià)結(jié)論。

    2.8??? 實(shí)用性

    應(yīng)功能多樣、應(yīng)用廣泛。一方面,可用于把握海洋任務(wù)事前、事中、事后的質(zhì)量表現(xiàn),可從評價(jià)結(jié)論直觀地看出各機(jī)構(gòu)質(zhì)量管理體系運(yùn)行在不同評價(jià)方面、不同環(huán)節(jié)和不同時(shí)間階段的表現(xiàn)情況,以供主管部門給出決策意見;另一方面,還應(yīng)為機(jī)構(gòu)自查形成診斷系統(tǒng),通過每次評價(jià)給出不同指標(biāo)所代表的方面的表現(xiàn)情況和橫縱向?qū)Ρ?,從而提出改進(jìn)的可能性等。

    3??? 海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法設(shè)計(jì)

    3.1??? 選定評價(jià)指標(biāo)

    不同的國內(nèi)外質(zhì)量管理評價(jià)指標(biāo)方法在選取評價(jià)指標(biāo)時(shí),大致可分為3種思路。一是根據(jù)評價(jià)的具體要求等分析選取指標(biāo);二是根據(jù)評價(jià)目的相對直接地選定;三是通過文獻(xiàn)分析等方法先盡量全面地選取能表征質(zhì)量管理表現(xiàn)的所有要素,再通過信度分析和效度分析等對特性不好的指標(biāo)進(jìn)行剔除。海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系有效性的綜合評價(jià)方法采取以下步驟選定評價(jià)指標(biāo)。

    3.1.1??? 第一步,明確指標(biāo)選取原則

    原則1:堅(jiān)持以海洋調(diào)查觀測監(jiān)測工作的特殊要求為導(dǎo)向,對國家市場監(jiān)管總局的資質(zhì)認(rèn)定復(fù)查換證評審或監(jiān)督檢查已反復(fù)關(guān)注的指標(biāo)進(jìn)行精簡。該原則體現(xiàn)評價(jià)要求中的有效性、高效性、實(shí)用性。

    原則2:應(yīng)具有一定代表性,覆蓋“人、機(jī)、料、法、環(huán)、測”等檢驗(yàn)檢測機(jī)構(gòu)運(yùn)行須關(guān)注的重點(diǎn)要素。該原則體現(xiàn)評價(jià)要求中的有效性、全面性。

    原則3:應(yīng)體現(xiàn)全面質(zhì)量管理,體現(xiàn)質(zhì)量管理的七大原則。該原則體現(xiàn)評價(jià)要求中的有效性、全面性。

    原則4:將觸碰資質(zhì)認(rèn)定罰責(zé)條款、涉及機(jī)構(gòu)執(zhí)行任務(wù)合法性和任務(wù)質(zhì)量驗(yàn)收結(jié)果等直接反映質(zhì)量管理體系運(yùn)行可否滿足海洋任務(wù)要求的指標(biāo),設(shè)置為一旦不滿足便直接輸出“0分”結(jié)果,以便第一時(shí)間引起注意。該原則體現(xiàn)評價(jià)要求中的有效性、全面性、實(shí)用性。

    原則5:應(yīng)選取機(jī)構(gòu)在實(shí)際中可被考量、可改變的要素,而不是機(jī)構(gòu)固有的、短期內(nèi)無法改變的要素。該原則體現(xiàn)評價(jià)要求中的可行性。

    原則6:應(yīng)選取近年來自然資源管理部門開展海洋檢驗(yàn)檢測機(jī)構(gòu)有關(guān)監(jiān)督檢查時(shí)給予特別關(guān)注的,并已具備一定檢查基礎(chǔ)和經(jīng)驗(yàn)的要素。該原則體現(xiàn)評價(jià)要求中的有效性、可行性。

    原則7:應(yīng)選取類似“甲方”為確?!耙曳健本邆渎男兴s定的服務(wù)內(nèi)容的能力所開展的第二方審核時(shí)所應(yīng)考量的要素。該原則體現(xiàn)評價(jià)方法應(yīng)具備的可行性,實(shí)用性。

    3.1.2??? 第二步,指標(biāo)分析和篩選

    參考國內(nèi)外質(zhì)量管理評價(jià)體系選取的評價(jià)指標(biāo),根據(jù)海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系有效性的綜合評價(jià)指標(biāo)的選取原則進(jìn)行分析和篩選。國內(nèi)外質(zhì)量管理評價(jià)指標(biāo)體系選取頻率最高的7類指標(biāo)如下。

    (1)最高管理層相關(guān)指標(biāo):由于該類指標(biāo)為機(jī)構(gòu)固有的、短期內(nèi)無法改變的要素,不滿足指標(biāo)的選取原則5,該類指標(biāo)可排除。

    (2)人員相關(guān)指標(biāo):滿足所有指標(biāo)選取原則,該類指標(biāo)應(yīng)納入考慮。

    (3)改進(jìn)相關(guān)指標(biāo):滿足所有指標(biāo)選取原則,該類指標(biāo)應(yīng)納入考慮。

    (4)質(zhì)量方針(戰(zhàn)略)和目標(biāo)相關(guān)指標(biāo):由于考察的是機(jī)構(gòu)對自身的要求,而不是機(jī)構(gòu)支撐海洋調(diào)查觀測監(jiān)測任務(wù)的能力,不滿足指標(biāo)的選取原則1,該類指標(biāo)可排除。

    (5)產(chǎn)品或服務(wù)相關(guān)指標(biāo):滿足所有指標(biāo)選取原則,該類指標(biāo)應(yīng)納入考慮。

    (6)顧客參與、反饋或滿意度相關(guān)指標(biāo):由于評價(jià)主體本身即為“顧客”(甲方),不滿足指標(biāo)的選取原則7,該類指標(biāo)可排除。

    (7)流程管理相關(guān)指標(biāo)(出現(xiàn)4次):滿足所有指標(biāo)選取原則,該類指標(biāo)應(yīng)納入考慮。

    3.1.3??? 第三步,選定評價(jià)指標(biāo)

    根據(jù)指標(biāo)的選取原則,選定的評價(jià)指標(biāo)分為一般指標(biāo)和“一票否決”指標(biāo)兩種,見表1。

    3.2??? 確定各指標(biāo)權(quán)重

    通過對比分析國內(nèi)外質(zhì)量管理有效性綜合評價(jià)方法,不同的國內(nèi)外質(zhì)量管理評價(jià)方法對各評價(jià)指標(biāo)進(jìn)行定權(quán)時(shí),最常采用的是基于層次分析法的定權(quán)方法。層次分析法是Saaty[21]1971—1975年為美國國防部開展應(yīng)急計(jì)劃問題研究時(shí)所提出的決策方法,具有較簡便地將定性問題定量化的優(yōu)點(diǎn),其定權(quán)過程是通過兩兩比較成對指標(biāo)的重要性,建立判斷矩陣,再通過解矩陣的特征值得到每個(gè)指標(biāo)的權(quán)重。

    本研究也將采用層次分析法,確定海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系有效性的一般指標(biāo)的權(quán)重(“一票否決”指標(biāo)無須確定權(quán)重)。層次分析法定權(quán)的一般步驟如下。

    第一步,構(gòu)造n×n的判斷矩陣。

    采用九級評分法,將一個(gè)元素相較于另一個(gè)元素的重要程度,以1~9的標(biāo)度進(jìn)行記錄,形成判斷矩陣。

    第二步,求解判斷矩陣。

    (1)計(jì)算判斷矩陣中每行元素的幾何平均數(shù):

    式中:a為判斷矩陣中每行所有元素。

    (2)對所得向量作歸一化處理:

    式中:CI為一致性指標(biāo)。

    得到權(quán)重向量:ω=(ω,ω,…,ω)。

    (3)求最大特征根λ:

    式中:A為判斷矩陣(a)。

    第三步,進(jìn)行一致性檢驗(yàn)。

    式中:CR為一致性比率,當(dāng)CR<0.10時(shí),認(rèn)為判斷矩陣具有一致性;RI為平均隨機(jī)一致性指標(biāo),通過查閱Saatty基于5萬次隨機(jī)試驗(yàn)得到的不同階次矩陣對應(yīng)的平均隨機(jī)一致性指標(biāo)值,可知當(dāng)矩陣階數(shù)為2時(shí)RI=0,階數(shù)為3時(shí)RI=0.52[22]。

    根據(jù)以上步驟,得出代表資源配置、實(shí)施過程和任務(wù)成效3個(gè)評價(jià)方面的3個(gè)元素的權(quán)重如表2所示。

    同理可得,代表3個(gè)評價(jià)方面對應(yīng)的6個(gè)評價(jià)指標(biāo)的權(quán)重ω分別為:ω=0.25,ω=0.75,ω=0.67,ω=0.33,ω=0.33,ω=0.67。

    由W=ω·ω,可得6個(gè)指標(biāo)的組合權(quán)重,見表3。

    3.3??? 確定各評價(jià)指標(biāo)的評價(jià)標(biāo)準(zhǔn)

    根據(jù)海洋質(zhì)量管理體系運(yùn)行有效性評價(jià)的實(shí)際目的,確定單個(gè)指標(biāo)評價(jià)等級和界限,提出評價(jià)標(biāo)準(zhǔn)的設(shè)置原則如下。

    原則1:應(yīng)界限分明,描述細(xì)致、明確、全面,避免不同人對同一機(jī)構(gòu)、同一時(shí)期的表現(xiàn)給出不同的評分。該原則體現(xiàn)評價(jià)要求中的有效性、系統(tǒng)性、客觀性、全面性。

    原則2:應(yīng)更注重是否做出了某些特定的質(zhì)量管理動作,而不是就質(zhì)量管理體系的機(jī)制設(shè)置(如機(jī)構(gòu)質(zhì)量管理體系文件的要求)進(jìn)行評判。該原則體現(xiàn)評價(jià)要求中的有效性、可行性、高效性。

    原則3:應(yīng)證據(jù)導(dǎo)向,遵循質(zhì)量管理的循證決策原則。該原則體現(xiàn)評價(jià)要求中的客觀性。

    原則4:應(yīng)方便、可測,便于通過簡單的證據(jù)判斷是否滿足要求。該原則體現(xiàn)評價(jià)要求中的可行性,高效性。

    原則5:應(yīng)支持基于目標(biāo)的診斷分析,構(gòu)筑一個(gè)診斷系統(tǒng),應(yīng)可就每次評價(jià)結(jié)果給出對應(yīng)6個(gè)指標(biāo)的實(shí)現(xiàn)情況和改進(jìn)的可能性。該原則體現(xiàn)評價(jià)要求中的實(shí)用性。

    根據(jù)上述原則,設(shè)置單個(gè)指標(biāo)的評價(jià)標(biāo)準(zhǔn)如以下幾個(gè)方面。

    3.3.1??? 一般評價(jià)指標(biāo)的評價(jià)標(biāo)準(zhǔn)

    (1)資源配置。評價(jià)指標(biāo)包括人員和設(shè)備。

    人員滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)參與任務(wù)人員全員具備相應(yīng)資質(zhì)或接受相應(yīng)培訓(xùn),機(jī)構(gòu)對其資質(zhì)或能力進(jìn)行了確認(rèn)等,評價(jià)細(xì)則為好(3分)。人員基本滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)參與任務(wù)人員少數(shù)不具備相應(yīng)資質(zhì)或接受的培訓(xùn)不充分,或機(jī)構(gòu)對人員的資質(zhì)或能力的確認(rèn)不完備,但認(rèn)為不會對任務(wù)實(shí)施造成實(shí)質(zhì)性影響等,評價(jià)細(xì)則為中(2分)。人員無法滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)參與任務(wù)人員普遍不具備相應(yīng)資質(zhì)或未接受相應(yīng)培訓(xùn),或機(jī)構(gòu)未對人員的資質(zhì)或能力進(jìn)行確認(rèn),認(rèn)為會對任務(wù)實(shí)施造成實(shí)質(zhì)性影響等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括參與任務(wù)人員資質(zhì)或培訓(xùn)記錄、能力確認(rèn)記錄等。

    設(shè)備滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)任務(wù)所用設(shè)備狀態(tài)正常,具備量值溯源方法的測量設(shè)備皆經(jīng)有效溯源,不具備量值溯源方法的設(shè)備經(jīng)比對并由經(jīng)機(jī)構(gòu)確認(rèn)等,通過期間核查和功能檢查等方式確保設(shè)備的穩(wěn)定可靠等,評價(jià)細(xì)則為好(3分)。設(shè)備基本滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)任務(wù)所用設(shè)備狀態(tài)正常,少數(shù)具備量值溯源方法的測量設(shè)備未采取最合理的溯源方式(如具備檢定規(guī)程但僅進(jìn)行校準(zhǔn)等),但認(rèn)為不會對任務(wù)實(shí)施造成實(shí)質(zhì)影響等,或不具備量值溯源方法的設(shè)備的比對方法未經(jīng)機(jī)構(gòu)確認(rèn)等,或未充分通過期間核查和功能檢查等方式確保設(shè)備的穩(wěn)定可靠等,評價(jià)細(xì)則為中(2 分)。設(shè)備無法滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)任務(wù)所用設(shè)備狀態(tài)無法支撐任務(wù)實(shí)施,測量設(shè)備未經(jīng)有效量值溯源或比對,認(rèn)為會對任務(wù)實(shí)施造成實(shí)質(zhì)影響等,或未實(shí)施任何形式的期間核查和功能檢查等方式確保設(shè)備能持續(xù)支撐任務(wù)實(shí)施等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括任務(wù)用設(shè)備(包括標(biāo)準(zhǔn)物質(zhì))量值溯源報(bào)告、比對報(bào)告、期間核查或功能檢查記錄等。

    (2)實(shí)施過程。評價(jià)指標(biāo)包括方法及其使用和質(zhì)量控制。

    方法及其使用滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)開展任務(wù)依據(jù)方法皆現(xiàn)行有效,經(jīng)查新發(fā)現(xiàn)的新方法或自制方法皆經(jīng)驗(yàn)證或確認(rèn)可行,相應(yīng)辦理方法變更或擴(kuò)項(xiàng),人員嚴(yán)格依據(jù)方法進(jìn)行抽樣、樣品儲存和運(yùn)輸、實(shí)驗(yàn)操作、數(shù)據(jù)處理、環(huán)境控制、安全防護(hù)等,或?qū)ζx已作出聲明,評價(jià)細(xì)則為好(3分)。方法及其使用基本滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)開展任務(wù)依據(jù)方法偶見失效,或經(jīng)查新發(fā)現(xiàn)的新方法或自制方法偶見未經(jīng)嚴(yán)格驗(yàn)證或確認(rèn)可行的情況,未及時(shí)辦理方法變更或擴(kuò)項(xiàng),或人員未嚴(yán)格依據(jù)方法進(jìn)行抽樣、樣品儲存和運(yùn)輸、實(shí)驗(yàn)操作、數(shù)據(jù)處理、環(huán)境控制、安全防護(hù)等且未作聲明,但認(rèn)為不會對任務(wù)實(shí)施造成實(shí)質(zhì)影響等,評價(jià)細(xì)則為中(2分)。方法及其使用無法滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)開展任務(wù)依據(jù)方法未經(jīng)查新,普遍存在失效情況,或新方法或自制方法普遍未經(jīng)驗(yàn)證或確認(rèn)便使用,未辦理方法變更或擴(kuò)項(xiàng)等,或人員未依據(jù)方法進(jìn)行抽樣、樣品儲存和運(yùn)輸、實(shí)驗(yàn)操作、數(shù)據(jù)處理、環(huán)境控制、安全防護(hù)等且未作聲明,認(rèn)為會對任務(wù)實(shí)施造成實(shí)質(zhì)影響等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括任務(wù)依據(jù)方法版本受控狀態(tài)、新方法驗(yàn)證自制方法確認(rèn)情況等。

    質(zhì)量控制滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)制定并實(shí)施了有效的內(nèi)部質(zhì)控措施,參加了要求的外部質(zhì)控或能力驗(yàn)證,結(jié)果為滿意等,評價(jià)細(xì)則為好(3分)。質(zhì)控基本滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)制定并實(shí)施了內(nèi)部質(zhì)控措施,未全然有效地支持實(shí)現(xiàn)任務(wù)的質(zhì)量要求,但認(rèn)為不會對任務(wù)實(shí)施造成實(shí)質(zhì)性影響等,或參加了要求的外部質(zhì)控或能力驗(yàn)證,結(jié)果不滿意、整改后達(dá)到要求等,評價(jià)細(xì)則為中(2分)。質(zhì)控?zé)o法滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)未制定或?qū)嵤┵|(zhì)控措施,或制定或?qū)嵤┑馁|(zhì)控措施完全無法支持實(shí)現(xiàn)任務(wù)的質(zhì)量要求,未參加要求的外部質(zhì)控或能力驗(yàn)證,或結(jié)果不滿意、整改后仍無法達(dá)到要求等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括內(nèi)部質(zhì)控記錄、數(shù)據(jù)校驗(yàn)和審核記錄、參加外部質(zhì)控或能力驗(yàn)證記錄等。

    (3)任務(wù)成效。評價(jià)指標(biāo)包括成果載體和改進(jìn)。

    成果載體滿足機(jī)構(gòu)提交海洋任務(wù)成果的要求,如(包括但不限于)原始記錄、工作日志、各類標(biāo)志、報(bào)告等格式版式受控并滿足成果提交要求,數(shù)據(jù)資料整編和歸檔形式、傳輸形式滿足成果提交要求等,評價(jià)細(xì)則為好(3分)。成果載體基本滿足機(jī)構(gòu)提交海洋任務(wù)成果的要求,但仍有缺陷,如(包括但不限于)原始記錄、工作日志、各類標(biāo)志、報(bào)告等格式版式未嚴(yán)格根據(jù)成果提交的要求受控,數(shù)據(jù)資料整編和歸檔形式、傳輸形式不完全滿足成果提交要求,但認(rèn)為不會對任務(wù)造成實(shí)質(zhì)性影響等,評價(jià)細(xì)則為中(2分)。成果載體無法滿足機(jī)構(gòu)提交海洋任務(wù)成果的要求,如(包括但不限于)原始記錄、工作日志、各類標(biāo)志、報(bào)告等格式版式普遍失控,數(shù)據(jù)資料整編和歸檔形式、傳輸形式普遍不滿足成果提交要求等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括任務(wù)原始記錄或報(bào)告格式板式等。

    采取的改進(jìn)措施滿足機(jī)構(gòu)更好完成該海洋任務(wù)的要求,如(包括但不限于)有效完成了外部檢查或外部質(zhì)控發(fā)現(xiàn)的問題的整改,通過內(nèi)審或管理評審等形式,對發(fā)現(xiàn)的問題進(jìn)行輸入,對機(jī)構(gòu)能更好承擔(dān)任務(wù)應(yīng)采取的措施作出輸出等,評價(jià)細(xì)則為好(3分)。采取的改進(jìn)措施基本滿足機(jī)構(gòu)更好完成該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)對外部檢查或外部質(zhì)控發(fā)現(xiàn)的問題的整改非完全有效,但認(rèn)為未對任務(wù)造成實(shí)質(zhì)性影響,或通過內(nèi)審或管理評審等形式,對發(fā)現(xiàn)的問題的輸入不充分,或?qū)C(jī)構(gòu)能更好承擔(dān)任務(wù)應(yīng)采取的措施的輸出不全然有效,但認(rèn)為不會對任務(wù)造成實(shí)質(zhì)性影響等,評價(jià)細(xì)則為中(2分)。未采取改進(jìn)措施,或采取的改進(jìn)措施無法滿足機(jī)構(gòu)更好完成該海洋任務(wù)的要求,如(包括但不限于)對外部檢查或外部質(zhì)控發(fā)現(xiàn)的問題未有效實(shí)施整改,或未通過內(nèi)審或管理評審等形式對發(fā)現(xiàn)的問題進(jìn)行輸入,或未對機(jī)構(gòu)能更好承擔(dān)任務(wù)應(yīng)采取的措施作出輸出等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括:內(nèi)審和管理評審計(jì)劃;制定和實(shí)施改進(jìn)措施的記錄;外部檢查或外部質(zhì)控發(fā)現(xiàn)問題整改記錄等。

    3.3.2??? “一票否決”評價(jià)指標(biāo)的評價(jià)標(biāo)準(zhǔn)

    “一票否決”指標(biāo)為如下幾方面。

    (1)機(jī)構(gòu)資質(zhì)合法性。評價(jià)細(xì)則Y=1,機(jī)構(gòu)處于資質(zhì)認(rèn)定有效期內(nèi),資質(zhì)范圍達(dá)到任務(wù)需要。評價(jià)細(xì)則Y=0,機(jī)構(gòu)未通過資質(zhì)認(rèn)定,或資質(zhì)已過期,或資質(zhì)范圍無法達(dá)到任務(wù)需要。評價(jià)時(shí)間:事前、事中。

    (2)數(shù)據(jù)真實(shí)性。評價(jià)細(xì)則Y=1,機(jī)構(gòu)不存在未經(jīng)檢驗(yàn)檢測或者以篡改數(shù)據(jù)、結(jié)果等方式,出具虛假檢驗(yàn)檢測數(shù)據(jù)、結(jié)果等情況。評價(jià)細(xì)則Y=0,機(jī)構(gòu)涉嫌未經(jīng)檢驗(yàn)檢測或者以篡改數(shù)據(jù)、結(jié)果等方式,出具虛假檢驗(yàn)檢測數(shù)據(jù)、結(jié)果等,如檢查能夠自動保存電子記錄或數(shù)據(jù)的儀器設(shè)備未發(fā)現(xiàn)任務(wù)數(shù)據(jù),或比較紙質(zhì)數(shù)據(jù)與電子存儲記錄發(fā)現(xiàn)偽造痕跡,或檢查電子存儲、紙質(zhì)數(shù)據(jù)和報(bào)告日期發(fā)現(xiàn)倒掛現(xiàn)象等。評價(jià)時(shí)間:事中、事后。

    (3)質(zhì)量驗(yàn)收結(jié)果。評價(jià)細(xì)則Y=1,在質(zhì)量驗(yàn)收階段通過外控樣等方式對機(jī)構(gòu)出具的結(jié)果進(jìn)行檢查或抽查,結(jié)果滿足要求。評價(jià)細(xì)則Y=0,在質(zhì)量驗(yàn)收階段通過外控樣等方式對機(jī)構(gòu)出具的結(jié)果進(jìn)行檢查或抽查,結(jié)果不滿足要求。評價(jià)時(shí)間:事后。

    3.4??? 確定評價(jià)模型

    不同的國內(nèi)外質(zhì)量管理評價(jià)方法通常采用直接選定的方式選取評價(jià)模型。以下對一些主流評價(jià)模型進(jìn)行簡單分析,對其是否可應(yīng)用于海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法進(jìn)行考量。

    直覺模糊法:該方法通過根據(jù)模糊數(shù)學(xué)的隸屬度理論把定性評價(jià)轉(zhuǎn)化為定量評價(jià),然而需要大量專家的參與,評價(jià)周期較長?;谠u價(jià)要求中的可行性、高效性原則予以排除。

    排序比較法(TOPSIS):該方法可通過求得某一評價(jià)結(jié)果與最優(yōu)評價(jià)結(jié)果的接近程度,然而評價(jià)結(jié)果很大程度上取決于每次參與評價(jià)機(jī)構(gòu)的總體表現(xiàn),且無法得到綜合得分?;谠u價(jià)要求中的可比性、實(shí)用性原則予以排除。

    灰色關(guān)聯(lián)分析法:通過找出評價(jià)體系中各級指標(biāo)之間的數(shù)值關(guān)系作出評價(jià)。然而,需要對各項(xiàng)指標(biāo)的最優(yōu)值進(jìn)行現(xiàn)行確定,主觀性過強(qiáng),同時(shí)部分指標(biāo)最優(yōu)值難以確定?;谠u價(jià)要求中的客觀性、可行性原則予以排除。

    加權(quán)累加法:對各評價(jià)指標(biāo)按其相對重要程度分配權(quán)重,再根據(jù)累加法累計(jì)總分,排出優(yōu)劣順序。當(dāng)評價(jià)標(biāo)準(zhǔn)的界限足夠分明、評價(jià)結(jié)果由小組討論一致得出時(shí),符合評價(jià)要求中的客觀性、可行性、可比性、高效性、實(shí)用性。

    其他定性描述的評價(jià):基于評價(jià)要求中的客觀性、可比性原則,予以排除。

    根據(jù)本評價(jià)方法的特性要求,本研究擬根據(jù)加權(quán)累加法建立評價(jià)模型。加權(quán)累加法具有計(jì)算簡單易行、過程直觀,評價(jià)重點(diǎn)突出的特點(diǎn),許多決策或評估方法,如著名的Rosenberg-Fishbein態(tài)度量測模型[23],都以該方法為基礎(chǔ)。加權(quán)累加法的基礎(chǔ)表達(dá)式如下:

    式中:R為被評價(jià)機(jī)構(gòu)所得總分;S為被評價(jià)機(jī)構(gòu)在第i個(gè)一般指標(biāo)下的得分;W為第i個(gè)指標(biāo)的權(quán)重;m為一般指標(biāo)的總數(shù)。

    為了引入“一票否決”指標(biāo),使當(dāng)機(jī)構(gòu)無法滿足資質(zhì)合法性、數(shù)據(jù)真實(shí)性、質(zhì)量驗(yàn)收結(jié)果這些直接表征質(zhì)量管理體系運(yùn)行是否有效支撐海洋任務(wù)要求的指標(biāo)時(shí),直接輸出“0分”結(jié)果,以第一時(shí)間引起上級部門注意,在式(6)中添加連乘系數(shù)Y,如下:

    式中:Y為被評價(jià)機(jī)構(gòu)在第i個(gè)“一票否決”指標(biāo)下的得分;n為“一票否決”指標(biāo)的總數(shù)。

    由此,便可通過該模型,得出各機(jī)構(gòu)的評價(jià)得分,并依據(jù)得分對各機(jī)構(gòu)質(zhì)量管理體系的有效性進(jìn)行等級的確定。

    3.5??? 確定評價(jià)結(jié)果的等級數(shù)量界限

    劃分海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性的綜合評價(jià)結(jié)果等級如表4所示。其中,在“一票否決”指標(biāo)不出現(xiàn)得分為0分的情況下:當(dāng)一般指標(biāo)最多出現(xiàn)2個(gè)得分低至1分,或最多出現(xiàn)4個(gè)得分低至2分時(shí),被評價(jià)海洋檢驗(yàn)檢測機(jī)構(gòu)的評價(jià)等級可達(dá)到“好”;在無法達(dá)到“好”的情況下,當(dāng)一般指標(biāo)最多出現(xiàn)4個(gè)得分低至1分,或全部6個(gè)得分低至2分時(shí),被評價(jià)海洋檢驗(yàn)檢測機(jī)構(gòu)的評價(jià)等級可達(dá)到“中”;在無法達(dá)到“中”的情況下,被評價(jià)海洋檢驗(yàn)檢測機(jī)構(gòu)的評價(jià)等級為“差”,此時(shí)至少有5個(gè)一般指標(biāo)得分低至1分。而當(dāng)任意一個(gè)“一票否決”指標(biāo)得分出現(xiàn)0分時(shí),被評價(jià)海洋檢驗(yàn)檢測機(jī)構(gòu)的評價(jià)等級為“?!?。

    4??? 評價(jià)示例

    為了體現(xiàn)評價(jià)方法的實(shí)用性,根據(jù)海洋調(diào)查觀測監(jiān)測任務(wù)的一般流程,本研究給出一種使用建立綜合評價(jià)方法進(jìn)行評價(jià)的流程范例(圖1)。根據(jù)該范例,可在海洋調(diào)查觀測監(jiān)測任務(wù)的事前、事中、事后3個(gè)階段對海洋檢驗(yàn)檢測機(jī)構(gòu)進(jìn)行3次評價(jià)。除此之外,該評價(jià)方法為同一機(jī)構(gòu)的經(jīng)年質(zhì)量提升情況、某一評價(jià)指標(biāo)下不同機(jī)構(gòu)的整體表現(xiàn)情況、機(jī)構(gòu)自我診斷等各種評價(jià)情景提供參考。

    5??? 結(jié)論與展望

    在全面加強(qiáng)自然資源調(diào)查觀測監(jiān)測質(zhì)量管理的大背景下,海洋檢驗(yàn)檢測的數(shù)據(jù)質(zhì)量引起大量關(guān)注,相關(guān)管理制度不斷完善,但對海洋檢驗(yàn)檢測機(jī)構(gòu)的質(zhì)量管理體系有效支撐海洋調(diào)查觀測監(jiān)測任務(wù)的程度的評價(jià)方法仍存在大量研究空間。本研究以國內(nèi)外質(zhì)量管理體系綜合評價(jià)方法的評價(jià)指標(biāo)、定權(quán)方法和評價(jià)模型為參考,以海洋檢驗(yàn)檢測質(zhì)量管理體系運(yùn)行有效性的評價(jià)要求為評價(jià)指標(biāo)、

    評價(jià)模型的選取依據(jù)和評價(jià)標(biāo)準(zhǔn)的確定依據(jù),創(chuàng)新性地引入了“一票否決”指標(biāo),通過層次分析法確定各指標(biāo)權(quán)重,初步構(gòu)建了海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系的綜合評價(jià)方法,并提供了建議的評價(jià)流程。該方法一方面服務(wù)于海洋調(diào)查觀測監(jiān)測任務(wù)的全過程質(zhì)量控制,可供評價(jià)者直觀、客觀地得出各海洋檢驗(yàn)檢測機(jī)構(gòu)的質(zhì)量管理體系運(yùn)行在不同評價(jià)方面和不同時(shí)間階段的表現(xiàn)情況,并分析對比形成決策意見;另一方面注重可操作性和效率,以海洋調(diào)查觀測監(jiān)測任務(wù)的特殊要求為導(dǎo)向,對機(jī)構(gòu)接受資質(zhì)認(rèn)定能力評審的過程中已反復(fù)關(guān)注的一些檢查內(nèi)容作出適當(dāng)精簡,著眼于海洋調(diào)查觀測監(jiān)測任務(wù)的策劃、實(shí)施和驗(yàn)收過程中實(shí)際存在的各類風(fēng)險(xiǎn)點(diǎn)。

    綜合評價(jià)方法在建立后,應(yīng)根據(jù)具體實(shí)踐進(jìn)行考察、修改及完善[9]。鑒于在海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系評價(jià)方面的歷史記錄積累較少,評價(jià)對象較為分散,本研究提出的綜合評價(jià)方法可在更廣泛的應(yīng)用后,更為充分地收集改進(jìn)的數(shù)據(jù),以進(jìn)一步進(jìn)行細(xì)化或優(yōu)化。

    參考文獻(xiàn)

    [1]李雪,劉長發(fā),朱學(xué)慧,等.基于BP人工神經(jīng)網(wǎng)絡(luò)的海水水質(zhì)綜合評價(jià)[J].海洋通報(bào),2010(2):225-230.

    [2]廖國祥,劉夢琪,劉長安,等.海洋保護(hù)區(qū)生態(tài)風(fēng)險(xiǎn)綜合評價(jià)方法初步研究:以濱州貝殼堤島與濕地國家級自然保護(hù)區(qū)為例[J].海洋開發(fā)與管理,2015,32(10):59-65.

    [3]張明慧,孫昭晨,梁書秀,等.砂質(zhì)海岸整治修復(fù)效果模糊綜合評價(jià)研究:以營口月亮灣為例[J].海洋通報(bào),2019(6):698-706.

    [4]柯麗娜,王權(quán)明,李永化,等.基于可變模糊集理論的海島可持續(xù)發(fā)展評價(jià)模型:以遼寧省長??h為例[J].自然資源學(xué)報(bào),2013,28(5):12.

    [5]吳曉祥,張效莉.我國海洋漁業(yè)產(chǎn)業(yè)國際競爭力評價(jià)研究:基于AHP—模糊綜合評價(jià)方法[J].海洋開發(fā)與管理,2019,36(1):98-106.

    [6]高磊,張蒙蒙,曹蜻,等.基于PSR框架的中國海洋垃圾狀況綜合評價(jià)方法研究[J].海洋開發(fā)與管理,2016,33(9):70-74.

    [7]朱士兵,李志強(qiáng).鄉(xiāng)村海灘旅游資源質(zhì)量評價(jià)的建立:以雷州半島為例[J].海洋通報(bào),2019(5):519-526.

    [8]狄乾斌,高群.遼寧省海洋經(jīng)濟(jì)發(fā)展質(zhì)量綜合評價(jià)研究[J].海洋開發(fā)與管理,2015,32(11):74-78.

    [9]孫振球,徐勇勇.醫(yī)學(xué)統(tǒng)計(jì)學(xué)(第4版)[M].北京:人民衛(wèi)生出版社,2019.

    [10] SARAPH J V,BENSON P G,SCHROEDER R G.An instru-ment for measuring the critical factors of quality management [J].Decision sciences,1989,20(4):810-829.

    [11] Badri M A,DAVIS D,DAVIS D,A study of measuring the critical factors of quality management [J]. International Journal of Quality & Reliability Management,1995,12(2):36-53.

    [12] FLYNN B B,SCHROEDER R G,SAKAKIBARA S A. framework for quality management research and an associated measurement instrument [J].Journal of Operations manage-ment,1994,11(4):339-366.

    [13]韓福榮,蔡溪平,錢雷.質(zhì)量體系有效性評價(jià)理論和方法研究[J].北京工業(yè)大學(xué)學(xué)報(bào),1998,24(S1):21-26.

    [14]韓福榮,郝進(jìn).質(zhì)量管理體系有效性綜合評價(jià)模型[J].北京工業(yè)大學(xué)學(xué)報(bào),2000,26(3):120-124.

    [15]楊理琴.軟件企業(yè)質(zhì)量管理體系有效性評價(jià)與對策研究[J].成都:成都理工大學(xué),2008.

    [16]郭子雪,張強(qiáng).質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)[J].北京理工大學(xué)學(xué)報(bào),2009,29(6):560-564.

    [17]余崇林.政府部門ISO9000質(zhì)量管理體系有效性評價(jià)研究[J].濟(jì)南:山東大學(xué),2012.

    [18] Deming Prize Committee. Introduce of the Deming Prize,2019.[EB/OL].[2020-04-20].http://www.juse.or.jp/up- load/files/DP_Introduction_of_the_Deming_Prize_ v201901.pdf

    [19]Baldrige Performance Excellence Program. The Metrology of OrganizationalPerformance:How Baldrige Standards Have Become the Common Language for Organizational Excellence Around the World [EB/OL].(2015-07-06)[2020-11- 01].https://www.nist.gov/system/files/documents/baldrige/The-Metrology-of-Organizational-Performance-World-Stand- ard-Day-Paper-July-6-2015.pdf

    [20]EFQM.The EFQM Model [EB/OL].(2019-11-13)[2020-04-20].https://www.efqm.org/index.php/efqm-model/download-your-free-short-copy-of-the-efqm-model/

    [21] SAATY T L.The Analytic Hierarchy Process for Decision in a Complex World [J]. Energy Policy,1980,32(10):1151-1158.

    [22] SAATY T L. Relative measurement and its generalization in decision making why pairwise comparisons are centralin mathematics for the measurement of intangible factors the analytic hierarchy/network process[J].Revista De La Real Academia De Ciencias Exactas Fisicas Y Naturales. Serie A. Matematicas,2008,102(2):251-318.

    [23] MAZIS M B.AHTOLA O T,EUGENE K R.A comparison of fourmulti-attribute models in the prediction of consumer attitudes[J].Journal of Consumer Research,1975,2(1):38-52.

    猜你喜歡
    質(zhì)量管理體系
    淺談中小型企業(yè)質(zhì)量管理體系的演進(jìn)與創(chuàng)新
    基于卓越績效模式的MBA教育質(zhì)量管理體系研究
    東方教育(2016年21期)2017-01-17 20:18:24
    質(zhì)量管理體系在測繪產(chǎn)品質(zhì)量控制中的應(yīng)用
    計(jì)量工作中提高質(zhì)量管理體系的有效性
    淺談輸變電施工企業(yè)質(zhì)量管理體系的發(fā)展
    基于ISO9001:2015質(zhì)量管理體系開放實(shí)驗(yàn)室管理與探索
    質(zhì)量量度在國內(nèi)藥品生產(chǎn)企業(yè)中的應(yīng)用
    船舶行業(yè)質(zhì)量管理信息化平臺的研究與建設(shè)
    企業(yè)質(zhì)量管理體系有效性研究
    商情(2016年39期)2016-11-21 09:12:17
    軍工企業(yè)實(shí)施質(zhì)量管理體系有效性研究
    我要看黄色一级片免费的| 青青草视频在线视频观看| 啦啦啦在线观看免费高清www| 久久久久视频综合| 最近最新中文字幕免费大全7| 老司机影院毛片| 国产一区二区三区综合在线观看 | 欧美日韩视频精品一区| 国产黄色免费在线视频| 久久这里只有精品19| 又粗又硬又长又爽又黄的视频| 午夜久久久在线观看| 免费久久久久久久精品成人欧美视频 | 你懂的网址亚洲精品在线观看| 免费高清在线观看视频在线观看| www.色视频.com| 色哟哟·www| 日日摸夜夜添夜夜爱| 99久久精品国产国产毛片| 欧美精品亚洲一区二区| 亚洲国产欧美日韩在线播放| 老熟女久久久| 精品视频人人做人人爽| 精品少妇黑人巨大在线播放| 成人亚洲欧美一区二区av| av网站免费在线观看视频| 哪个播放器可以免费观看大片| 欧美bdsm另类| 五月玫瑰六月丁香| av免费在线看不卡| 国产一区二区在线观看av| 亚洲av.av天堂| 只有这里有精品99| 男人操女人黄网站| 免费在线观看黄色视频的| 亚洲伊人久久精品综合| 久久久精品94久久精品| 精品卡一卡二卡四卡免费| videossex国产| www日本在线高清视频| 国产无遮挡羞羞视频在线观看| 国产深夜福利视频在线观看| 青春草视频在线免费观看| 看免费成人av毛片| 精品福利永久在线观看| 99热国产这里只有精品6| 97在线视频观看| 久久久久久久精品精品| 啦啦啦中文免费视频观看日本| 亚洲四区av| 三上悠亚av全集在线观看| 久久毛片免费看一区二区三区| 捣出白浆h1v1| 欧美xxⅹ黑人| 亚洲色图 男人天堂 中文字幕 | 久久国内精品自在自线图片| 欧美亚洲日本最大视频资源| 男女无遮挡免费网站观看| 欧美人与善性xxx| 人人妻人人澡人人爽人人夜夜| 免费女性裸体啪啪无遮挡网站| 欧美人与性动交α欧美精品济南到 | 90打野战视频偷拍视频| 两性夫妻黄色片 | 美女视频免费永久观看网站| 久久这里有精品视频免费| 99国产综合亚洲精品| 日本午夜av视频| 精品一区在线观看国产| www日本在线高清视频| 伊人久久国产一区二区| 国产在线视频一区二区| 亚洲一区二区三区欧美精品| 在线观看三级黄色| 久久午夜福利片| 飞空精品影院首页| 免费看不卡的av| 午夜福利网站1000一区二区三区| 天天操日日干夜夜撸| 在线观看国产h片| 国产又爽黄色视频| 自线自在国产av| 亚洲精品456在线播放app| 男女国产视频网站| av播播在线观看一区| 国产极品天堂在线| av在线app专区| 日韩 亚洲 欧美在线| av免费在线看不卡| 欧美精品亚洲一区二区| 男男h啪啪无遮挡| 亚洲av电影在线观看一区二区三区| 国产视频首页在线观看| 我的女老师完整版在线观看| 免费播放大片免费观看视频在线观看| av片东京热男人的天堂| 日本色播在线视频| 伊人亚洲综合成人网| 国产熟女欧美一区二区| 亚洲激情五月婷婷啪啪| 99热国产这里只有精品6| 我的女老师完整版在线观看| 男人操女人黄网站| 免费在线观看完整版高清| 久久久久久伊人网av| 国产极品天堂在线| 熟女电影av网| 欧美变态另类bdsm刘玥| 日本欧美视频一区| 97人妻天天添夜夜摸| 中文字幕av电影在线播放| 国产麻豆69| 少妇被粗大猛烈的视频| 少妇人妻 视频| 精品一区二区免费观看| 丝袜人妻中文字幕| 夜夜爽夜夜爽视频| 国产色婷婷99| av在线app专区| 免费黄网站久久成人精品| 在线观看人妻少妇| 久久鲁丝午夜福利片| 男女啪啪激烈高潮av片| 亚洲伊人久久精品综合| 人人妻人人添人人爽欧美一区卜| 黄色视频在线播放观看不卡| 亚洲欧美清纯卡通| 九色成人免费人妻av| 亚洲国产精品一区三区| 99热网站在线观看| 国产精品偷伦视频观看了| 亚洲三级黄色毛片| 国产亚洲av片在线观看秒播厂| 久久婷婷青草| 自线自在国产av| 久久久久国产精品人妻一区二区| 超碰97精品在线观看| 久久精品久久久久久久性| 亚洲国产欧美日韩在线播放| 97精品久久久久久久久久精品| 丝袜人妻中文字幕| 亚洲婷婷狠狠爱综合网| 伦理电影免费视频| 欧美另类一区| 亚洲欧洲国产日韩| 国产成人91sexporn| 一级毛片电影观看| 亚洲国产av新网站| 精品人妻偷拍中文字幕| 国产精品成人在线| 欧美日韩成人在线一区二区| 国产福利在线免费观看视频| 亚洲,欧美,日韩| 欧美日韩av久久| 亚洲国产av新网站| 亚洲综合色惰| 精品久久国产蜜桃| 中国国产av一级| 亚洲av.av天堂| 精品亚洲成a人片在线观看| 99热6这里只有精品| 国产精品女同一区二区软件| 搡老乐熟女国产| 欧美性感艳星| 狂野欧美激情性xxxx在线观看| 七月丁香在线播放| 满18在线观看网站| 午夜av观看不卡| 欧美日韩成人在线一区二区| 午夜福利网站1000一区二区三区| 伦精品一区二区三区| 久久久欧美国产精品| 免费在线观看完整版高清| 亚洲国产精品国产精品| 午夜精品国产一区二区电影| 蜜桃国产av成人99| 色婷婷久久久亚洲欧美| 97精品久久久久久久久久精品| 丰满少妇做爰视频| 韩国高清视频一区二区三区| 亚洲欧美色中文字幕在线| 欧美变态另类bdsm刘玥| 午夜影院在线不卡| 午夜免费男女啪啪视频观看| 99热全是精品| 精品国产乱码久久久久久小说| av又黄又爽大尺度在线免费看| 久久 成人 亚洲| 大香蕉97超碰在线| 丝袜在线中文字幕| 久久这里有精品视频免费| 亚洲成人av在线免费| 国产一区二区三区av在线| 日韩伦理黄色片| 极品人妻少妇av视频| 爱豆传媒免费全集在线观看| 午夜影院在线不卡| 欧美人与善性xxx| 欧美精品一区二区大全| 看非洲黑人一级黄片| 国国产精品蜜臀av免费| 免费日韩欧美在线观看| 国产日韩欧美亚洲二区| 在线天堂中文资源库| 免费观看av网站的网址| 男女啪啪激烈高潮av片| 在线观看三级黄色| 日日爽夜夜爽网站| 如何舔出高潮| 亚洲国产日韩一区二区| 99香蕉大伊视频| 亚洲色图综合在线观看| 亚洲精品456在线播放app| 深夜精品福利| 超色免费av| 99久久中文字幕三级久久日本| 精品酒店卫生间| 国产一区二区在线观看日韩| 男女国产视频网站| 美女视频免费永久观看网站| 日韩,欧美,国产一区二区三区| 人成视频在线观看免费观看| 国产国语露脸激情在线看| 我要看黄色一级片免费的| 亚洲精品久久成人aⅴ小说| 亚洲精品久久久久久婷婷小说| 免费观看无遮挡的男女| 丁香六月天网| 大话2 男鬼变身卡| 五月玫瑰六月丁香| 精品国产国语对白av| 高清毛片免费看| 日本免费在线观看一区| 国产成人91sexporn| 9191精品国产免费久久| 在线免费观看不下载黄p国产| 美女中出高潮动态图| 欧美激情国产日韩精品一区| av播播在线观看一区| 国产精品欧美亚洲77777| 精品卡一卡二卡四卡免费| 国产精品久久久久久久久免| 午夜视频国产福利| 熟女人妻精品中文字幕| a级毛色黄片| 一区二区日韩欧美中文字幕 | xxx大片免费视频| 51国产日韩欧美| 亚洲成av片中文字幕在线观看 | 男人操女人黄网站| 最后的刺客免费高清国语| 又黄又爽又刺激的免费视频.| 一级片免费观看大全| 中文精品一卡2卡3卡4更新| 国语对白做爰xxxⅹ性视频网站| 国产精品麻豆人妻色哟哟久久| 91午夜精品亚洲一区二区三区| 久久久久久久精品精品| 精品人妻一区二区三区麻豆| 交换朋友夫妻互换小说| 免费av中文字幕在线| 国产亚洲一区二区精品| 国产成人精品福利久久| 国产国语露脸激情在线看| 精品少妇内射三级| 免费黄色在线免费观看| 少妇人妻久久综合中文| 国产亚洲午夜精品一区二区久久| 水蜜桃什么品种好| 国产精品麻豆人妻色哟哟久久| 国产精品一区二区在线观看99| 国产精品国产三级国产av玫瑰| 中文乱码字字幕精品一区二区三区| 国产精品久久久av美女十八| 91精品三级在线观看| 亚洲精品,欧美精品| 国产综合精华液| 国产精品久久久久久精品电影小说| 涩涩av久久男人的天堂| 午夜福利,免费看| 免费观看av网站的网址| 久久久久久久精品精品| 人人澡人人妻人| 99热6这里只有精品| 少妇的逼水好多| 欧美最新免费一区二区三区| 18禁裸乳无遮挡动漫免费视频| 丝袜脚勾引网站| 国产男女超爽视频在线观看| 精品亚洲成国产av| 高清黄色对白视频在线免费看| 男女边吃奶边做爰视频| 97精品久久久久久久久久精品| 欧美97在线视频| 久久免费观看电影| 国产片内射在线| 免费播放大片免费观看视频在线观看| 在线天堂最新版资源| 国产精品 国内视频| 一级毛片 在线播放| 夜夜骑夜夜射夜夜干| 国产精品麻豆人妻色哟哟久久| 欧美精品一区二区大全| 97在线视频观看| 日韩 亚洲 欧美在线| 少妇被粗大的猛进出69影院 | 美女主播在线视频| 国产精品三级大全| 少妇熟女欧美另类| 久久精品人人爽人人爽视色| 婷婷色麻豆天堂久久| 视频中文字幕在线观看| 九九爱精品视频在线观看| 人人妻人人澡人人爽人人夜夜| 美女国产视频在线观看| 亚洲精品国产av成人精品| 成年女人在线观看亚洲视频| 中文天堂在线官网| 自拍欧美九色日韩亚洲蝌蚪91| 国产免费视频播放在线视频| 国产日韩欧美在线精品| 精品国产一区二区三区久久久樱花| 一区二区av电影网| 欧美日韩av久久| 看免费成人av毛片| 久久精品久久久久久噜噜老黄| 一二三四中文在线观看免费高清| 老女人水多毛片| 国产黄色免费在线视频| 国产精品久久久久久av不卡| 国产又爽黄色视频| 亚洲精品日韩在线中文字幕| 久久久久久久精品精品| 涩涩av久久男人的天堂| 街头女战士在线观看网站| 咕卡用的链子| 国产又色又爽无遮挡免| av片东京热男人的天堂| 国产精品99久久99久久久不卡 | 韩国精品一区二区三区 | 亚洲国产最新在线播放| 亚洲,欧美,日韩| 国产精品免费大片| 成年av动漫网址| 亚洲精品自拍成人| 日日摸夜夜添夜夜爱| 男人添女人高潮全过程视频| av免费观看日本| 下体分泌物呈黄色| 国产精品.久久久| 校园人妻丝袜中文字幕| 国产精品国产av在线观看| 极品人妻少妇av视频| 亚洲精品中文字幕在线视频| 亚洲精品aⅴ在线观看| 高清不卡的av网站| 两个人免费观看高清视频| 日韩中字成人| 国产老妇伦熟女老妇高清| 久久精品国产亚洲av天美| a级毛片黄视频| 成人午夜精彩视频在线观看| 国产麻豆69| 久久久久国产精品人妻一区二区| 少妇精品久久久久久久| 国产男女超爽视频在线观看| 国产亚洲最大av| 欧美 亚洲 国产 日韩一| av播播在线观看一区| 亚洲欧洲国产日韩| 亚洲精品国产av成人精品| 久久久精品免费免费高清| 成人黄色视频免费在线看| 两个人看的免费小视频| 中文字幕制服av| 18在线观看网站| 国产片特级美女逼逼视频| 国产精品一区二区在线观看99| 色视频在线一区二区三区| 国产午夜精品一二区理论片| 日本vs欧美在线观看视频| 亚洲精品中文字幕在线视频| 边亲边吃奶的免费视频| 丝袜美足系列| 91成人精品电影| 男的添女的下面高潮视频| 97在线视频观看| 中文字幕亚洲精品专区| videosex国产| 欧美日韩成人在线一区二区| 卡戴珊不雅视频在线播放| 日韩视频在线欧美| 成人国语在线视频| 飞空精品影院首页| 母亲3免费完整高清在线观看 | 只有这里有精品99| 丝袜脚勾引网站| 免费观看av网站的网址| 久久国产亚洲av麻豆专区| 色5月婷婷丁香| 多毛熟女@视频| 亚洲国产毛片av蜜桃av| 草草在线视频免费看| 侵犯人妻中文字幕一二三四区| 欧美xxⅹ黑人| 一二三四中文在线观看免费高清| 日韩成人伦理影院| 精品一区二区免费观看| 亚洲精品日本国产第一区| 国产高清国产精品国产三级| 黄色怎么调成土黄色| 亚洲丝袜综合中文字幕| 国产精品秋霞免费鲁丝片| 麻豆精品久久久久久蜜桃| 你懂的网址亚洲精品在线观看| xxxhd国产人妻xxx| 另类亚洲欧美激情| 99久久中文字幕三级久久日本| 亚洲精品日本国产第一区| 看免费成人av毛片| 国产片内射在线| 亚洲少妇的诱惑av| 亚洲精品自拍成人| 一本久久精品| 18禁国产床啪视频网站| 国产成人精品无人区| 亚洲色图综合在线观看| 亚洲三级黄色毛片| 免费观看a级毛片全部| 日韩 亚洲 欧美在线| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 欧美xxxx性猛交bbbb| 中文字幕人妻丝袜制服| av卡一久久| 高清视频免费观看一区二区| 七月丁香在线播放| 黄色 视频免费看| a级毛片在线看网站| 久久精品国产综合久久久 | 人妻人人澡人人爽人人| 亚洲av欧美aⅴ国产| 少妇 在线观看| 如日韩欧美国产精品一区二区三区| 在线观看www视频免费| 最新中文字幕久久久久| 丝袜喷水一区| 日韩大片免费观看网站| 中文字幕免费在线视频6| 亚洲精品久久久久久婷婷小说| av女优亚洲男人天堂| 色网站视频免费| 久久青草综合色| 亚洲第一av免费看| 亚洲国产看品久久| 亚洲成av片中文字幕在线观看 | 国产免费福利视频在线观看| 青春草亚洲视频在线观看| 在线观看免费视频网站a站| 欧美精品国产亚洲| 免费少妇av软件| 国产国拍精品亚洲av在线观看| 成年动漫av网址| 各种免费的搞黄视频| 内地一区二区视频在线| 91aial.com中文字幕在线观看| 欧美精品亚洲一区二区| 亚洲欧美一区二区三区黑人 | 日本欧美国产在线视频| 国产精品.久久久| 看免费av毛片| 亚洲 欧美一区二区三区| 国产在线一区二区三区精| 亚洲熟女精品中文字幕| 秋霞在线观看毛片| 中文天堂在线官网| 亚洲情色 制服丝袜| 午夜福利,免费看| 9色porny在线观看| 欧美人与善性xxx| 国产精品女同一区二区软件| 日韩电影二区| 免费久久久久久久精品成人欧美视频 | 欧美亚洲 丝袜 人妻 在线| av国产久精品久网站免费入址| 国产精品一区二区在线观看99| 99久久综合免费| 美女脱内裤让男人舔精品视频| 午夜91福利影院| 大陆偷拍与自拍| 人妻人人澡人人爽人人| 国产熟女欧美一区二区| 好男人视频免费观看在线| 18+在线观看网站| 九色成人免费人妻av| 少妇精品久久久久久久| 午夜av观看不卡| 久久久久精品性色| 插逼视频在线观看| av在线播放精品| 精品视频人人做人人爽| 精品国产一区二区久久| 国产无遮挡羞羞视频在线观看| 亚洲精品乱码久久久久久按摩| 色婷婷久久久亚洲欧美| 插逼视频在线观看| 日韩欧美精品免费久久| 久久精品人人爽人人爽视色| 最近中文字幕高清免费大全6| 午夜福利,免费看| 精品一区在线观看国产| 欧美97在线视频| 又粗又硬又长又爽又黄的视频| 午夜福利视频在线观看免费| 国产国语露脸激情在线看| 国产日韩欧美视频二区| 久久99精品国语久久久| 亚洲精品第二区| 这个男人来自地球电影免费观看 | 国产亚洲午夜精品一区二区久久| 在线天堂中文资源库| 国产精品熟女久久久久浪| 免费高清在线观看视频在线观看| 中文字幕制服av| 高清av免费在线| www.av在线官网国产| 婷婷色综合www| 国产黄色免费在线视频| 极品少妇高潮喷水抽搐| 免费av中文字幕在线| 国产免费现黄频在线看| 在线免费观看不下载黄p国产| 亚洲国产av影院在线观看| 欧美变态另类bdsm刘玥| 少妇猛男粗大的猛烈进出视频| 男的添女的下面高潮视频| 狠狠精品人妻久久久久久综合| 大码成人一级视频| 免费大片黄手机在线观看| 亚洲av免费高清在线观看| 波多野结衣一区麻豆| 97在线人人人人妻| 激情五月婷婷亚洲| 最近中文字幕2019免费版| 国产乱来视频区| 成人国语在线视频| 99re6热这里在线精品视频| 老司机亚洲免费影院| av网站免费在线观看视频| 侵犯人妻中文字幕一二三四区| 91国产中文字幕| 成人无遮挡网站| 熟妇人妻不卡中文字幕| 99视频精品全部免费 在线| 最近最新中文字幕免费大全7| 乱人伦中国视频| 少妇人妻 视频| 亚洲国产毛片av蜜桃av| 日本猛色少妇xxxxx猛交久久| 两个人免费观看高清视频| 91在线精品国自产拍蜜月| 亚洲人成77777在线视频| av不卡在线播放| 中文天堂在线官网| 亚洲精品456在线播放app| 日本wwww免费看| 高清在线视频一区二区三区| 婷婷色综合大香蕉| 久久精品国产a三级三级三级| 精品国产一区二区久久| 精品亚洲成国产av| www.熟女人妻精品国产 | 男女下面插进去视频免费观看 | 亚洲精品,欧美精品| 午夜福利影视在线免费观看| 香蕉丝袜av| 狂野欧美激情性bbbbbb| 亚洲av日韩在线播放| 韩国av在线不卡| 欧美精品一区二区免费开放| 亚洲精品国产av蜜桃| 99久久中文字幕三级久久日本| 天天影视国产精品| 少妇的逼好多水| 亚洲国产精品999| 毛片一级片免费看久久久久| 午夜福利网站1000一区二区三区| 水蜜桃什么品种好| 街头女战士在线观看网站| 熟妇人妻不卡中文字幕| 亚洲国产av影院在线观看| 国产精品久久久av美女十八| 中文精品一卡2卡3卡4更新| 中文字幕免费在线视频6| 草草在线视频免费看| 老女人水多毛片| 一级a做视频免费观看| 国产一区二区激情短视频 | 一级片免费观看大全| 国产日韩欧美视频二区| 国产熟女午夜一区二区三区| 久久久久久人妻| 国产成人91sexporn| 精品人妻一区二区三区麻豆| 成人影院久久| 国产欧美亚洲国产| 久久精品国产综合久久久 | 9热在线视频观看99| 午夜日本视频在线| 中文字幕亚洲精品专区| 少妇的逼好多水| 欧美变态另类bdsm刘玥| av在线播放精品| 香蕉丝袜av| 99热6这里只有精品| 男女边摸边吃奶|