• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    德爾菲法及其構(gòu)建指標(biāo)體系的應(yīng)用進(jìn)展

    2016-09-02 06:22:57王少娜3綜述賈賢杰審校
    關(guān)鍵詞:德爾菲指標(biāo)體系意見

    王少娜,董 瑞,3綜述,謝 暉,賈賢杰 審校

    ?

    ·綜述·

    德爾菲法及其構(gòu)建指標(biāo)體系的應(yīng)用進(jìn)展

    王少娜1,董瑞1,3綜述,謝暉1,賈賢杰2審校

    德爾菲法;指標(biāo)體系構(gòu)建;綜述

    Delphi法,中文名譯為德爾菲法、特爾斐法、德爾斐法等,我們現(xiàn)在常用德爾菲法,是一種匿名專家評(píng)分法或?qū)<易稍兎╗1]。通過袁勤儉等[2]繪制的我國(guó)德爾菲法研究主題的知識(shí)圖譜可看出指標(biāo)體系等與評(píng)價(jià)相關(guān)領(lǐng)域的應(yīng)用是德爾菲法在我國(guó)的第一大應(yīng)用領(lǐng)域,可見德爾菲法在指標(biāo)體系構(gòu)建中的作用日趨突出,本文就此展開綜述。

    1 德爾菲法的背景及簡(jiǎn)介

    德爾菲是古希臘地名。德爾菲法是在20世紀(jì)40年代由O·赫爾姆和N·達(dá)爾克首創(chuàng),后經(jīng)過T·J·戈登和蘭德公司進(jìn)一步發(fā)展形成的。1946年,美國(guó)蘭德公司首次用這種方法用來進(jìn)行定性預(yù)測(cè),為了避免集體討論存在盲目服從或屈從于權(quán)威的情況,后來該方法被廣泛且迅速地應(yīng)用于軍事、技術(shù)、醫(yī)療、市場(chǎng)需求等領(lǐng)域,并得到廣泛認(rèn)可[3]。德爾菲法是專家會(huì)議預(yù)測(cè)法的一種發(fā)展,以匿名的方式通過幾輪函詢,征求專家們意見,直到專家組成員的意見趨于一致,以達(dá)到預(yù)測(cè)目的。

    2 德爾菲法的發(fā)展歷程

    2.1德爾菲法的出現(xiàn)世界上有預(yù)測(cè)決策方法200余種,德爾菲法占所有方法使用總次數(shù)的24.3%,成為使用頻率最高者,可以稱之為最權(quán)威的預(yù)測(cè)方法[4],我國(guó)研究德爾菲法最早可以追溯到1980年,可以說發(fā)生在工業(yè)領(lǐng)域,是我國(guó)第一批系統(tǒng)采用德爾菲進(jìn)行技術(shù)發(fā)展預(yù)測(cè),如“墻體材料發(fā)展趨勢(shì)預(yù)測(cè)(1980.10)”、“千瓦級(jí)以上CO:激光器以及在機(jī)械工業(yè)加工中應(yīng)用前景預(yù)測(cè)(1980.10)”[5],后擴(kuò)展到政府部門和工商業(yè),并擴(kuò)展到教育、科技、運(yùn)輸、開發(fā)研究、太空探測(cè)、住宅、預(yù)算和生活質(zhì)量等領(lǐng)域。

    2.2傳統(tǒng)德爾菲法的步驟(1)挑選專家組成員。BROWN[6]指出,德爾菲法成敗的一個(gè)關(guān)鍵問題是挑選專家。一般要選擇在所研究的領(lǐng)域有一定的造詣,有經(jīng)驗(yàn),且對(duì)研究感興趣的專家。 (2)編制調(diào)查問卷。調(diào)查問卷主要由開放式的問題組成,圍繞所研究問題及相關(guān)要求,以及相關(guān)的背景材料,采用匿名方式進(jìn)行問卷調(diào)查,收集專家的反饋信息[7]。(3)實(shí)施調(diào)查。將已經(jīng)編制好的調(diào)查問卷通過信件或電子郵件的形式寄給專家組成員進(jìn)行調(diào)查。(4)回收、匯總和分析問卷信息。將各位專家反饋的信息進(jìn)行匯總、整理和分析制定第二輪調(diào)查問卷,同時(shí)附上第一輪的結(jié)果再分發(fā)給各位專家。(5)調(diào)查結(jié)果的統(tǒng)計(jì)分析。專家問卷回收以后對(duì)問卷信息進(jìn)行匯總,進(jìn)行統(tǒng)計(jì)分析,包括專家的基本信息及條目的打分情況。 (6)對(duì)專家意見進(jìn)行整合處理,形成調(diào)查結(jié)論。

    3 德爾菲法的優(yōu)勢(shì)與局限性

    隨著德爾菲法在各個(gè)領(lǐng)域的廣泛應(yīng)用,這種定量與定性相結(jié)合的預(yù)測(cè)方法,在發(fā)揮它獨(dú)特的優(yōu)點(diǎn)的同時(shí),在實(shí)踐的檢驗(yàn)過程中它的不足之處也不可避免地被顯露出來。

    3.1德爾菲法的優(yōu)勢(shì)(1)專業(yè)性強(qiáng)。該方法為預(yù)測(cè)性方法,可用于多種形式的研究,如:長(zhǎng)期規(guī)劃、預(yù)測(cè)調(diào)查課題,實(shí)際工作的決策調(diào)查,甚至專業(yè)性、學(xué)術(shù)性的課題調(diào)查。(2)匿名性。所有的參與專家均互不知情,在互不見面和沒有討論的情況下回答所提出的問題,這種背對(duì)背匿名的方式給專家提供了一個(gè)平等表達(dá)觀點(diǎn)的機(jī)會(huì),可以避免領(lǐng)導(dǎo)、同伴或者其他人的影響和壓力。(3)信息反饋性。一般進(jìn)行兩輪或兩輪以上征詢專家意見和建議,統(tǒng)計(jì)處理每輪的資料和結(jié)果,并在下輪征詢時(shí)反饋給專家。(4)統(tǒng)計(jì)推斷性。研究者通過對(duì)調(diào)查結(jié)果的統(tǒng)計(jì)處理和分析,經(jīng)多次反饋?zhàn)罱K使專家逐漸趨于一致[8]。

    3.2德爾菲法的局限性(1)通常所需時(shí)間周期較長(zhǎng),對(duì)時(shí)間要求嚴(yán)格的項(xiàng)目具有限制性。(2)德爾菲法屬于專家預(yù)測(cè)法,既是預(yù)測(cè)就很難避免專家的主觀因素對(duì)研究者研究的問題本身的影響,容易受到研究者在設(shè)計(jì)問題時(shí)為達(dá)到預(yù)測(cè)目的而產(chǎn)生的主觀偏倚。(3)德爾菲法對(duì)于研究者也要求比較嚴(yán)格,除了需要妥善處理與專家之間的各種聯(lián)系外,更需要對(duì)咨詢的結(jié)果進(jìn)行統(tǒng)計(jì)分析,從而把握大局來制定各輪的問卷及咨詢表,保證咨詢順利進(jìn)行[9]。

    4 德爾菲法的改良

    研究[10]發(fā)現(xiàn),由于該方法上述的局限性,在實(shí)際的應(yīng)用中,研究者大都對(duì)經(jīng)典的德爾菲法進(jìn)行了一些改進(jìn)之后再應(yīng)用的。

    4.1形式的改良郭嘉[11]指出德爾菲法的派生形式,根據(jù)組織形式的不同,出現(xiàn)了尚調(diào)查法、計(jì)算機(jī)化的德爾菲法、政策德爾菲法和決策德爾菲法等。另外傳統(tǒng)的德爾菲法一般采用信函的形式向?qū)<野l(fā)出問卷,隨著科技的發(fā)達(dá),現(xiàn)在我們一般采用郵件的形式發(fā)放問卷,這樣縮短專家反饋的時(shí)間,提高統(tǒng)計(jì)決策的效率[12]。

    在給專家反饋的時(shí)候,王曉閩[13]提出可以不向?qū)<姨峁┲形粩?shù),只提供前一輪預(yù)測(cè)值的上、下四分點(diǎn)這種部分取消反饋的觀點(diǎn),這樣可有效防止部分專家只是簡(jiǎn)單地向中位數(shù)靠攏,從某種程度上來說保證了預(yù)測(cè)結(jié)果的客觀性和可靠性。組織者將專家統(tǒng)一安排在決策中心,專家在不同的辦公室工作,組織者通過內(nèi)部網(wǎng)將問卷發(fā)放給各位專家,得到專家反饋,組織者再快速得出統(tǒng)計(jì)結(jié)果(一般需要統(tǒng)計(jì)專家,團(tuán)隊(duì)合作),再將結(jié)果反饋給專家電腦,如此反復(fù)得出較為一致的結(jié)果。

    4.2輪回的改良在進(jìn)行專家咨詢前通常先設(shè)立協(xié)調(diào)小組,主要負(fù)責(zé)擬定研究主題、編制專家咨詢問卷、確定專家咨詢組成員、組織協(xié)調(diào)專家咨詢、對(duì)數(shù)據(jù)進(jìn)行整理分析等,這樣也能提高德爾菲咨詢反饋的效率。

    為改變德爾菲法第一輪是一張白紙的缺點(diǎn),王曉閩[13]提出可以向?qū)<姨峁┫嚓P(guān)發(fā)展趨勢(shì)預(yù)測(cè)及背景資料,這樣減少預(yù)測(cè)輪數(shù)要求專家對(duì)預(yù)測(cè)結(jié)果進(jìn)行自我評(píng)價(jià)等改進(jìn)建議。在設(shè)計(jì)專家咨詢表之前,先通過文獻(xiàn)回顧、專家討論、問卷調(diào)查等方法,將事先準(zhǔn)備好的關(guān)于研究者研究涉及的問題,征求專家意見,經(jīng)協(xié)調(diào)小組分析討論后形成結(jié)構(gòu)化的問卷,為所有參與者提供一個(gè)共同的知識(shí)基礎(chǔ),這樣做相當(dāng)于完成了第一輪的咨詢過程。因此在形式上不必一律采用四輪的模式,只要專家的意見已經(jīng)趨向一致,協(xié)調(diào)程度高,就可以結(jié)束咨詢。

    4.3專家選擇的改良傳統(tǒng)的德爾菲法認(rèn)為,只要征詢的專家精通業(yè)務(wù),是有一定有名望的學(xué)派代表,其意見即可得到同等程度的重視和處理,由于專家的專業(yè)知識(shí)、閱歷不同,決定了他們考慮問題的出發(fā)點(diǎn)和因素也不相同,對(duì)研究者調(diào)查結(jié)果的反饋也會(huì)有很大差異[14],因此挑選專家至關(guān)重要。

    研究發(fā)現(xiàn)可能有兩大原因致使德爾菲法技術(shù)預(yù)見準(zhǔn)確性和可靠性低:一是專家的認(rèn)知水平的局限性,二是技術(shù)發(fā)展水平的局限性[15]。針對(duì)第一種原因,連晉毅等[14]對(duì)專家的代表性以及評(píng)價(jià)結(jié)果的量化提出改進(jìn),劃分專家類別并計(jì)算其權(quán)值和采用公式量化處理專家的意見。蔡輝等[16]提出模糊聚類等方法對(duì)德爾菲法中少數(shù)持不同意見的專家的可靠性問題進(jìn)行了分析,以此作為選擇和調(diào)整評(píng)價(jià)專家的依據(jù),從而提高專家意見的協(xié)調(diào)程度。面對(duì)第二種原因,張冬梅等[15]對(duì)德爾菲法的缺陷進(jìn)行審視時(shí)提出技術(shù)環(huán)境監(jiān)測(cè)法,監(jiān)測(cè)專家預(yù)見時(shí)是否出現(xiàn)基于假設(shè)和預(yù)見結(jié)果的早期跡象,對(duì)專家前期的預(yù)見結(jié)果進(jìn)行及時(shí)確認(rèn)和修正。

    4.4數(shù)據(jù)處理的改良宗金峰等[17]將收集到的專家依靠經(jīng)驗(yàn)、知識(shí)、心理測(cè)量給出的評(píng)價(jià)反饋等定性的或難以定量的結(jié)果轉(zhuǎn)化為區(qū)間估價(jià)值,將集值統(tǒng)計(jì)思想引入,有了新的處理數(shù)據(jù)方法,豐富了德爾菲法,擴(kuò)展了其應(yīng)用領(lǐng)域。田軍等[18]提出構(gòu)造專家意見的可靠度函數(shù),形成專家意見集成的可信度,這樣在保留專家意見獨(dú)立性的同時(shí),也綜合考慮專家意見的一致性、協(xié)調(diào)性等要求,建立關(guān)于專家意見集成的優(yōu)化搜索模型,形成最佳協(xié)調(diào)方案。之后,張明善等[19]引入?yún)^(qū)間二分法,該方法是基于德爾菲法定量分析方法中的上下四分法,即將專家組的定量預(yù)測(cè)值分兩個(gè)區(qū)間,取均值,反復(fù)該過程最終使專家的意見逐漸趨于一個(gè)滿意的預(yù)測(cè)區(qū)間,這也是對(duì)專家意見進(jìn)行量化分析的一個(gè)改進(jìn)。元繼學(xué)等[20]提出將群體意見分歧信息作為反饋信息,通過幾輪循環(huán),達(dá)到集體共識(shí),該方法是基于一致性分析的改進(jìn)德爾菲法。鑒于傳統(tǒng)德爾菲法在專家判斷時(shí)存在的模糊性,張群等[21]引入新的Vague集相似度量公式,構(gòu)建了基于Vague集理論的德爾菲法實(shí)施流程,運(yùn)用數(shù)理的方法對(duì)專家的意見進(jìn)行收集和匯總,形成文件,在Vague集的基礎(chǔ)上進(jìn)行打分,能夠充分識(shí)別專家意見中的模糊信息,此方法的引入使得德爾菲法的實(shí)施更為客觀,甚至對(duì)確定輪回的次數(shù)提供了科學(xué)的依據(jù)。

    5 德爾菲法在構(gòu)建指標(biāo)體系中的應(yīng)用

    指標(biāo)體系的構(gòu)建,是將抽象的研究對(duì)象按照其本質(zhì)屬性和特征的某一方面的標(biāo)志分解成為可操作化、具有行為化的結(jié)構(gòu),并對(duì)該體系中每一個(gè)指標(biāo)賦權(quán)的過程,它是進(jìn)行預(yù)測(cè)或評(píng)價(jià)研究的前提和基礎(chǔ)。

    袁勤儉等[21]指出“指標(biāo)體系”是德爾菲法在我國(guó)的第一大應(yīng)用領(lǐng)域,德爾菲法本身是為長(zhǎng)期預(yù)測(cè)需要而創(chuàng)建的一種方法,我國(guó)在評(píng)價(jià)相關(guān)領(lǐng)域?qū)Φ聽柗品ǖ膽?yīng)用超過了在預(yù)測(cè)領(lǐng)域,說明德爾菲法在指標(biāo)體系的構(gòu)建中扮演著不可或缺的角色,德爾菲法應(yīng)用于構(gòu)建指標(biāo)體系時(shí)亦是融合德爾菲法的步驟和后期改良的部分以及指標(biāo)體系所特有的特點(diǎn)來進(jìn)行的。

    研究步驟:(1)產(chǎn)生初級(jí)指標(biāo)。首先將所要判斷的問題及有關(guān)要求和所有背景材料提供給所有專家,同時(shí)也請(qǐng)專家提出所需要的材料,從而初步確定評(píng)價(jià)指標(biāo)。一般為開放性的問題,給專家留出發(fā)揮的空間做書面答復(fù)和反饋。(2)指標(biāo)篩選。以指標(biāo)的重要程度為判定系數(shù),應(yīng)用界值法篩選指標(biāo):算術(shù)平均數(shù)、標(biāo)準(zhǔn)差和變異系數(shù)等。同時(shí),結(jié)合各專家的意見對(duì)指標(biāo)進(jìn)行一定的修改、刪除、增加或合并。(3)確定權(quán)重系數(shù)、建立指標(biāo)體系。①計(jì)算出各項(xiàng)指標(biāo)的均數(shù)、標(biāo)準(zhǔn)差、變異系數(shù)。②對(duì)參與咨詢的專家進(jìn)行評(píng)價(jià),包括專家的積極系數(shù)、權(quán)威系數(shù)、協(xié)調(diào)系數(shù)等。③根據(jù)專家咨詢的結(jié)果,采用德菲爾法、組合賦權(quán)法和優(yōu)序圖法確定綜合評(píng)價(jià)指標(biāo)體系最終指標(biāo)。

    6 德爾菲法構(gòu)建指標(biāo)體系的發(fā)展趨勢(shì)

    我國(guó)運(yùn)用德爾菲法構(gòu)建指標(biāo)體系最早出現(xiàn)在1988年,張?jiān)S暗聽柗品ㄔ诮逃芾碇械膽?yīng)用”一文[22],文中詳細(xì)介紹了應(yīng)用德爾菲法構(gòu)建指標(biāo)體系的流程,運(yùn)用傳統(tǒng)德爾菲方法,是我國(guó)運(yùn)用德爾菲法構(gòu)建指標(biāo)體系的雛形。

    根據(jù)在萬方數(shù)據(jù)庫(kù)的檢索可以看到我國(guó)運(yùn)用德爾菲法構(gòu)建指標(biāo)體系,在1988-2014年,德爾菲法構(gòu)建指標(biāo)體系在醫(yī)學(xué)、衛(wèi)生領(lǐng)域相對(duì)最為廣泛,其次為經(jīng)濟(jì)領(lǐng)域和文化、科學(xué)、教育、體育領(lǐng)域(見圖1)。

    由于德爾菲法固有的局限性,指標(biāo)體系大多是在文獻(xiàn)分析法的基礎(chǔ)上再運(yùn)用德爾菲法構(gòu)建的,近年來在選題小組法基礎(chǔ)上,進(jìn)一步采用德爾菲法構(gòu)建指標(biāo)體系的模式嶄露頭角,此方法克服了德爾菲法的某些不足,減少了專家篩選指標(biāo)的次數(shù),提高了專家對(duì)指標(biāo)體系評(píng)價(jià)的一致性系數(shù)。但是在應(yīng)用德爾菲法的過程中很多專家漸漸發(fā)現(xiàn),在運(yùn)用德爾菲法確定指標(biāo)權(quán)重時(shí),單一使用德爾菲法很容易出現(xiàn)偏倚,有文獻(xiàn)對(duì)于幾種確定指標(biāo)權(quán)重的方法做了比較,因此采用不同類的賦權(quán)方法確定指標(biāo)權(quán)重是可取的,也是一種趨勢(shì),不同類的方法相結(jié)合可克服各種賦權(quán)方法的缺點(diǎn)使其優(yōu)點(diǎn)融為一體,這樣綜合運(yùn)用和發(fā)揮最佳的效應(yīng)[23]。

    分析我國(guó)2004-2014年的文獻(xiàn),構(gòu)建指標(biāo)體系主要選用的方法以采用德爾菲法、德爾菲法與層次分析法(AHP)相結(jié)合的方法為主,由此可見德爾菲法結(jié)合其他方法構(gòu)建指標(biāo)體系亦成為趨勢(shì)(見圖2)。

    采用單純德爾菲法或德爾菲法與層次分析法相結(jié)合的方式構(gòu)建指標(biāo)體系的研究者逐年增多,兩種方法的選擇上也是旗鼓相當(dāng),為了克服單純德爾菲法確定權(quán)重時(shí)出現(xiàn)的偏倚,分析發(fā)現(xiàn),近年來德爾菲法融合其它方法構(gòu)建指標(biāo)體系的模式也日趨豐富,如:德菲爾法+AHP+平衡計(jì)分卡、德菲爾法+AHP+主成分分析、德菲爾法+AHP+因子分析、德菲爾法+AHP+熵值法、德菲爾法+熵值法+模糊理論、德菲爾法+灰色關(guān)聯(lián)法、德菲爾法+數(shù)據(jù)包絡(luò)分析法、德菲爾法+秩和比法等。

    德爾菲法在其廣泛應(yīng)用的同時(shí)不斷經(jīng)過研究者的改進(jìn),指標(biāo)體系的構(gòu)建方法越來越多樣化,雖說其總體仍是在德爾菲法的基礎(chǔ)上或德爾菲法結(jié)合層次分析法的基礎(chǔ)上融合其他方法來完成的,但是,如粗糙集方法、Vague集方法及神經(jīng)網(wǎng)絡(luò)等方法漸漸地會(huì)更好地融入和應(yīng)用于指標(biāo)體系的構(gòu)建中,另外,目前一些定量評(píng)價(jià)的方法較為客觀、全面,并易為大家接受,如多屬性決策方法、數(shù)據(jù)包絡(luò)分析模型、統(tǒng)計(jì)分析方法和系統(tǒng)工程方法等[24]這些原理更科學(xué)、模型更簡(jiǎn)潔,以及精度更高等優(yōu)勢(shì),將成為未來指標(biāo)體系篩選算法研究的重要方向,多種方法的結(jié)合更加系統(tǒng)地融合多學(xué)科的理論精華,進(jìn)一步豐富多屬性綜合評(píng)價(jià)指標(biāo)體系理論,使這一傳統(tǒng)的理論研究煥發(fā)異彩[25]。

    [1]美國(guó)紡織工業(yè)若干問題的預(yù)測(cè)[J].上海紡織科技,1978(6):23.

    [2]袁勤儉,宗乾進(jìn),沈洪洲.德爾菲法在我國(guó)的發(fā)展及應(yīng)用研究[J].現(xiàn)代情報(bào),2011,31(5):3.

    [3]Delphi method[EB/OL].http://en.wikipedia.org/wiki/Delphi method,2011-04.

    [4]王升.高校本科教學(xué)團(tuán)隊(duì)建設(shè)水平評(píng)價(jià)指標(biāo)體系的構(gòu)建研究[D].南京:南京農(nóng)業(yè)大學(xué),2011.

    [5]陳玉祥,朱東華.特爾斐法的應(yīng)用研究[J].未來與發(fā)展,1990(5):42.

    [6]BROWN B.Delphi process:a methodology using for the elicitation of opinions of experts [J].Rand Corporation,1987,9:39.

    [7]丁晉飛,談立峰,湯在祥,等.德爾菲法及其在公共衛(wèi)生領(lǐng)域的應(yīng)用和展望[J].環(huán)境與職業(yè)醫(yī)學(xué),2012,29(11):727.

    [8]季新強(qiáng),劉志民.Delphi法及其在醫(yī)學(xué)研究和決策中的應(yīng)用[J].中國(guó)藥物依賴性雜志,2006,15(6):422.

    [9]平衛(wèi)偉.Delphi法的研究進(jìn)展及其在醫(yī)學(xué)中的應(yīng)用[J].疾病控制雜志,2003,7(3):243.

    [10]曾光.現(xiàn)代流行病學(xué)方法與應(yīng)用[M].北京:北京醫(yī)科大學(xué)中國(guó)醫(yī)科大學(xué)聯(lián)合出版社,1994:250.

    [11]郭嘉.幾種德爾菲法的派生形式[J].預(yù)測(cè),1985(Z1):80.

    [12]陳建勛,傅升.探悉德爾菲法的知識(shí)自增值機(jī)制及其改進(jìn)[J].軟科學(xué),2005,19(1):9.

    [13]王曉閩.德爾菲法的缺點(diǎn)及其改進(jìn)[J].管理現(xiàn)代化,1990(5):15.

    [14]連晉毅.用改進(jìn)的德爾菲法進(jìn)行綜合評(píng)價(jià)[J].建筑機(jī)械化,1992(6):31.

    [15]張冬梅,曾忠祿.德爾菲法技術(shù)預(yù)見的缺陷及導(dǎo)因分析:行為經(jīng)濟(jì)學(xué)分析視角[J].情報(bào)理論與實(shí)踐,2009,32 (8):24.

    [16]蔡輝,張穎,倪宗瓚.Delphi法中評(píng)價(jià)專家的篩選[J].中國(guó)衛(wèi)生事業(yè)管理,1995(1):49.

    [17]宗金峰,趙海芹.引入集值統(tǒng)計(jì)改進(jìn)德爾菲法中數(shù)據(jù)處理過程[J].統(tǒng)計(jì)與決策,1997(3):10.

    [18]田軍,張朋柱,王刊良,等.基于德爾菲法的專家意見集成模型研究[J].系統(tǒng)工程理論與實(shí)踐,2004(1):57.

    [19]張明善,賈子超,李天政,等.德爾菲法定量分析的拓展:區(qū)間二分法[J].西南民族大學(xué)學(xué)報(bào)(自然科學(xué)版),2007,33(1):138.

    [20]元繼學(xué),王未今.解決一類群決策問題的改進(jìn)德爾菲法[J].數(shù)學(xué)的實(shí)踐與認(rèn)識(shí),2010,40(20):89.

    [21]張群,韓曉磊,宋光興.基于Vague集理論的德爾菲法的實(shí)施[J].統(tǒng)計(jì)與決策,2010(1):158.

    [22]張?jiān)S?德爾菲法在教育管理中的應(yīng)用[J].廣州教育,1988(5):12.

    [23]倪少凱.7種確定評(píng)估指標(biāo)權(quán)重方法的比較[J].華南預(yù)防醫(yī)學(xué),2002,28(6):54.

    [24]孫振球.醫(yī)學(xué)綜合評(píng)價(jià)方法及其應(yīng)用[M].北京:化學(xué)工業(yè)出版社,2005.

    [25]李遠(yuǎn)遠(yuǎn),云俊.多屬性綜合評(píng)價(jià)指標(biāo)體系理論綜述[J].武漢理工大學(xué)學(xué)報(bào)(信息與管理工程版),2009,31(2):305.

    (本文編輯劉璐)

    2015-05-02

    國(guó)家自然科學(xué)基金青年科學(xué)基金項(xiàng)目(71103002)

    單位] 蚌埠醫(yī)學(xué)院 1.護(hù)理學(xué)系,2.預(yù)防醫(yī)學(xué)系 流行病學(xué)與衛(wèi)

    王少娜(1989-),女,碩士研究生.

    1000-2200(2016)05-0695-04

    R 169.1

    A

    10.13898/j.cnki.issn.1000-2200.2016.05.048

    生統(tǒng)計(jì)學(xué)教研室,安徽 蚌埠233030;3.商丘醫(yī)學(xué)高等專

    科學(xué)校,河南 商丘 476100

    猜你喜歡
    德爾菲指標(biāo)體系意見
    德爾菲法構(gòu)建腫瘤醫(yī)院ICU患者身體約束評(píng)估量表
    基于德爾菲法構(gòu)建融合式旅救護(hù)所指標(biāo)體系
    評(píng)“小創(chuàng)”,送好禮
    沒有反對(duì)意見
    評(píng)“小創(chuàng)”,送好禮
    海豚是魚嗎
    大灰狼(2017年7期)2017-07-25 21:35:29
    層次分析法在生態(tài)系統(tǒng)健康評(píng)價(jià)指標(biāo)體系中的應(yīng)用
    供給側(cè)改革指標(biāo)體系初探
    基于德爾菲法的上海某??漆t(yī)院公開招聘的影響因素研究
    測(cè)土配方施肥指標(biāo)體系建立中‘3414
    99国产精品一区二区三区| 午夜福利18| 99精品在免费线老司机午夜| 亚洲七黄色美女视频| 欧美bdsm另类| 中文字幕av在线有码专区| 男人的好看免费观看在线视频| 亚洲av美国av| 亚洲真实伦在线观看| 久久国产精品影院| 看免费av毛片| 亚洲专区中文字幕在线| 国产探花在线观看一区二区| 法律面前人人平等表现在哪些方面| 母亲3免费完整高清在线观看| 99久久精品热视频| 午夜福利18| 欧美日韩黄片免| 亚洲av二区三区四区| 国产精品乱码一区二三区的特点| 国产精品电影一区二区三区| 天堂影院成人在线观看| 亚洲欧美精品综合久久99| 高清毛片免费观看视频网站| 露出奶头的视频| 午夜免费观看网址| 99国产极品粉嫩在线观看| 三级男女做爰猛烈吃奶摸视频| 久久久久免费精品人妻一区二区| 淫妇啪啪啪对白视频| 校园春色视频在线观看| 三级毛片av免费| 久久午夜亚洲精品久久| 午夜亚洲福利在线播放| 一二三四社区在线视频社区8| 亚洲自拍偷在线| 日本五十路高清| 99视频精品全部免费 在线| 91在线观看av| 日韩大尺度精品在线看网址| 夜夜夜夜夜久久久久| 日韩欧美三级三区| 99久久精品热视频| 国产av在哪里看| 午夜两性在线视频| 欧美不卡视频在线免费观看| 亚洲久久久久久中文字幕| x7x7x7水蜜桃| aaaaa片日本免费| 日韩有码中文字幕| 少妇裸体淫交视频免费看高清| 男女床上黄色一级片免费看| 国产不卡一卡二| 亚洲乱码一区二区免费版| 欧美+亚洲+日韩+国产| 日本黄色视频三级网站网址| 久久久久国产精品人妻aⅴ院| 国内精品久久久久精免费| 亚洲国产中文字幕在线视频| 成人性生交大片免费视频hd| 国产高清有码在线观看视频| 欧美激情在线99| 国产欧美日韩精品亚洲av| 久久婷婷人人爽人人干人人爱| 国内少妇人妻偷人精品xxx网站| 国产精品1区2区在线观看.| 国产色婷婷99| 欧美极品一区二区三区四区| 国产成人av教育| 国产成人av教育| 精品无人区乱码1区二区| 在线观看免费午夜福利视频| 老鸭窝网址在线观看| 国产精品女同一区二区软件 | av福利片在线观看| 高清毛片免费观看视频网站| 99久久无色码亚洲精品果冻| 欧美激情在线99| 亚洲av电影在线进入| 欧美一区二区亚洲| 男女之事视频高清在线观看| 99国产精品一区二区蜜桃av| 亚洲欧美一区二区三区黑人| 欧美zozozo另类| 亚洲国产精品成人综合色| 国产伦人伦偷精品视频| 男女视频在线观看网站免费| 午夜亚洲福利在线播放| 99国产综合亚洲精品| 制服丝袜大香蕉在线| 日本免费a在线| 听说在线观看完整版免费高清| 少妇丰满av| 欧美+亚洲+日韩+国产| 人人妻,人人澡人人爽秒播| 欧美又色又爽又黄视频| 两个人的视频大全免费| 伊人久久大香线蕉亚洲五| 亚洲精品在线观看二区| 丁香欧美五月| 久久国产乱子伦精品免费另类| 亚洲一区二区三区色噜噜| 午夜福利高清视频| 午夜福利在线在线| 国产成人系列免费观看| 伊人久久大香线蕉亚洲五| 波多野结衣高清无吗| 亚洲精品一区av在线观看| 搡女人真爽免费视频火全软件 | 久久亚洲真实| 夜夜爽天天搞| 亚洲精品影视一区二区三区av| 日本一二三区视频观看| 在线观看日韩欧美| 国产麻豆成人av免费视频| www国产在线视频色| 尤物成人国产欧美一区二区三区| 色视频www国产| 特大巨黑吊av在线直播| 成年女人毛片免费观看观看9| 欧美成人免费av一区二区三区| 国产日本99.免费观看| 狂野欧美激情性xxxx| 成熟少妇高潮喷水视频| 又爽又黄无遮挡网站| 国产真实乱freesex| av视频在线观看入口| 免费高清视频大片| 美女黄网站色视频| 91麻豆精品激情在线观看国产| 男女做爰动态图高潮gif福利片| 日本精品一区二区三区蜜桃| 亚洲内射少妇av| 国产高清视频在线观看网站| 露出奶头的视频| 一区二区三区免费毛片| 久9热在线精品视频| 日本黄色片子视频| 尤物成人国产欧美一区二区三区| 国产色爽女视频免费观看| 麻豆一二三区av精品| 亚洲最大成人中文| 99国产精品一区二区三区| 国产熟女xx| 成年女人看的毛片在线观看| 91久久精品电影网| 91久久精品电影网| 亚洲真实伦在线观看| 欧美午夜高清在线| 国产一区二区激情短视频| 琪琪午夜伦伦电影理论片6080| 亚洲美女视频黄频| 久久国产乱子伦精品免费另类| 国产一区在线观看成人免费| 一区福利在线观看| 亚洲av五月六月丁香网| 成人高潮视频无遮挡免费网站| 欧美精品啪啪一区二区三区| 麻豆成人av在线观看| 日本黄色视频三级网站网址| 伊人久久精品亚洲午夜| 亚洲人成网站高清观看| 精品久久久久久久久久久久久| 精品99又大又爽又粗少妇毛片 | 亚洲熟妇熟女久久| 黄色视频,在线免费观看| 国内毛片毛片毛片毛片毛片| 日韩欧美一区二区三区在线观看| 国产午夜精品论理片| 国产v大片淫在线免费观看| 成人鲁丝片一二三区免费| 国产单亲对白刺激| 亚洲av成人精品一区久久| 国产在线精品亚洲第一网站| 国产精品一区二区免费欧美| 淫妇啪啪啪对白视频| 成人永久免费在线观看视频| 亚洲精品在线美女| 久久欧美精品欧美久久欧美| 搡女人真爽免费视频火全软件 | 欧美丝袜亚洲另类 | 中文字幕高清在线视频| 欧美绝顶高潮抽搐喷水| 国产亚洲精品av在线| 激情在线观看视频在线高清| 又黄又粗又硬又大视频| 亚洲成人久久性| 国产成人系列免费观看| 国产蜜桃级精品一区二区三区| 欧美又色又爽又黄视频| 欧美在线黄色| 长腿黑丝高跟| 女人十人毛片免费观看3o分钟| 久久天躁狠狠躁夜夜2o2o| www.www免费av| 国产亚洲精品久久久com| 久久久色成人| 婷婷丁香在线五月| 精品国内亚洲2022精品成人| 91九色精品人成在线观看| 人妻丰满熟妇av一区二区三区| 91九色精品人成在线观看| 精品福利观看| 久久久久久九九精品二区国产| 亚洲精品在线美女| 久久婷婷人人爽人人干人人爱| 天堂动漫精品| 老熟妇仑乱视频hdxx| 好男人电影高清在线观看| 日韩人妻高清精品专区| 1000部很黄的大片| 男女做爰动态图高潮gif福利片| 97超视频在线观看视频| 日本a在线网址| 熟女人妻精品中文字幕| 国产高清三级在线| 日韩欧美国产在线观看| a级一级毛片免费在线观看| 91九色精品人成在线观看| 中文亚洲av片在线观看爽| 亚洲 国产 在线| 草草在线视频免费看| www.色视频.com| 久久久久久国产a免费观看| 老鸭窝网址在线观看| 狂野欧美白嫩少妇大欣赏| 日韩欧美在线二视频| 午夜视频国产福利| 亚洲专区国产一区二区| 国产av在哪里看| 深夜精品福利| 欧美在线一区亚洲| 嫁个100分男人电影在线观看| 欧美丝袜亚洲另类 | 亚洲国产精品999在线| 波多野结衣高清作品| 欧美性猛交╳xxx乱大交人| 亚洲最大成人手机在线| 国产久久久一区二区三区| 久久久久久久久中文| 免费av不卡在线播放| 久久欧美精品欧美久久欧美| 久久久久久久久大av| 极品教师在线免费播放| 久久性视频一级片| 久久草成人影院| 在线播放无遮挡| 老汉色∧v一级毛片| 最新中文字幕久久久久| 久久久久久国产a免费观看| 亚洲精华国产精华精| 性欧美人与动物交配| 亚洲午夜理论影院| 国产一区二区三区视频了| 久久久久久久久大av| 久久久久久久精品吃奶| 久久精品国产99精品国产亚洲性色| 男女那种视频在线观看| 久久精品亚洲精品国产色婷小说| 午夜福利在线观看免费完整高清在 | 亚洲av熟女| av视频在线观看入口| 黄色片一级片一级黄色片| 亚洲天堂国产精品一区在线| netflix在线观看网站| 日韩欧美 国产精品| 色综合亚洲欧美另类图片| 免费大片18禁| 在线免费观看不下载黄p国产 | 国内揄拍国产精品人妻在线| 欧美性感艳星| a在线观看视频网站| 婷婷丁香在线五月| 美女被艹到高潮喷水动态| 国产精品亚洲一级av第二区| 美女大奶头视频| 国产一区二区在线av高清观看| 日本一二三区视频观看| 久久久国产成人精品二区| 窝窝影院91人妻| 国产99白浆流出| 色噜噜av男人的天堂激情| 午夜福利免费观看在线| 性色avwww在线观看| 精品久久久久久成人av| 久久久久免费精品人妻一区二区| 色哟哟哟哟哟哟| 黄片小视频在线播放| 嫩草影院入口| 国内精品久久久久久久电影| 国产av麻豆久久久久久久| 在线观看免费视频日本深夜| 搡老岳熟女国产| 免费看美女性在线毛片视频| 麻豆国产av国片精品| 亚洲久久久久久中文字幕| 亚洲一区二区三区不卡视频| 12—13女人毛片做爰片一| 国产伦精品一区二区三区视频9 | 最近在线观看免费完整版| 脱女人内裤的视频| 国产免费一级a男人的天堂| 99精品欧美一区二区三区四区| 日本 欧美在线| 精品久久久久久成人av| 9191精品国产免费久久| 免费在线观看影片大全网站| 精品国产美女av久久久久小说| 69av精品久久久久久| 久久久久精品国产欧美久久久| 在线十欧美十亚洲十日本专区| 91av网一区二区| 香蕉丝袜av| 精品熟女少妇八av免费久了| 一级毛片女人18水好多| 欧美日韩综合久久久久久 | 女人十人毛片免费观看3o分钟| 国产美女午夜福利| 日日摸夜夜添夜夜添小说| 91字幕亚洲| 久久香蕉国产精品| 在线观看午夜福利视频| 中文字幕人妻熟人妻熟丝袜美 | 欧美性感艳星| e午夜精品久久久久久久| 国产综合懂色| 少妇高潮的动态图| 亚洲美女视频黄频| 欧美成人一区二区免费高清观看| 日本黄色片子视频| 真人做人爱边吃奶动态| 日韩中文字幕欧美一区二区| 热99在线观看视频| 午夜福利在线观看吧| 精品人妻一区二区三区麻豆 | 精品久久久久久久人妻蜜臀av| 日本五十路高清| 欧美性猛交╳xxx乱大交人| e午夜精品久久久久久久| 午夜免费男女啪啪视频观看 | 亚洲乱码一区二区免费版| 51午夜福利影视在线观看| 91麻豆av在线| 九九在线视频观看精品| 十八禁网站免费在线| 青草久久国产| 18+在线观看网站| 午夜影院日韩av| 19禁男女啪啪无遮挡网站| 日韩有码中文字幕| 免费一级毛片在线播放高清视频| 久久欧美精品欧美久久欧美| 极品教师在线免费播放| 18禁黄网站禁片午夜丰满| 亚洲国产欧美网| 免费看a级黄色片| 久久6这里有精品| 国内久久婷婷六月综合欲色啪| 精品不卡国产一区二区三区| 高清日韩中文字幕在线| 国产亚洲av嫩草精品影院| 国内精品久久久久精免费| 精品人妻偷拍中文字幕| 午夜福利免费观看在线| 婷婷丁香在线五月| 搞女人的毛片| 日韩成人在线观看一区二区三区| 久久6这里有精品| 99久久成人亚洲精品观看| 三级男女做爰猛烈吃奶摸视频| 精品人妻偷拍中文字幕| 精品久久久久久久毛片微露脸| 精品一区二区三区视频在线 | 久久久国产成人精品二区| 99久久99久久久精品蜜桃| 日韩成人在线观看一区二区三区| 久久6这里有精品| 在线播放国产精品三级| 免费在线观看影片大全网站| 变态另类丝袜制服| 美女高潮的动态| 亚洲专区国产一区二区| av欧美777| 99riav亚洲国产免费| 中文在线观看免费www的网站| 日本成人三级电影网站| 久久中文看片网| 日韩有码中文字幕| 免费看光身美女| 搡女人真爽免费视频火全软件 | 岛国视频午夜一区免费看| 亚洲国产色片| 久久精品国产亚洲av涩爱 | 一个人看视频在线观看www免费 | 成人亚洲精品av一区二区| 夜夜看夜夜爽夜夜摸| 国产亚洲欧美在线一区二区| 首页视频小说图片口味搜索| 国产乱人伦免费视频| 国产伦精品一区二区三区视频9 | 久久人妻av系列| 亚洲 国产 在线| 女人十人毛片免费观看3o分钟| 亚洲av电影不卡..在线观看| 亚洲人成网站在线播放欧美日韩| 九色成人免费人妻av| 久久精品国产99精品国产亚洲性色| 手机成人av网站| www日本黄色视频网| 国产精品嫩草影院av在线观看 | 中文字幕av成人在线电影| 国内毛片毛片毛片毛片毛片| 日本三级黄在线观看| 欧美一区二区精品小视频在线| 偷拍熟女少妇极品色| 中文字幕人妻熟人妻熟丝袜美 | 国产精品久久视频播放| 日本一本二区三区精品| 国产高潮美女av| 国产精品精品国产色婷婷| 美女 人体艺术 gogo| 国产视频一区二区在线看| 变态另类丝袜制服| 欧美黄色淫秽网站| 免费av不卡在线播放| 国产高清视频在线观看网站| 国产中年淑女户外野战色| 国产精品国产高清国产av| 日本精品一区二区三区蜜桃| 老司机福利观看| 精品国产亚洲在线| 亚洲熟妇熟女久久| 久久久国产成人精品二区| 国产一区二区三区视频了| 午夜亚洲福利在线播放| 午夜久久久久精精品| 97碰自拍视频| 中国美女看黄片| 一级毛片高清免费大全| 欧美bdsm另类| 在线看三级毛片| 九九在线视频观看精品| 99国产综合亚洲精品| 国产精品一区二区免费欧美| 国产真实伦视频高清在线观看 | 午夜精品一区二区三区免费看| 一进一出抽搐gif免费好疼| 叶爱在线成人免费视频播放| 午夜视频国产福利| 看黄色毛片网站| 男女做爰动态图高潮gif福利片| 99精品久久久久人妻精品| 内射极品少妇av片p| 亚洲国产欧洲综合997久久,| 蜜桃亚洲精品一区二区三区| 欧美区成人在线视频| 最近视频中文字幕2019在线8| 国产97色在线日韩免费| 在线天堂最新版资源| 亚洲七黄色美女视频| 看免费av毛片| 日本 av在线| 少妇的丰满在线观看| 久久精品91蜜桃| 精品免费久久久久久久清纯| 最新美女视频免费是黄的| 97人妻精品一区二区三区麻豆| 亚洲最大成人手机在线| 欧美精品啪啪一区二区三区| 哪里可以看免费的av片| 久久精品国产99精品国产亚洲性色| 国内少妇人妻偷人精品xxx网站| 亚洲精品久久国产高清桃花| 在线播放无遮挡| 精品乱码久久久久久99久播| 国产精品久久久久久久久免 | 亚洲avbb在线观看| 日韩欧美 国产精品| 国产精品久久视频播放| 亚洲欧美日韩东京热| 国产亚洲欧美在线一区二区| 国产成人a区在线观看| 美女大奶头视频| 成人性生交大片免费视频hd| 激情在线观看视频在线高清| 欧美日韩中文字幕国产精品一区二区三区| 色av中文字幕| 国产精品影院久久| 禁无遮挡网站| 老司机在亚洲福利影院| 91在线观看av| 亚洲av成人av| 99久久成人亚洲精品观看| 日本免费一区二区三区高清不卡| 久久天躁狠狠躁夜夜2o2o| 欧美+日韩+精品| 久久精品影院6| 在线播放国产精品三级| 亚洲美女黄片视频| 国产欧美日韩一区二区精品| 成人高潮视频无遮挡免费网站| 天堂动漫精品| 久久久久精品国产欧美久久久| 五月伊人婷婷丁香| 18禁黄网站禁片午夜丰满| 在线观看免费视频日本深夜| 18禁美女被吸乳视频| 一级毛片高清免费大全| 亚洲精品美女久久久久99蜜臀| 日本三级黄在线观看| 搡老岳熟女国产| aaaaa片日本免费| 亚洲国产高清在线一区二区三| 99久久无色码亚洲精品果冻| 小蜜桃在线观看免费完整版高清| 在线免费观看的www视频| 校园春色视频在线观看| 久久国产乱子伦精品免费另类| 狂野欧美白嫩少妇大欣赏| 日韩中文字幕欧美一区二区| 色播亚洲综合网| 欧美日韩瑟瑟在线播放| 噜噜噜噜噜久久久久久91| 亚洲在线观看片| 91麻豆精品激情在线观看国产| 亚洲国产精品久久男人天堂| www日本黄色视频网| 狂野欧美白嫩少妇大欣赏| 国产极品精品免费视频能看的| 中亚洲国语对白在线视频| 特级一级黄色大片| 国产精品爽爽va在线观看网站| 窝窝影院91人妻| 亚洲熟妇熟女久久| 国产成人av激情在线播放| www日本黄色视频网| 桃色一区二区三区在线观看| 91字幕亚洲| 在线观看日韩欧美| 久久香蕉精品热| 男女视频在线观看网站免费| 搞女人的毛片| 深爱激情五月婷婷| 麻豆一二三区av精品| 亚洲精品美女久久久久99蜜臀| 丰满人妻熟妇乱又伦精品不卡| www日本黄色视频网| 免费看日本二区| 欧美日本亚洲视频在线播放| 国产97色在线日韩免费| 亚洲精品一区av在线观看| bbb黄色大片| ponron亚洲| 欧美色视频一区免费| 成年女人看的毛片在线观看| 一本久久中文字幕| 国语自产精品视频在线第100页| 男女之事视频高清在线观看| 欧美乱色亚洲激情| 欧美性感艳星| 亚洲中文日韩欧美视频| 丰满乱子伦码专区| 免费一级毛片在线播放高清视频| 女生性感内裤真人,穿戴方法视频| 脱女人内裤的视频| 色综合站精品国产| 99久久99久久久精品蜜桃| 欧美一区二区国产精品久久精品| 18+在线观看网站| 欧美性感艳星| 国产亚洲精品av在线| АⅤ资源中文在线天堂| 国产成人a区在线观看| 美女高潮喷水抽搐中文字幕| svipshipincom国产片| www日本黄色视频网| 国产单亲对白刺激| 丁香欧美五月| 人妻久久中文字幕网| 日韩 欧美 亚洲 中文字幕| 色综合欧美亚洲国产小说| 一级a爱片免费观看的视频| 97超级碰碰碰精品色视频在线观看| 又粗又爽又猛毛片免费看| 一级黄片播放器| 日韩精品青青久久久久久| 欧美色视频一区免费| 悠悠久久av| 女警被强在线播放| 又粗又爽又猛毛片免费看| 国产日本99.免费观看| av天堂在线播放| 国产视频内射| 无遮挡黄片免费观看| 欧美成人免费av一区二区三区| 欧美日本亚洲视频在线播放| 三级毛片av免费| 国产午夜精品久久久久久一区二区三区 | 亚洲中文日韩欧美视频| 精品久久久久久久毛片微露脸| 人人妻人人看人人澡| 最近视频中文字幕2019在线8| 免费看光身美女| 中亚洲国语对白在线视频| 在线天堂最新版资源| 精品一区二区三区视频在线 | 91久久精品国产一区二区成人 | 欧美av亚洲av综合av国产av| 亚洲第一欧美日韩一区二区三区| 亚洲精品日韩av片在线观看 | 在线观看舔阴道视频| 超碰av人人做人人爽久久 | 成人国产一区最新在线观看| 97超级碰碰碰精品色视频在线观看| 久久久久亚洲av毛片大全|