德爾菲專家會(huì)商法在定性研究中的應(yīng)用

摘 要 德爾菲專家會(huì)商法（Delphi method）是一種基于專家對(duì)某些問題做出獨(dú)立評(píng)價(jià)的系統(tǒng)的、互動(dòng)的定性研究方法。該方法具有函詢和信息反饋、獨(dú)立性、時(shí)間空間自由性、分析指標(biāo)可控性和權(quán)威性等優(yōu)點(diǎn)，近年來在臨床研究方案構(gòu)建、評(píng)價(jià)指標(biāo)體系優(yōu)化等方面得到了廣泛應(yīng)用。本文從德爾菲法概念入手，重點(diǎn)介紹德爾菲法的實(shí)施步驟、評(píng)價(jià)指標(biāo)體系、具體指標(biāo)計(jì)算方法和應(yīng)用示例，以期為臨床工作者和研究人員應(yīng)用德爾菲專家會(huì)商法開展臨床研究的定性分析提供參考。

關(guān)鍵詞 德爾菲法 定性研究 評(píng)價(jià)指標(biāo)體系 指標(biāo)期望值

中圖分類號(hào)：R-3； G312 文獻(xiàn)標(biāo)志碼：C 文章編號(hào)：1006-1533（2024）07-0041-04

引用本文 高深甚， 王瑞平. 德爾菲專家會(huì)商法在定性研究中的應(yīng)用[J]. 上海醫(yī)藥， 2024， 45（7）： 41-44； 70.

基金項(xiàng)目：上海市衛(wèi)生健康委員會(huì)衛(wèi)生行業(yè)臨床研究專項(xiàng)（202240371）；上海申康醫(yī)院發(fā)展中心第二輪促進(jìn)市級(jí)醫(yī)院臨床技能與臨床創(chuàng)新三年行動(dòng)計(jì)劃——研究型醫(yī)師創(chuàng)新轉(zhuǎn)化能力培訓(xùn)項(xiàng)目（SHDC2022CRS053）；上海市皮膚病醫(yī)院引進(jìn)人才科研基金項(xiàng)目（2021KYQD01）；上海人才發(fā)展基金資助項(xiàng)目（2021SHRCFZ01）；上海市醫(yī)院協(xié)會(huì)醫(yī)院管理研究基金項(xiàng)目（X2022117）

Application of the Delphi expert conferencing method in qualitative research

GAO Shenshen1， WANG Ruiping2

（1. Shanghai Clinical Research Promotion and Development Center， Shanghai Shenkang Hospital Development Center， Shanghai 200041， China； 2. Clinical Research Innovation Center， Shanghai Skin Disease Hospital， Shanghai 200443， China）

ABSTRACT Delphi expert conferencing method （Delphi method） is a systematic and interactive qualitative research method based on independent evaluation of certain issues by experts. The method has the advantages of correspondence and information feedback， independence， time and space freedom， controllability of analysis indexes and authority. In recent years， it has been widely used in the construction of clinical research protocols and optimization of evaluation index systems. This paper starts from the concept of Delphi method， and focuses on its implementation steps， evaluation index system， specific index calculation method and application examples， so as to provide reference for clinical workers and researchers to apply Delphi method to carry out qualitative analysis of clinical research.

KEY WORDS Delphi method； qualitative research； evaluation indicator system； expected value of indicators

德爾菲專家會(huì)商法，簡稱德爾菲法（Delphi method），是一種基于專家對(duì)某些問題做出獨(dú)立評(píng)價(jià)的系統(tǒng)的、互動(dòng)的定性研究方法。它在廣泛征詢專家意見的基礎(chǔ)上，經(jīng)過多輪的信息反饋與交流，使意見逐步趨于一致，最終得到比較一致且可靠性較好的結(jié)論或方案。德爾菲法具有函詢、信息互動(dòng)反饋、獨(dú)立性、時(shí)間空間自由性、分析指標(biāo)可控性和權(quán)威性等優(yōu)點(diǎn)，近年來在臨床研究方案構(gòu)建、評(píng)價(jià)指標(biāo)體系優(yōu)化等方面得到廣泛應(yīng)用。德爾菲法常用于單維度指標(biāo)篩選評(píng)價(jià)，如“銀屑病臨床研究中醫(yī)評(píng)價(jià)指標(biāo)體系構(gòu)建和優(yōu)選”“多耐藥結(jié)核病診斷治療管理評(píng)價(jià)體系指標(biāo)篩選”等；或常用于多維度指標(biāo)綜合評(píng)價(jià)，如“某省衛(wèi)生城市建設(shè)指標(biāo)篩選綜合評(píng)價(jià)”“帶狀皰疹病人臨床護(hù)理效果的綜合評(píng)價(jià)”等。本文介紹德爾菲法的實(shí)施步驟、評(píng)價(jià)指標(biāo)體系和計(jì)算方法，并以“基于德爾菲專家會(huì)商法制定臨床研究培訓(xùn)課程核心內(nèi)容研究”為例介紹德爾菲法的具體應(yīng)用方法，以期為臨床研究人員應(yīng)用德爾菲法開展定性研究提供參考。

1 德爾菲法的定義

德爾菲法是一種定性研究方法，于1946年由美國蘭德公司創(chuàng)始實(shí)行，是一種反饋匿名函詢法，其流程是在對(duì)所要預(yù)測(cè)的問題征得專家的意見之后，進(jìn)行整理、歸納、統(tǒng)計(jì)，再匿名反饋給各專家，再次征求意見，再集中，再反饋，直至得到一致的意見。因此，德爾菲法的本質(zhì)是在廣泛征詢專家意見的基礎(chǔ)上，經(jīng)過多輪的信息反饋與交流，使意見逐步趨于一致，最終得到比較一致且可靠性較好的結(jié)論或方案。德爾菲法在醫(yī)學(xué)中的應(yīng)用，最早開始于對(duì)護(hù)理工作的研究，并且在使用過程中顯示了它的優(yōu)越性和適用性，受到越來越多研究者的青睞。近年來，德爾菲法在臨床研究方案構(gòu)建、評(píng)價(jià)指標(biāo)體系優(yōu)化等方面得到廣泛應(yīng)用，它具有函詢、信息互動(dòng)反饋、獨(dú)立性、時(shí)間空間自由性、分析指標(biāo)可控性和權(quán)威性等優(yōu)點(diǎn)，常用于單維度指標(biāo)的篩選評(píng)價(jià)或多維度指標(biāo)的綜合評(píng)價(jià)。

2 德爾菲法的實(shí)施步驟

德爾菲法的實(shí)施是在對(duì)所要研究的問題征得專家的匿名反饋意見之后，進(jìn)行整理、歸納和統(tǒng)計(jì)，再匿名反饋給各專家，再次征求意見，再集中統(tǒng)計(jì)和反饋，直至得到一致的意見[1]。德爾菲法的實(shí)施應(yīng)用一般至少包括6個(gè)步驟：

第一步，前期準(zhǔn)備工作。課題組應(yīng)根據(jù)研究目標(biāo)成立德爾菲法實(shí)施協(xié)調(diào)分析小組，一般由3～5人組成，包括組長1人，組織協(xié)調(diào)專員1～2人，數(shù)據(jù)采集和分析專員1～2人。開展德爾菲法定性研究前，協(xié)調(diào)分析小組應(yīng)至少召開一次全員會(huì)議，明確任務(wù)分工，同時(shí)負(fù)責(zé)制定項(xiàng)目征詢專家的遴選標(biāo)準(zhǔn)和后期的具體專家招募工作，一般邀請(qǐng)15人左右即可。此外，協(xié)調(diào)分析小組還應(yīng)根據(jù)研究目的查閱文獻(xiàn)，制定現(xiàn)場征詢表，并按照邀請(qǐng)專家的數(shù)量，將征詢表打印好備用。

第二步，開展第一輪專家咨詢。德爾菲法協(xié)調(diào)分析小組在組長統(tǒng)一指揮下，將前期打印好的征詢表和參考資料（德爾菲法簡介、研究目的、研究背景信息等）逐份整理并做好標(biāo)記，裝入信封或做成壓縮文件，通過信件或電子郵件方式的發(fā)送出去。如果通過信件郵寄，建議采取掛號(hào)信或特快專遞等方式寄送，這樣可查詢信件的實(shí)時(shí)狀態(tài)，以防丟失。如果采用電子郵件發(fā)送，應(yīng)收集各位專家的電子郵箱，整理好后統(tǒng)一發(fā)送出去。須注意的是，無論是郵寄或發(fā)送電子郵件，發(fā)出后務(wù)必均向各位專家確認(rèn)是否收到，并告知返回征詢意見表的截止日期，以免影響研究進(jìn)度的開展，同時(shí)還能借此提高專家的應(yīng)答率，改善專家積極系數(shù)（expert active coefficient， EAC）。

第三步：分析第一輪專家咨詢結(jié)果。根據(jù)前期約定的截止日期，收齊并整理好各位專家返回的咨詢表。建立Excel（電子表格）數(shù)據(jù)庫，將各位專家的評(píng)分信息錄入Excel數(shù)據(jù)庫，根據(jù)德爾菲法評(píng)價(jià)指標(biāo)體系，計(jì)算各項(xiàng)指標(biāo)并將主要分析結(jié)果通過PPT（演示文稿）進(jìn)行展示。在此基礎(chǔ)上，參考第一輪專家意見，可對(duì)評(píng)價(jià)指標(biāo)系統(tǒng)進(jìn)行適當(dāng)?shù)恼{(diào)整，制定第二輪專家咨詢表備用。

第四步：開展第二輪專家咨詢。德爾菲法協(xié)調(diào)分析小組在組長統(tǒng)一指揮下，將修訂好的第二輪征詢表、第一輪專家評(píng)分的整體分析結(jié)果（PPT展示）逐份整理并做好標(biāo)記，裝入信封或做成壓縮文件，通過信件或電子郵件的方式發(fā)送出去。同樣應(yīng)注意的是，無論是郵寄或發(fā)送電子郵件，發(fā)出后均需向各位專家確認(rèn)是否收到，并務(wù)必在此告知本輪次返回征詢意見表的截止日期，以免影響研究進(jìn)度的開展。

第五步：分析第二輪專家咨詢結(jié)果。收齊并整理第二輪各位專家返回的咨詢表。建立Excel數(shù)據(jù)庫，將各位專家的評(píng)分信息錄入Excel數(shù)據(jù)庫，根據(jù)德爾菲法評(píng)價(jià)指標(biāo)體系，再次計(jì)算各項(xiàng)指標(biāo)并將主要分析結(jié)果通過PPT進(jìn)行展示。根據(jù)事先設(shè)定的評(píng)估輪次，或評(píng)價(jià)指標(biāo)中的協(xié)調(diào)系統(tǒng)來決定是不是終止德爾菲法專家意見征詢。如果還需要繼續(xù)開展，重復(fù)執(zhí)行第四步和第五步即可。

第六步：完成分析報(bào)告。經(jīng)最后一輪次的德爾菲法專家征詢意見表內(nèi)容進(jìn)行整理，篩選出主要指標(biāo)，得到目標(biāo)結(jié)果，或?qū)⒎种笜?biāo)體系進(jìn)行合并（常用矩陣法、權(quán)重法等）。

3 德爾菲法評(píng)價(jià)指標(biāo)體系

德爾菲法研究結(jié)果的可靠性是基于德爾菲法有一套完整的指標(biāo)評(píng)價(jià)體系。德爾菲法指標(biāo)評(píng)價(jià)體系一共包括9個(gè)指標(biāo)，分別從數(shù)據(jù)采集的代表性、權(quán)威性；數(shù)據(jù)分析的綜合性、可靠性、變異度等多個(gè)維度進(jìn)行綜合評(píng)價(jià)，保證了研究所采集數(shù)據(jù)分析的全面性和可靠性。

EAC：即咨詢表的有效回收率，反映了專家對(duì)該項(xiàng)工作的支持程度，積極系數(shù)越大表明專家對(duì)該工作越支持，咨詢結(jié)果越可靠。EAC的計(jì)算公式為：EAC=咨詢表回收份數(shù)/咨詢表發(fā)放份數(shù)×100%。EAC的最低標(biāo)準(zhǔn)為50%，當(dāng)EAC<50%時(shí)研究結(jié)果的可靠性將被質(zhì)疑；當(dāng)EAC>70%時(shí)，表明德爾菲法應(yīng)用較好，結(jié)果可行。實(shí)際執(zhí)行時(shí)，研究者通過與專家積極溝通，往往可以使EAC達(dá)到100%。

專家權(quán)威系數(shù)（Cr）：反映專家的權(quán)威程度，一般由2個(gè)因素構(gòu)成。如表1所示，Cr包括專家對(duì)指標(biāo)做出判斷依據(jù)（Ca）和專家對(duì)指標(biāo)的熟悉程度（Cs），其計(jì)算公式為Cr=（Ca+Cs）/2[2]。在實(shí)際操作時(shí)，研究者可以計(jì)算每一個(gè)問題條目的Cr，也可以整體上給出一份征詢意見表的整體Cr。如果采用第一種方法，協(xié)調(diào)分析小組后續(xù)需要將每一個(gè)問題條目的Cr進(jìn)行匯總，通過計(jì)算平均值或中位數(shù)來得到同一個(gè)專家對(duì)整體條目的Cr，或不同專家對(duì)同一個(gè)問題的Cr。如果采用第二種方法，協(xié)調(diào)分析小組同樣可以通過計(jì)算平均值或中位數(shù)來評(píng)價(jià)邀請(qǐng)的所有專家對(duì)征詢意見表的整體評(píng)價(jià)權(quán)威性情況。

評(píng)分平均值（M）：n個(gè)對(duì)象對(duì)某指標(biāo)評(píng)分的算術(shù)平均值，反映專家對(duì)該指標(biāo)的整體評(píng)分情況。M越大，說明該指標(biāo)越重要。專家評(píng)分標(biāo)準(zhǔn)可參考表2中評(píng)價(jià)等級(jí)和量化值，或自行制定評(píng)分標(biāo)準(zhǔn)。M的計(jì)算公式：Mj=（J1+J2+J3+……+Jn）/n。其中，Mj：j指標(biāo)的算術(shù)平均值；Jn：第n個(gè)對(duì)象對(duì)j指標(biāo)的評(píng)分。

評(píng)分加權(quán)平均值（Mw）：是將n個(gè)對(duì)象的Cr作為權(quán)重對(duì)某指標(biāo)評(píng)分的算術(shù)平均值進(jìn)行加權(quán)處理。指標(biāo)要素Mw越大，該指標(biāo)的相對(duì)重要性越高。Mw的計(jì)算公式為：Mwj=（Cr1J1+Cr2J2+……+CrnJn）/n。其中，Jn：第n個(gè)對(duì)象對(duì)j指標(biāo)的評(píng)分；Crn：第n個(gè)對(duì)象對(duì)j指標(biāo)的權(quán)威系數(shù)。

滿分比（K）：認(rèn)為某個(gè)指標(biāo)很重要的專家數(shù)（即給滿分的專家數(shù)）占全體評(píng)分專家的百分比。K的計(jì)算公式為：Kj=Sjx/Sjn×100%，其中Sjx：j指標(biāo)給滿分的專家數(shù)；Sjn：j指標(biāo)評(píng)分的所有專家數(shù)。Kj取值在0～1之間，Kj值越大指標(biāo)重要性越高，當(dāng)Kj>50%，該指標(biāo)可確定核心指標(biāo)。

評(píng)分等級(jí)和（T）：所有專家對(duì)某個(gè)指標(biāo)評(píng)分等級(jí)的總和，反映某指標(biāo)的重要性。T的計(jì)算公式為：Tj=（J1+J2+J3+……+Jn），其中Tj：j指標(biāo)的評(píng)分等級(jí)和，Jn：第n個(gè)對(duì)象對(duì)j指標(biāo)的評(píng)分。

變異系數(shù)（CV）：所有專家對(duì)某個(gè)指標(biāo)評(píng)分等級(jí)的標(biāo)準(zhǔn)差與均數(shù)之比，說明專家對(duì)該指標(biāo)相對(duì)重要性認(rèn)識(shí)的波動(dòng)程度。CV的計(jì)算公式為：CVj=STDj/Mj。其中，STDj：j指標(biāo)的評(píng)分標(biāo)準(zhǔn)差；Mj：j指標(biāo)的評(píng)分均值。在進(jìn)行綜合分析時(shí)，指標(biāo)的CV越小，則表明專家評(píng)分的一致程度越高，一般認(rèn)為當(dāng)CV<0.25時(shí)，研究結(jié)果的變異性小，可靠性好。

協(xié)調(diào)系數(shù)（W）：反映評(píng)分專家對(duì)所有指標(biāo)評(píng)價(jià)意見的協(xié)調(diào)程度，用以檢驗(yàn)專家意見是否達(dá)成一致。W取值范圍0～1，W值越大，則表明協(xié)調(diào)程度越好。一般情況下，當(dāng)W>0.50時(shí)，即為協(xié)調(diào)程度較好。W的計(jì)算公式如下：

專家W可以通過計(jì)算“W顯著性檢驗(yàn)”來判定W的協(xié)調(diào)性優(yōu)劣。在SPSS軟件中，選擇“統(tǒng)計(jì)分析→非參數(shù)檢驗(yàn)→K個(gè)相關(guān)樣本的檢驗(yàn)→肯德爾檢驗(yàn)”即可計(jì)算W值，同時(shí)給出P值，當(dāng)P<0.05時(shí)，說明專家評(píng)估或預(yù)測(cè)協(xié)調(diào)性好，結(jié)果可取[3]。

指標(biāo)期望值（E）：根據(jù)每一個(gè)指標(biāo)的Mw、T、CV和K，用“等概率原則”求出他們的E，以評(píng)價(jià)各指標(biāo)相對(duì)重要性的大小。如表3所示，項(xiàng)目組通過邀請(qǐng)16名專家，應(yīng)用德爾菲法篩選出臨床研究專題培訓(xùn)課程核心的評(píng)分，表內(nèi)數(shù)據(jù)展示的是19個(gè)培訓(xùn)課程內(nèi)容的“Mw”“T”“CV”和“K”等4個(gè)指標(biāo)值以及依據(jù)數(shù)值大小參考“秩和檢驗(yàn)”編秩原則所確定的秩次大小。在表3計(jì)算出19個(gè)培訓(xùn)課程內(nèi)容“Mw”“T”“CV”和“K”的秩次后，將每一個(gè)培訓(xùn)課程內(nèi)容的4個(gè)評(píng)估指標(biāo)的秩次相加后計(jì)算其平均值，得到每一個(gè)培訓(xùn)課程內(nèi)容的E，然后依據(jù)E的大小進(jìn)行排序，結(jié)果見表4。根據(jù)E的大小，可以得出專家綜合優(yōu)選出的前10位的臨床研究培訓(xùn)課程包括臨床研究數(shù)據(jù)分類和統(tǒng)計(jì)分析基礎(chǔ)、臨床研究設(shè)計(jì)要點(diǎn)和規(guī)范、臨床研究選題和研究分類、臨床研究的數(shù)據(jù)采集和過程管理、臨床研究科學(xué)性立項(xiàng)和倫理審查、病例報(bào)告表設(shè)計(jì)和編制、臨床研究數(shù)據(jù)質(zhì)量核查和質(zhì)量控制要點(diǎn)、臨床研究相關(guān)管理要求、科研論文撰寫要點(diǎn)和規(guī)范和臨床研究數(shù)據(jù)集和數(shù)據(jù)統(tǒng)計(jì)分析。

4 德爾菲法應(yīng)用注意事項(xiàng)

應(yīng)用德爾菲法開展定性研究時(shí)，須注意以下幾個(gè)問題。第一，根據(jù)研究主題制定意見征詢專家的納入標(biāo)準(zhǔn)，并嚴(yán)格按照標(biāo)準(zhǔn)邀請(qǐng)專家。鑒于德爾菲法的結(jié)果完全依賴于征詢專家的打分，因此意見征詢專家選擇的權(quán)威性和適合度就決定了研究結(jié)果的價(jià)值。建議研究者一定要選擇該研究領(lǐng)域的權(quán)威專家，同時(shí)兼顧專家所來自的地區(qū)的代表性，人數(shù)以15～20人為宜。第二，在每一輪次的專家意見征詢時(shí)，研究團(tuán)隊(duì)要及時(shí)和專家溝通，無論是郵寄或發(fā)送電子郵件，發(fā)送后均應(yīng)向各位專家確認(rèn)是否收到，并務(wù)必告知返回征詢意見表的截止日期，以免影響研究進(jìn)度的開展，還可借此提高專家的應(yīng)答率、應(yīng)答速度、問卷回收率和EAC。第三，在制定征詢意見表的“評(píng)分標(biāo)準(zhǔn)”時(shí)，研究團(tuán)隊(duì)可以參考本文中的表1和表2，也可以自行制定評(píng)分標(biāo)準(zhǔn)，但應(yīng)在撰寫研究報(bào)告時(shí)，于方法學(xué)部分交代清楚評(píng)分標(biāo)準(zhǔn)的細(xì)則和依據(jù)。第四，關(guān)于如何確定德爾菲法開展的輪次及結(jié)束標(biāo)準(zhǔn)。一般有2個(gè)選擇：①事先設(shè)定好德爾菲法開展的輪次，達(dá)到設(shè)定的輪次后就可以終止研究。例如，事先設(shè)定好開展二輪次的德爾菲專家咨詢，當(dāng)做好第二輪次的專家意見征詢后，無論專家意見是否統(tǒng)一，都應(yīng)結(jié)束研究。②當(dāng)專家意見達(dá)成一致，結(jié)果趨于穩(wěn)定時(shí)結(jié)束德爾菲專家咨詢。專家意見達(dá)成一致意見的判定標(biāo)準(zhǔn)常規(guī)用“專家W”判定，W值越大，協(xié)調(diào)程度越好。一般情況下，當(dāng)W>0.50時(shí)，協(xié)調(diào)程度較好。同時(shí)，可以通過計(jì)算“W顯著性檢驗(yàn)”來判定W的協(xié)調(diào)性優(yōu)劣，當(dāng)P<0.05時(shí)，說明專家評(píng)估或預(yù)測(cè)協(xié)調(diào)性好，結(jié)果可取，可以結(jié)束德爾菲法專家咨詢。

參考文獻(xiàn)

[1] 王瑞平， 郭曉芹， 畢安華. 2010年松江區(qū)上海世博會(huì)傳染病風(fēng)險(xiǎn)評(píng)估分析[J]. 疾病監(jiān)測(cè)， 2011， 26（4）： 305-309.

[2] 李仁忠， 梁明理， 陳誠， 等. 德爾菲法篩選耐多藥結(jié)核病診斷治療管理評(píng)價(jià)體系研究[J]. 中華預(yù)防醫(yī)學(xué)雜志， 2012， 46（4）： 348-351.

[3] 程琮， 劉一志， 王如德. Kendall協(xié)調(diào)系數(shù)W檢驗(yàn)及其SPSS實(shí)現(xiàn)[J]. 泰山醫(yī)學(xué)院學(xué)報(bào)， 2010， 31（7）： 487-489.