德尔菲专家会商法在定性研究中的应用

高深甚 王瑞平

摘 要 德尔菲专家会商法（Delphi method）是一种基于专家对某些问题做出独立评价的系统的、互动的定性研究方法。该方法具有函询和信息反馈、独立性、时间空间自由性、分析指标可控性和权威性等优点，近年来在临床研究方案构建、评价指标体系优化等方面得到了广泛应用。本文从德尔菲法概念入手，重点介绍德尔菲法的实施步骤、评价指标体系、具体指标计算方法和应用示例，以期为临床工作者和研究人员应用德尔菲专家会商法开展临床研究的定性分析提供参考。

关键词 德尔菲法 定性研究 评价指标体系 指标期望值

中图分类号：R-3； G312 文献标志码：C 文章编号：1006-1533（2024）07-0041-04

引用本文 高深甚， 王瑞平. 德尔菲专家会商法在定性研究中的应用[J]. 上海医药， 2024， 45（7）： 41-44； 70.

基金项目：上海市卫生健康委员会卫生行业临床研究专项（202240371）；上海申康医院发展中心第二轮促进市级医院临床技能与临床创新三年行动计划——研究型医师创新转化能力培训项目（SHDC2022CRS053）；上海市皮肤病医院引进人才科研基金项目（2021KYQD01）；上海人才发展基金资助项目（2021SHRCFZ01）；上海市医院协会醫院管理研究基金项目（X2022117）

Application of the Delphi expert conferencing method in qualitative research

GAO Shenshen1， WANG Ruiping2

（1. Shanghai Clinical Research Promotion and Development Center， Shanghai Shenkang Hospital Development Center， Shanghai 200041， China； 2. Clinical Research & Innovation Center， Shanghai Skin Disease Hospital， Shanghai 200443， China）

ABSTRACT Delphi expert conferencing method （Delphi method） is a systematic and interactive qualitative research method based on independent evaluation of certain issues by experts. The method has the advantages of correspondence and information feedback， independence， time and space freedom， controllability of analysis indexes and authority. In recent years， it has been widely used in the construction of clinical research protocols and optimization of evaluation index systems. This paper starts from the concept of Delphi method， and focuses on its implementation steps， evaluation index system， specific index calculation method and application examples， so as to provide reference for clinical workers and researchers to apply Delphi method to carry out qualitative analysis of clinical research.

KEY WORDS Delphi method； qualitative research； evaluation indicator system； expected value of indicators

德尔菲专家会商法，简称德尔菲法（Delphi method），是一种基于专家对某些问题做出独立评价的系统的、互动的定性研究方法。它在广泛征询专家意见的基础上，经过多轮的信息反馈与交流，使意见逐步趋于一致，最终得到比较一致且可靠性较好的结论或方案。德尔菲法具有函询、信息互动反馈、独立性、时间空间自由性、分析指标可控性和权威性等优点，近年来在临床研究方案构建、评价指标体系优化等方面得到广泛应用。德尔菲法常用于单维度指标筛选评价，如“银屑病临床研究中医评价指标体系构建和优选”“多耐药结核病诊断治疗管理评价体系指标筛选”等；或常用于多维度指标综合评价，如“某省卫生城市建设指标筛选综合评价”“带状疱疹病人临床护理效果的综合评价”等。本文介绍德尔菲法的实施步骤、评价指标体系和计算方法，并以“基于德尔菲专家会商法制定临床研究培训课程核心内容研究”为例介绍德尔菲法的具体应用方法，以期为临床研究人员应用德尔菲法开展定性研究提供参考。

1 德尔菲法的定义

德尔菲法是一种定性研究方法，于1946年由美国兰德公司创始实行，是一种反馈匿名函询法，其流程是在对所要预测的问题征得专家的意见之后，进行整理、归纳、统计，再匿名反馈给各专家，再次征求意见，再集中，再反馈，直至得到一致的意见。因此，德尔菲法的本质是在广泛征询专家意见的基础上，经过多轮的信息反馈与交流，使意见逐步趋于一致，最终得到比较一致且可靠性较好的结论或方案。德尔菲法在医学中的应用，最早开始于对护理工作的研究，并且在使用过程中显示了它的优越性和适用性，受到越来越多研究者的青睐。近年来，德尔菲法在临床研究方案构建、评价指标体系优化等方面得到广泛应用，它具有函询、信息互动反馈、独立性、时间空间自由性、分析指标可控性和权威性等优点，常用于单维度指标的筛选评价或多维度指标的综合评价。

2 德尔菲法的实施步骤

德尔菲法的实施是在对所要研究的问题征得专家的匿名反馈意见之后，进行整理、归纳和统计，再匿名反馈给各专家，再次征求意见，再集中统计和反馈，直至得到一致的意见[1]。德尔菲法的实施应用一般至少包括6个步骤：

第一步，前期准备工作。课题组应根据研究目标成立德尔菲法实施协调分析小组，一般由3～5人组成，包括组长1人，组织协调专员1～2人，数据采集和分析专员1～2人。开展德尔菲法定性研究前，协调分析小组应至少召开一次全员会议，明确任务分工，同时负责制定项目征询专家的遴选标准和后期的具体专家招募工作，一般邀请15人左右即可。此外，协调分析小组还应根据研究目的查阅文献，制定现场征询表，并按照邀请专家的数量，将征询表打印好备用。

第二步，开展第一轮专家咨询。德尔菲法协调分析小组在组长统一指挥下，将前期打印好的征询表和参考资料（德尔菲法简介、研究目的、研究背景信息等）逐份整理并做好标记，装入信封或做成压缩文件，通过信件或电子邮件方式的发送出去。如果通过信件邮寄，建议采取挂号信或特快专递等方式寄送，这样可查询信件的实时状态，以防丢失。如果采用电子邮件发送，应收集各位专家的电子邮箱，整理好后统一发送出去。须注意的是，无论是邮寄或发送电子邮件，发出后务必均向各位专家确认是否收到，并告知返回征询意见表的截止日期，以免影响研究进度的开展，同时还能借此提高专家的应答率，改善专家积极系数（expert active coefficient， EAC）。

第三步：分析第一轮专家咨询结果。根据前期约定的截止日期，收齐并整理好各位专家返回的咨询表。建立Excel（电子表格）数据库，将各位专家的评分信息录入Excel数据库，根据德尔菲法评价指标体系，计算各项指标并将主要分析结果通过PPT（演示文稿）进行展示。在此基础上，参考第一轮专家意见，可对评价指标系统进行适当的调整，制定第二轮专家咨询表备用。

第四步：开展第二轮专家咨询。德尔菲法协调分析小组在组长统一指挥下，将修订好的第二轮征询表、第一轮专家评分的整体分析结果（PPT展示）逐份整理并做好标记，装入信封或做成压缩文件，通过信件或电子邮件的方式发送出去。同样应注意的是，无论是邮寄或发送电子邮件，发出后均需向各位专家确认是否收到，并务必在此告知本轮次返回征询意见表的截止日期，以免影响研究进度的开展。

第五步：分析第二轮专家咨询结果。收齐并整理第二轮各位专家返回的咨询表。建立Excel数据库，将各位专家的评分信息录入Excel数据库，根据德尔菲法评价指标体系，再次计算各项指标并将主要分析结果通过PPT进行展示。根据事先设定的评估轮次，或评价指标中的协调系统来决定是不是终止德尔菲法专家意见征询。如果还需要继续开展，重复执行第四步和第五步即可。

第六步：完成分析报告。经最后一轮次的德尔菲法专家征询意见表内容进行整理，筛选出主要指标，得到目标结果，或将分指标体系进行合并（常用矩阵法、权重法等）。

3 德尔菲法评价指标体系

德尔菲法研究结果的可靠性是基于德尔菲法有一套完整的指标评价体系。德尔菲法指标评价体系一共包括9个指标，分别从数据采集的代表性、权威性；数据分析的综合性、可靠性、变异度等多个维度进行综合评价，保证了研究所采集数据分析的全面性和可靠性。

EAC：即咨詢表的有效回收率，反映了专家对该项工作的支持程度，积极系数越大表明专家对该工作越支持，咨询结果越可靠。EAC的计算公式为：EAC=咨询表回收份数/咨询表发放份数×100%。EAC的最低标准为50%，当EAC<50%时研究结果的可靠性将被质疑；当EAC>70%时，表明德尔菲法应用较好，结果可行。实际执行时，研究者通过与专家积极沟通，往往可以使EAC达到100%。

专家权威系数（Cr）：反映专家的权威程度，一般由2个因素构成。如表1所示，Cr包括专家对指标做出判断依据（Ca）和专家对指标的熟悉程度（Cs），其计算公式为Cr=（Ca+Cs）/2[2]。在实际操作时，研究者可以计算每一个问题条目的Cr，也可以整体上给出一份征询意见表的整体Cr。如果采用第一种方法，协调分析小组后续需要将每一个问题条目的Cr进行汇总，通过计算平均值或中位数来得到同一个专家对整体条目的Cr，或不同专家对同一个问题的Cr。如果采用第二种方法，协调分析小组同样可以通过计算平均值或中位数来评价邀请的所有专家对征询意见表的整体评价权威性情况。

评分平均值（M）：n个对象对某指标评分的算术平均值，反映专家对该指标的整体评分情况。M越大，说明该指标越重要。专家评分标准可参考表2中评价等级和量化值，或自行制定评分标准。M的计算公式：Mj=（J1+J2+J3+……+Jn）/n。其中，Mj：j指标的算术平均值；Jn：第n个对象对j指标的评分。

评分加权平均值（Mw）：是将n个对象的Cr作为权重对某指标评分的算术平均值进行加权处理。指标要素Mw越大，该指标的相对重要性越高。Mw的计算公式为：Mwj=（Cr1J1+Cr2J2+……+CrnJn）/n。其中，Jn：第n个对象对j指标的评分；Crn：第n个对象对j指标的权威系数。

满分比（K）：认为某个指标很重要的专家数（即给满分的专家数）占全体评分专家的百分比。K的计算公式为：Kj=Sjx/Sjn×100%，其中Sjx：j指标给满分的专家数；Sjn：j指标评分的所有专家数。Kj取值在0～1之间，Kj值越大指标重要性越高，当Kj>50%，该指标可确定核心指标。

评分等级和（T）：所有专家对某个指标评分等级的总和，反映某指标的重要性。T的计算公式为：Tj=（J1+J2+J3+……+Jn），其中Tj：j指标的评分等级和，Jn：第n个对象对j指标的评分。

变异系数（CV）：所有专家对某个指标评分等级的标准差与均数之比，说明专家对该指标相对重要性认识的波动程度。CV的计算公式为：CVj=STDj/Mj。其中，STDj：j指标的评分标准差；Mj：j指标的评分均值。在进行综合分析时，指标的CV越小，则表明专家评分的一致程度越高，一般认为当CV<0.25时，研究结果的变异性小，可靠性好。

协调系数（W）：反映评分专家对所有指标评价意见的协调程度，用以检验专家意见是否达成一致。W取值范围0～1，W值越大，则表明协调程度越好。一般情况下，当W>0.50时，即为协调程度较好。W的计算公式如下：

专家W可以通过计算“W显著性检验”来判定W的协调性优劣。在SPSS软件中，选择“统计分析→非参数检验→K个相关样本的检验→肯德尔检验”即可计算W值，同时给出P值，当P<0.05时，说明专家评估或预测协调性好，结果可取[3]。

指标期望值（E）：根据每一个指标的Mw、T、CV和K，用“等概率原则”求出他们的E，以评价各指标相对重要性的大小。如表3所示，项目组通过邀请16名专家，应用德尔菲法筛选出临床研究专题培训课程核心的评分，表内数据展示的是19个培训课程内容的“Mw”“T”“CV”和“K”等4个指标值以及依据数值大小参考“秩和检验”编秩原则所确定的秩次大小。在表3计算出19个培训课程内容“Mw”“T”“CV”和“K”的秩次后，将每一个培训课程内容的4个评估指标的秩次相加后计算其平均值，得到每一个培训课程内容的E，然后依据E的大小进行排序，结果见表4。根据E的大小，可以得出专家综合优选出的前10位的临床研究培训课程包括临床研究数据分类和统计分析基础、临床研究设计要点和规范、临床研究选题和研究分类、临床研究的数据采集和过程管理、临床研究科学性立项和伦理审查、病例报告表设计和编制、临床研究数据质量核查和质量控制要点、临床研究相关管理要求、科研论文撰写要点和规范和临床研究数据集和数据统计分析。

4 德尔菲法应用注意事项

应用德尔菲法开展定性研究时，须注意以下几个问题。第一，根据研究主题制定意见征询专家的纳入标准，并严格按照标准邀请专家。鉴于德尔菲法的结果完全依赖于征询专家的打分，因此意见征詢专家选择的权威性和适合度就决定了研究结果的价值。建议研究者一定要选择该研究领域的权威专家，同时兼顾专家所来自的地区的代表性，人数以15～20人为宜。第二，在每一轮次的专家意见征询时，研究团队要及时和专家沟通，无论是邮寄或发送电子邮件，发送后均应向各位专家确认是否收到，并务必告知返回征询意见表的截止日期，以免影响研究进度的开展，还可借此提高专家的应答率、应答速度、问卷回收率和EAC。第三，在制定征询意见表的“评分标准”时，研究团队可以参考本文中的表1和表2，也可以自行制定评分标准，但应在撰写研究报告时，于方法学部分交代清楚评分标准的细则和依据。第四，关于如何确定德尔菲法开展的轮次及结束标准。一般有2个选择：①事先设定好德尔菲法开展的轮次，达到设定的轮次后就可以终止研究。例如，事先设定好开展二轮次的德尔菲专家咨询，当做好第二轮次的专家意见征询后，无论专家意见是否统一，都应结束研究。②当专家意见达成一致，结果趋于稳定时结束德尔菲专家咨询。专家意见达成一致意见的判定标准常规用“专家W”判定，W值越大，协调程度越好。一般情况下，当W>0.50时，协调程度较好。同时，可以通过计算“W显著性检验”来判定W的协调性优劣，当P<0.05时，说明专家评估或预测协调性好，结果可取，可以结束德尔菲法专家咨询。

参考文献

[1] 王瑞平， 郭晓芹， 毕安华. 2010年松江区上海世博会传染病风险评估分析[J]. 疾病监测， 2011， 26（4）： 305-309.

[2] 李仁忠， 梁明理， 陈诚， 等. 德尔菲法筛选耐多药结核病诊断治疗管理评价体系研究[J]. 中华预防医学杂志， 2012， 46（4）： 348-351.

[3] 程琮， 刘一志， 王如德. Kendall协调系数W检验及其SPSS实现[J]. 泰山医学院学报， 2010， 31（7）： 487-489.