基于层次分析法的临床项目绩效评价的构建及应用

杨永光，段文静，李立，张玉薇

(河南省人民医院，河南 郑州 450003)

科研绩效评价是确保科研项目顺利实施的重要工作，对科研工作的开展具有重要的导向作用。一方面，引导科研工作围绕国民经济及社会发展中的关键问题攻关；另一方面，通过绩效评价，保证科研经费的合理使用，提高产出比[1-2]。我国各级项目管理部门积极探索合理高效的科研绩效评价体系，推动科学研究工作的开展及成果的转化应用，积累了宝贵的经验。但也存在评价体系过于笼统，以偏概全的现象。比如临床医学类项目，不同于基础研究，基础研究评价体系更关注实验性和理论创新研究[3]，临床医学研究评价体系应强调技术创新及转化应用。本文尝试针对临床医学科研项目绩效进行评价，以期提高临床医学科研项目管理的规范性和科学性。

1 资料与方法

1.1 资料来源检索国内外文献，对医学科研项目的绩效评价文献进行归纳和整理。同时对2019年度办理结题的83项财政支持的临床研究项目和35项单位自筹经费支持临床研究项目科研产出进行整理和对比。

1.2 研究方法德尔菲法，是有效的判断预测法。按照德尔菲法原则，设计临床项目绩效评价表，采用函调的方法，征求11位科研管理专业的资深专家意见，本次咨询专家11人，硕士以上学历8人，从事科研管理工作10 a以上7人，高级职称7人，专家积极性和权威程度较高。相关专家对初步设计的临床科研项目绩效评价指标进行评判，并对专家意见进行整理、归纳、统计，在充分讨论、反复论证的基础上，提取临床研究项目的考核要素。

层次分析法，由美国运筹学家T.L.Saaty于本世纪70年代提出，是一种定性与定量相结合的决策分析方法。运用层次分析法，采取9度法打分，构建一个临床医学项目多层次的要素结构层，对构建的临床项目指标体系中的同一级指标两两进行对比，建同层次要素之间的判断矩阵，并对构建的绩效评价指标进行权重分配，对判断结果进行一致性检验。

2 结果

2.1 评价指标各层级判断矩阵及相应权重运用层次分析法对各层级指标两两进行比较，并进行赋值，建立判断矩阵。具体判断矩阵及权重见表1、2、3、4。

表1 判断矩阵科研产出相关指标权重(CI=0)

表2 判断矩阵社会效益相关指标权重(CI=0.07)

表3 判断矩阵学科团队建设相关指标权重(CI=0.02)

表4 判断矩阵资金使用相关指标权重(CI=0.01)

2.2 建立临床项目绩效评价指标体系经过对专家意见征集、归纳、统计，调整优化，最终形成一致意见，并构建了临床科研项目的绩效评价体系。最终形成以科研产出、社会效益、学科团队建设和资金使用4方面的临床项目的评价体系指标，所占权重分别为0.32、0.45、0.12、0.11。新构建的临床项目绩效评价指标具体见表5。

表5 临床项目绩效评价指标

2.3 临床项目绩效考核评价体系的效果分析2019年度，对自筹经费支持的35项临床研究项目进行验收，统计产出如下：发表论文172篇，专利47项，成果转化4项，开展新技术新业务33项，在国际学术会议上进行学术讲座、壁报展示、手术演示等学术交流活动73次，培养青年骨干85人。并与同期结题的财政经费资助项目进行比较，具体科研产出见表6。

表6 2019年度结题财政和自筹科研项目产出表

3 讨论

3.1 构建医学科技攻关类项目评价指标目前，临床医学类项目结题以科研论文为主要形式，这种评价体系导致大量低水平的学术论文的产出，甚至引发学术论文造假，学术腐败问题的发生，造成科研经费的极大浪费。作为医学科技攻关类项目，目的是解决医疗过程中的技术难题，促进医疗水平的提高。本研究在详细分析现有常规科研评价体系的基础上，运用德尔菲法确定临床科研项目绩效评价要素，并通过层次分析法计算各级指标的权重，建立临床医学类科研项目评价体系。这对于诊疗技术水平的提高、科研产出比例的提升及经费的高效使用具有重要作用，该研究结果对制定临床医学类科研项目考核体系将具有重要的指导意义。

3.2 注重医学科技攻关项目的社会效益在以往的科研项目绩效评价中，在发表论文数量和培养人才方面效果较好，这可能是论文发表和人才培养是科研项目研究的目标以及表现形式；这也可能是一些科研人员把科学研究的目的从解决问题简化为发表论文，以论文作为评价标准，过度追求论文发表[4]；过于强调论文数量，甚至把论文和著作在科研项目绩效评估中所占的比重超过于学术创新指标[5]。本次绩效评价注重科研项目的整体评价，不再过度强调论文、著作和专利等数量，注重项目的社会效益[6]，注重新技术新业务以及新技术成果的推广应用，让广大患者共享科研成果，这与霍蕊莉、梁永刚等[7-8]的研究一致。注重医学科技成果的转化，这与国家三级公立医院绩效考核指标相一致。在今后选题过程中要积极引导科研选题，注重产学研合作，提高诊疗技术水平和解决临床问题，关注项目效果，提高成果转化意识，切实提高成果转化率。同时注重国际大会发言、行业标准指南制定等，提高医疗技术水平和医院知名度。

3.3 加强学科团队建设和经费执行本次学科团队建设不仅仅是简单的进行人才培养，也重视学科建设，细分亚专业，提高整体诊疗水平、科室发展和平台建设，提高学术影响力，在医院排行榜中，使医院的学科排名得到了提升。科研经费是项目管理的重要环节，是科研工作得以进行的物质保障，本次构建的绩效指标中，从经费到位、执行和管理等方面进行评价，提高了经费执行的权重，有利于提高经费的使用效益。

4 小结

本次绩效评价指标，分析了现有科研评价体系存在的问题及其成因，运用德尔菲法和层次分析法，构建更为符合医学科技攻关类项目规律的评价体系。本次绩效评价体系结合了以往科研项目的评价依据，提高科技项目质量管理水平的同时，提高了科研经费的使用效益，可以为医学科技攻关项目绩效评价提供参考和借鉴，同时为管理部门优化该类项目的管理提供依据。但是本次医学科技攻关项目的绩效考核未能把发表高质量论文纳入体系，考核体系还需要进一步修改和完善。