基于德尔菲法的高校科研绩效评价体系研究

2012-04-29 00:44汪静李兴江杨友文周甄武
科教导刊 2012年22期
关键词:德尔菲科研工作绩效评价

汪静 李兴江 杨友文 周甄武

摘要随着科教兴国战略的实施和国家近年来对科技投入的增加,我国高等院校的科研实力不断增强,但是随之而来的科研绩效评价问题也日益突出。评价指标多而杂、评价标准不科学以及人为主观因素干扰等诸多问题,已经严重影响了高校作为科技创新重要力量的发挥。针对这一现状,本文在分析了高校科研工作的特点和运行机制的基础上,应用德尔菲法建构出一套合理可靠的评价体系,为高校科研绩效评价提供了一种新的方向。

关键词德尔菲法高等院校科研绩效评价指标体系

0 引言

绩效评价体系是以实际的业绩效果为考核评价依据的价值衡量体系,可广泛地应用于现代社会行政、教育、经济等领域,从而对被评价对象做出合理、量化的评定。①近年来,随着我国高校科研实力的不断提升,科研绩效评价也逐步被引入到高校中来。

我国高校的科研绩效评价体系起步于20 世纪70 年代,大致经过了行政评价、同行评价、指标量化评价和国际科研计量评价四个阶段。②该体系评价结果不但是衡量高校科研水平、教师科研能力的重要指标,也是教师职称评审、岗位评聘和福利津贴的主要标准。虽然该体系对教师在学术上的科学发展能起到促进和激励作用,但是正是由于诸多利益的驱动,近年来高校内部对科研绩效评价的合理性和公正性的质疑声也愈来愈强烈,评价指标多而杂、评价标准不科学以及人为主观因素干扰等诸多问题,已经严重影响了高校作为科技创新重要力量的发挥。

鉴于此,本文尝试性地提出一种基于德尔菲法的高校科研绩效评价体系,通过科学合理可靠的多层次数据分析,既避免了评价指标多而杂、评价标准不科学,又规避了诸如人情风、官本位、打压异己以及 “马太效应”等人为主观干扰因素,从而构建一套科学公正合理的高校科研绩效评价体系方法。

1 基于德尔菲法的高校科研绩效评价体系

1.1 德尔菲法的涵义

德尔菲法是在20世纪40年代由O·赫尔姆和N·达尔克首创,经过T·J·戈登和兰德公司进一步发展而成的。该方法属于专家集体评价法,即专家以匿名的方式对调查者所提的问题发表意见,通过多轮次调查专家对问卷所提问题的看法,经过反复的征询、汇总、修改,使专家小组的预测意见趋于集中,最终获得具有统计学意义的结果,从而做出科学、公正、合理的结论,是一种利用集体智慧来确定各因素在评判问题或决策问题中的重要程度系数的有效方法之一。该方法具有较高的代表性和可靠性,被广泛地运用于各种评价指标体系的确定过程中。③

1.2 应用德尔菲法的方法和过程

(1)组成专家小组。专家的挑选是应用德尔菲法的前提,针对高校科研工作的特点,在应用德尔菲法前,需要按照所需要进行科研绩效评价的学科知识范围来确定专家。既要考虑到专家的学术科研能力,又要兼顾其本人的基本道德水平。考虑到具体实施的复杂程度,人数一般以不超过20人为宜。

(2)筛选评价指标、编制咨询问卷。问卷的设计是体现组织者能力的重要因素,选择哪些评价指标,如何根据科研工作的实际情况确定评价指标的层次结构,都是决定应用德尔菲法成功与否的关键因素。

(3)高校科研绩效评价指标体系的确立。根据德尔菲法的指标确立原则,结合高校科研工作的实际情况,本文给出了高校科研绩效评价指标体系的框架。本指标体系由科研项目及经费、发表学术论文及著作、成果(专利) 获奖情况以及参加学术活动情况4个一级指标构成。其中科研项目及经费包括纵向计划项目和横向合作项目两个二级指标;发表学术论文及著作包括论文质量和论文及著作数量两个二级指标;成果(专利) 获奖情况包括获奖成果和专利两个二级指标;参加学术活动情况包括学术会议大会报告、专业学会委员、专业学术期刊评委和导师任职情况4个二级指标;每个二级指标下又设若干条三级指标。

(4)确定关键性指标及其权重值。在确立了高校科研绩效评价指标体系的各级层次后,科研管理人员还需要根据高校科研实际情况,确定关键性指标及其权重值。根据表1,我们给出了4个一级指标的权重值:科研项目及经费0.3,发表学术论文及著作0.3,成果(专利) 获奖情况0.2,参加学术活动情况0.2。

(5)具体实施德尔菲法:发放高校科研绩效评价指标体系调查表给专家小组成员,收集所有专家对于每一个指标的评分值,然后进行汇总;②向专家小组成员第二次发放调查表(列有第一次调查其他人的意见),要求其根据其他人的观点第二次对每一个指标的分值进行评估,第二次收集后再次进行汇总;向专家小组成员第三次发放调查表(列有前两次调查汇总后其他人的意见),要求其第三次对每一个指标的分值进行评估后第三次收集汇总;组织者根据第三次收集的调查表数据计算出中间值,并作出最终评价。

2 结语

高校科研绩效评价是一项涉及因素众多、关系复杂的系统工程,因此建立一套科学、合理、公正、实用和可操作性的评价指标体系具有重要的现实意义。本文在分析了高校科研工作的特点和运行机制的基础上,基于德尔菲法提出了一种对科研绩效评价指标体系进行优化的思路和方法。该方法具有以下几个优势:

(1)资源利用的充分性。利用相关学科专家丰富的经验和学识,吸收了大量不同专家的意见,充分发挥专家的作用,集思广益,准确性高,实现了对相关学科领域资源的全面利用。

(2)指标体系的全面性。应用德尔菲法的高校科研绩效评价体系涵盖了科研项目、学术论文、著作、获奖成果、专利以及学术交流等评价指标,最大可能地保证了指标数据的全面性。

(3)最终结论的客观性和可信性。由于采用匿名或背靠背的方式,能使每一位专家能够独立地做出自己的判断,而不会受到其他人为主观因素的影响。因此匿名的调查方式极大地提高了咨询结果的客观性和可信性。

(4)最终结论的统一性。整个操作过程经过多轮次调查专家对问卷所提问题的看法,经过反复的征询、汇总、修改,使专家小组的预测意见趋于集中,最终获得具有统计学意义的结果,从而做出科学、公正、合理的结论。

本文基于德尔菲法对高校科研绩效评价指标体系提出了一种新的方法和思路,指标体系结构和权重值的确定以及经过几轮调查后综合计算中间值的计分法有效地解决了其他高校科研绩效评价的片面、不科学乃至不公正的问题,不但方法简单易行,而且也克服了同行评议容易受到人为主观因素干扰的缺点,将定性指标融入定量指标,打破了定性与定量的界限。对广大高校科技人员起到正确的激励和引导作用,从而达到了推动高校科研工作可持续性发展的目的。

猜你喜欢
德尔菲科研工作绩效评价
运城学院召开2022年学科建设与科研工作大会
西安航空学院第二届科研工作会议召开
德尔菲法构建肿瘤医院ICU患者身体约束评估量表
我校召开科研工作总结暨表彰大会
基于德尔菲法构建融合式旅救护所指标体系
基于BSC的KPI绩效评价体系探析
非营利组织绩效评价体系的构建
高等艺术院校科研工作研究
基于德尔菲法的上海某专科医院公开招聘的影响因素研究
气象部门财政支出绩效评价初探