基于Delphi法的船舶电气工程“双重”专业毕业学员质量评价研究

叶志浩, 夏益辉, 杨 锋, 李明杰

(海军工程大学 电气工程学院, 湖北 武汉 430033)

在教育部发布的最新的电气工程学科评价结果中,海军工程大学电气工程学科的评价结果为“A-”,为学校拓展建设“军用电气——综合电力”学科提供了有利的基础支撑。在教育部“双一流”建设战略推动下,军队院校开展了重点学科和重点专业的“双重”建设和发展,通过充分了解和掌握船舶电气工程“双重”专业毕业学员培养质量,可以对毕业学员培养质量和“双重”专业的教学质量与水平进行客观评价,整理的调查结果是分析教学水平、改革教学方法和调整教学内容以及制订“双重”专业教学改革方案等的重要依据。开展船舶电气工程“双重”专业质量评价的作用主要有以下4个方面：

(1) 调整教育模式。改变传统的电气工程教育模式,采用以能力和素养为导向、以船舶需求为基础的教学方式,培养学员以解决问题为基础的学习与独立学习相结合的方法。

(2) 应对高考模式转变。我国即将出台的高考改革方案,将实现两类人才、两种模式的高考：一是技术技能人才的高考,考试内容为技能加文化知识；二是现在的高考,即学术型人才高考。

(3) 促进电气工程专业改进教学工作。建立健全毕业学员质量调查评价体系,对能够反映教学质量和水平的重要信息(业务水平、职业素养和工作能力等)进行收集,并作为教育计划调整和教学工作改进的依据。

(4) 体现船舶需求。毕业学员毕业后服务于船舶,所以毕业学员质量水平和船舶需求必须相匹配。通过毕业学员质量评价体系,可以将船舶对人才的需求及毕业学员在社会环境中的表现反馈给专业系,专业系可以此为依据调整培养计划、课程结构、教学内容和方法,完善考核体系,以适应不断变化的船舶需求。

文献[1]对高职课程、大学语文课程质量,建立了由教师、学生、管理者三个构建的课程质量评价体系；文献[2]对护理本科生质量评价体系研究现状进行了概述,提出了一些有益建议；文献[3]对多维课堂教学质量评价体系进行了分析,主要围绕如何构建评价指标、何种评价方式和如何验证评价结果等重点进行了探讨；文献[4]对大学生质量评价体系进行了研究,构建了包括大学生个体、学校、用人单位、家庭和社会等5个一级指标和15个二级指标的评价体系；文献[5]对基于行动导向的高职课堂教学质量评价体系进行了研究,包括高职课堂教学质量评价方案的设计、指标体系制定过程、结构与内涵等内容。此外,文献[6-8]也对不同课程和专业的培养质量评价体系进行了探讨和研究,文献[9-12]对其他专业的人才培养模式和相关内容进行了论述。虽然已有多种质量评价体系方法用于不同课程和专业的培养质量进行评价,很多成果被用于实际教学当中,但由于船舶电气工程毕业学员所从事的工作和任务等的特殊性,使得已有质量评价体系并不适用于评价其培养质量和指导后续教学改革等活动,为此,必须对船舶电气工程专业质量评价指标体系进行深入研究和探讨。

毕业学员培养质量评价体系的构建是一项科学、系统、严密的工程,本项目通过理论探索和实践论证,在科学地构建评价指标体系的基础上,对电气工程本科毕业学员质量评价体系进行深入研究,为船舶电气工程教育质量评价提供更为科学而有力的支撑,同时为教育改革贡献力量。

1 毕业学员质量评价体系建立

根据电气工程专业特点以及军队院校毕业学员能力素质的现状,并参考大量文献,提出电气工程专业毕业学员质量评价指标体系。大量调查和研究结果表明,毕业学员的能力素质由思想信念、知识水平、工作能力、身体和心理健康以及个人行为素质5个方面共同决定,因此在对船舶电气工程专业毕业学员质量进行评价的时候,主要从这5个方面入手,具体指标如图1所示。

图1 质量评价指标

2 电气工程专业毕业学员质量评价指标体系研究

指标及指标体系的科学性是准确获得评价信息的前提条件,只有完善指标体系,才能够确保任一指标的可行性和正确性,乃至整个指标体系的完整性和系统性[13]。对于如何构建评价指标体系以及选择何种指标评价方法,应根据客观实际情况和需要进行选择,包括研究对象是谁、研究目的是什么以及客观实际情况是怎样等。本文针对船舶电气工程“双重”专业毕业学员作为研究对象、毕业学员培养质量结果作为研究目的,以及船舶电气工程“双重”专业作为客观实际情况开展研究。基于此,将德尔斐法应用于毕业学员培养质量体系研究中。

2.1 德尔斐法简介

德尔斐法(Delphi method) 亦称专家经验统计判断法,通过广泛征求专家意见并经多次信息交流和反馈修正,逐步统一专家意见,对评价对象做出定性与定量相结合的客观评价方法。该方法充分利用评价者的知识和经验,以集体意见来决定对某个问题的评判,是以多次反复交流的专家集体反馈意见为基础构建起来的,在指标体系筛选中已得到成功应用。

2.1.1 德尔斐法的特点

大量研究和实践结果表明,德尔斐法主要适用于：难于准确描述但通过集体判断可以得到有效解决的情况；考虑专家代表性和层次性等因素时,专家无法面对面交流或无法集中开会的情况；确保专家的多种成分情况,避免权威专家的意见压制其他参加者。因此,德尔斐法主要特点可概述为匿名性、反馈性和统计性。匿名性是确保每一名参加者的意见能够被真实地表达出来,避免部分参加者的意见被权威专家左右或者跟风；反馈性是指进行信息反馈,保证每一次统计时专家可根据实际情况对意见的修改,达到相互启发的目的；统计性是指统计每一轮的咨询结果,并对统计结果进行分析,最后得出量化结果,以此来确保统计结果的科学性。

2.1.2 采用德尔斐法应注意的问题及步骤

选择专家组和设计咨询表是德尔斐法核心的两个关键点。专家选择应考虑专家的责任心与积极性、丰富的理论知识或实践经验等,以及专家组的数量规模、专家组的代表性(层次性、专业性等)等多种条件,确保专家组选择的合理性和科学性。设计咨询表时必须层次清晰、问题明确。

从已有研究成果可知,采用德尔斐法构建指标体系主要步骤包括以下几个方面：根据研究对象和研究目标等时机需求,提出一套指标体系草案,并设计出专家咨询表初稿；根据专家选择的要求,确立专家组；获取专家组意见,可通过函询或其他方式征询,切忌不可集中召开会议来收取意见；组织者将每一轮咨询统计结果和资料反馈给专家组,供下一轮参考,一般需进行1～2轮的信息反馈。最后,对咨询统计结果进行分析处理,筛选和确立评价指标体系。

2.2 专家组确立方案

专家选择作为德尔斐法的一个关键环节,其选择是否合理直接决定了咨询结果的科学性、可靠性,所以专家组成员必须对研究内容具有深厚的理论知识和丰富的实践经验。因此,根据研究内容的特点,专家组成员的选择条件可归纳为：

(1) 具有一定的电气工程专业的理论知识和实践经验;

(2) 比较熟悉电气专业工作或长期从事电气专业教育研究;

(3) 积极性高,愿意回答专家咨询问卷;

(4) 能持续参加本研究的多轮咨询;

(5) 专家应在本研究领域从事5～10年以上。

依据以上条件,并结合年龄、职务、职称等,通过本校专家去函和电话联系,咨询了业内较知名的10名从事电气工程本科教学或从事基层船舶机电指挥等领域的专家。

2.3 专家咨询结果

评价指标体系是由若干个单项评价指标组成的整体,须根据评价目的和评价对象的特点来建立评价指标体系。建立评价指标体系除了遵循前面介绍的原则和要求外,还要按照下面的程序进行(见图2)。

图2 建立评估指标体系流程

(1) 目标分析：研究评价体系研究的目的或期望结果；

(2) 系统分析：采用系统工程的观点和方法,系统分析研究目标的影响因素及其相互间的关系；

(3) 属性分析：分析各个要素的本质属性及其权重；

(4) 结构分析：不同的目标结构,会带来不同的评估指标体系的形式；

(5) 信息来源分析：确保指标信息的来源可靠,包括数据库、统计分析、和专家咨询等各个方面；

(6) 权重计算：根据各要素对总目标贡献的大小,合理设计各要素在总目标中的权重；

(7) 归一化分析：指标相互比较的基础和总体评估的前提；

(8) 形成初步的评估指标体系；

(9) 专家咨询：评估指标体系初步形成之后,还需广泛征求专家、业务机关以及相关专业人员的意见和建议,形成比较完整的评估指标体系。

通过三轮咨询,专家意见基本统一,其对指标权重的意见变异系数趋于减小,三轮后二级指标中每一项指标变化系数在0～0.01之间,专家意见趋于一致,表1为专家咨询后各二级指标权重结果。

表1 二级指标权重结果

由表1可知,由于学员毕业后在部队服役,政治态度、理想信念属于方向性问题,不容有失,而工作态度在一定程度上决定学员工作动力,对毕业学员影响较大,因此在思想政治素质中,政治态度、理想信念和工作态度的比重较大。在知识结构中专业知识权重最高,主要缘于部分专家来自于一线船舶,实际工作中所需用到的知识是毕业学员最应必备的核心能力。在工作能力中指挥协调能力及解决问题能力最被看重。由于工作性质,毕业学员从事更多的并非技术工作,而是指挥工作,无指挥协调能力在船舶领域很难开展工作。同时,船舶作风雷厉风行,重结果不重过程,往往更看重问题的解决而不是过程。在身体心理素质中,心理素质尤其被关注。由于军事院校学员身体及意志力通常不是问题,而心理素质则在教学中往往被忽视,遇事沉着冷静、判断果断往往是战场上所需要的重要素质,甚至能左右战局的成败。个人仪态行为素质普遍权重较低,与船舶特殊环境有关,船舶工作空间狭小,对言行和仪表不甚重视,而相对工作作风通常以硬朗为主。

3 基于Delphi法的质量评价体系与调研结果对比分析

本课题组根据建立的电气工程专业毕业学员质量评价体系,设计了单位调查问卷,每道调查题目可以回答“很差”“差”“一般”“好”“优秀”5个选项,答案的分值如表2所示。将答案的最终分值与专家确定的权重相乘得到该题的加权分数,最后将每道题加权分数相加即为该单位对电气工程专业毕业学员的质量评价总分。经过对全部单位问卷结果的统计,平均成绩为85.76分。即电气工程专业毕业学员质量为“优秀”。问卷结果中,政工水平、基础理论、专业知识是评价中得分最低的三个指标,说明专业教学还有很大的改革空间。

表2 答案分值

4 结语

本文对船舶电气工程“双重”专业毕业学员质量评价体系的建立进行了分析与概述,并对所建立的质量评价体系采用Delphi法进行了分析与研究,给出了专家组方案确定条件和专家咨询对各个指标权重的分配。通过对基于Delphi法的质量体系评价结果与调研结果进行对比,得出两者对船舶电气工程“双重”专业毕业学员质量评价结果基本一致。通过对调查问卷结果进行分析,学员政工水平、基础理论和专业知识比较薄弱,说明专业教学仍须进一步加强。