工程管理专业教学效果满意度评价的实证分析

陆菊春 左小芳

(武汉大学经济与管理学院,湖北武汉430072)

工程管理专业教学效果满意度评价的实证分析

陆菊春 左小芳

(武汉大学经济与管理学院,湖北武汉430072)

本文以某高校工程管理专业毕业生为研究对象,以问卷调查的方式对教学效果满意度进行了实证分析,应用统计分析方法对调查结果进行信度和效度分析,运用验证性因子分析得出影响教学效果满意度的主要因素,由此提出提高教学效果满意度的对策建议,并提出了未来教学效果满意度的研究展望。

教学效果;满意度;影响因素;实证分析

一、引言

随着高等教育体制改革的不断发展,我国的高等教育事业有了很大的发展,如何确保教学质量的同步提高,是高等学校迫切需要重视的问题之一。进行教学效果满意度评价,有利于进—步深化高校教学改革,提高教学水平和教学质量。学生是学习的主体,通过对学生教学效果满意度的调查,才能对教学改革的结果做出客观的判断,根据评价所获取的有关信息,发现问题,找到差距,充分调动教师、教学管理人员和学生的积极性和主动性,不断改进教学工作,优化教学活动全过程,从而促进教学水平和教学质量的逐步提高。

由于毕业生经历了整个本科教学过程,对教学效果有比较完整的感受,本文即以某高校工程管理专业毕业生为调查对象,以问卷调查的方式对教学效果满意度进行调查评价,应用统计分析方法对调查结果进行信度和效度分析,并对问卷进行了一定的调整,得到了各题项因子载荷与公共因子方差解释贡献率,得出影响教学效果满意度的主要影响因素,由此提出提高教学效果满意度的对策建议,并提出了未来教学效果满意度的研究展望。

二、教学效果满意度调查问卷表的设计

指标的—般含义是“计划中规定达到的目标”①。评价指标是由—系列因素组成的,是一种具体的、可测量的、行为化的评价准则,是根据可测或可观察的要求而确定的评价内容,具有较强的目的性、可操作性和可测性。任何评价活动都要按照特定的目标和依据进行。教学工作评价的目标就是发现问题,提高教学质量,最终促进教育事业发展。要实现这一目标就需要建立完善的评价指标体系,为评价活动奠定基础。评价工作的顺利进行及其有效性在很大程度上取决于评价指标的建立。

对于学校的教学工作评价可从两个层面来理解:一是包括学校教学管理在内的教学工作评价;二是教师教学(主要是课堂教学)的评价②。本文的教学工作评价的主要范畴是第一种,即包括学校教学管理在内的教学工作评价。教学工作评价指标是根据特定的教育目标,对教育过程中的计划、组织、环境、教学等方面影响因素进行汇总细分所得到的评价标准,是教学工作各方面的具体体现。教学评价指标除了一般指标应具有的目的性、可操作性和可测性外,还应具备较强的教学导向性、实施针对性和规范约束性。教学效果满意度评价的目标就是发现问题、提高教学质量,要实现这一目标就需要建立完善的教学满意度评价指标体系,为评价活动奠定基础。因此教学效果满意度调查问卷主要包括以下方面:

第一,总体评价A。总体是由部分组成,但不等同简单的部分相加。因此,对教学工作的各环节进行评价并不能代替总体效果的评价。教学工作的总体满意度评价是学生对教学工作的整体效果的感知,例如对整个本科阶段的学习满意度、科研能力的提高、创新能力的提高、知识结构的优化等,因此对总体满意度评价主要从综合能力、科研能力、创新能力、知识结构优化、计算机能力、外语能力提高程度以及工作和所学专业关联度进行考虑。

第二,课程体系评价B。课程体系的设置是本科专业教学质量的根本。考察学生对课程体系满意度的评价主要从四年课程总体设置合理性、基础课时间与强度合理性、专业课时间与强度合理性、使用教材合理性、主辅学位制、双学位制等方面考虑。

第三,课堂教学评价C。课堂教学是向学生传授知识、进行能力和素质培养的主渠道,是实现教育目标的主要途径。学生对课堂教学的评价信息是教学工作评价必不可少的部分,学生对课堂教学的评价侧重于教学态度、教学方法、教学效果、学生的感受等方面③。

第四,实践环节评价D。实践教学在锻炼工程管理专业学生的实际操作能力,培养学生综合运用所学知识、解决实际问题的能力以及创新意识,在实际中巩固加强所学知识方面起着非常重要的作用。根据实践环节的特点,从实践时间、地点、内容、效果等方面进行评价。

三、实证分析

(一)调查对象与统计分析方法

本文以某高校2005—2009年毕业的毕业生为调查对象,由于毕业生所在地比较分散,在调查过程中主要采用网络问卷形式,共发出问卷180份,回收问卷153份,有效问卷141份,问卷回收率为85%,有效率为78%。

问卷的评价选项分为非常不满意、不满意、有点不满意、不知道、有点满意、满意、非常满意七类,在进行统计分析时,分别赋予1-7的数值,即:1-非常不满意,2-不满意,3-有点不满意,4-不知道,5-有点满意,6-满意,7-非常满意。应用SPSS17.0进行信度分析、探索性因子分析和描述统计,应用Lisrel8.7进行验证性因素分析。

(二)调查结果描述统计

根据问卷的调查结果对其进行描述统计分析,得到以下结果:

毕业生对以下几个方面的平均态度为同意(均值在5—6之间):A1综合能力的提高、A4知识结构的优化、A5计算机能力的提高、C12老师做到了教书育人、C2老师的教学态度都很积极、C9教学的软硬件设施良好。

毕业生对以下几个方面的平均态度为基本不同意(均值在3—4之间):D5实践效果良好、D4实践内容安排合理、B5专业课安排的强度合理性、B4专业课安排的时间合理性、B1四年课程安排的总体合理性、C4课堂气氛活跃。

毕业生对B8科研活动的参与(均值为2.95)平均态度为不同意;毕业生对教学态度的其他方面态度的均值都在4—5之间,即有点同意;总的来说,各题项平均均值的范围为2.95-5.58,总体偏低,即工程管理专业教学水平各方面都有待提高。

(三)信度与效度分析

信度分析是一种度量综合评价体系是否具有一定稳定性和可靠性的有效分析方法④。本调查中采用运用SPSS17.0软件用Cronbach'sα系数法进行信度分析,结果见表1所示。

表1 信度分析结果

由表1可知各子维度的格朗巴哈系数,除了总体评价部分在0.60—0.80之间,算是可以接受的范围外,其他各子维度的Cronbach's系数都大于0.80,说明各子维度的可信度良好。总体评价部分的格朗巴哈系数为0.754,可信度可以接受;课程体系评价部分的格朗巴哈系数为0.830,教学方法评价部分的格朗巴哈系数为0.898,实践环节评价部分的格朗巴哈系数为0.886,表明这些评价部分总体可信度良好。

效度是指测量工具或手段能够准确测出所需测量的事物的程度⑤。有的学者认为,效度分析最理想的方法是利用因子分析(即因素分析)测量量表或整个问卷的结构效度。因素分析即利用一组测量同一个构念的观察变量来估计背后的潜在变量⑥。在本研究中,采用探索性因子分析(EFA)和验证性因子分析(CFA)验证问卷数据的有效性,运用Bartlett球形检验进行探索性因子分析的条件检验。

1.探索性因子分析

探索性因子分析的条件检验。收集的数据是否适合做因子分析,首先需要进行KMO和Bartlett球形检验。统计显示KMO的值为0.527,说明样本偏小,但由于该调查本身的样本总量有限,故认为其基本达到要求;同时Bartlett球形检验给出的相伴概率为0.000,小于0.001,认为本问卷及其各因子组成项目的构建效度良好,适合做因子分析⑦。

探索性因子抽取结果。使用正交旋转法进行因子旋转后得到10个公共因子和各题项的因子载荷值。10个公共因子解释的总方差为82.427%。一般而言,绝对值大于0.3的因子负荷就是显著的⑧,项目在因子中的负荷越大,在解释因子时越重要,本文以因子载荷大于或等于0.5为题项显著影响公共因子的判定标准。

2.验证性因子分析

一般来说,使用者可以根据自己的偏好与分析软件所提供的指数类型评估理论假设模型的拟合度。目前最常见到的拟合评估策略除了卡方值与卡方显著性、卡方自由度比两种传统方式外,还有CFI、RMSEA、NNFI、GFI、SRMR等。在该调查分析中,我们就应用这些评鉴指标进行检验。应用LISREL软件的验证性因子分析模型的各项指标如下表2所示,拟合度良好,问卷调查结果是有效的。

表2 拟合度指标分析结果

(四)问卷修正与主要影响因素

由表2可知各项拟合度都可接受,即该问卷是具有有效性的。但各项指标的拟合度还可以提高,故我们对由探索性因子分析得到的10因子模型进行修正。即在抽取因子的过程中,把特征值大于1作为选取因子的原则,并利用方差最大正交旋转法,删除因子载荷绝对值小于0.5的项目;此外如果一个题项形成一个因子,在本研究中也予以剔除。根据上述原则,经过两次筛选,问卷调查各个题项在因子上的载荷值以及方差解释贡献率见图1。

从上述的探索性因子分析的结果可以看出,调整前10因子结构解释的总方差为82.427%,而8个因子结构解释了总方差的80.714%,以较少的公共因子基本达到了相同的解释能力;题项因子最高载荷为0.900,最低载荷为0.526,因子结构比较清晰,故把教学满意度评价看成8因子结构结果更加合理。前三个公共因子的方差贡献率分别为29.977、14.023、11.475,根据各题项内容,可将这前三个公共因子分别命名为教学因素、实践因素、教师因素。因此,影响毕业生对工程管理专业教学满意度评价的主要因素为教学因素、实践因素、教师因素。综上,可得到影响毕业生对工程管理专业教学水平满意度的主要因素如表3所示。

表3 工程管理专业教学满意度主要影响因素

四、对策建议及研究展望

根据以上实证研究的结论,关于提高教学水平和质量,提出以下建议:在科研活动参与性方面,加强老师与学生的联系,使学生对老师的科研方向及内容有所了解,使学生能够有机会参与到科研活动之中;在实践教学方面,增加实践教学经费,合理安排实践教学的时间、地点和内容,制定有效的实践教学结果评定方法;在课程安排方面,参照相关专业课程安排和未来就业的能力需求,合理安排专业课程的教学时间和内容;在课堂教学方面,一方面建议老师丰富教学内容,采用更加互动的教学方式,并且适当扩展一些学生有兴趣的课外内容,另一方面学校可以加强学风建设,营造良好的学习氛围,从而提高学生的学习积极性。

图1 各题项因子载荷与公共因子方差解释贡献率

本研究是基于武汉市某高校的一个专业进行的,在具有针对性特点的同时,也注定存在一定的局限性。另外,由于毕业生总样本量的限制和所在地比较分散,调查的样本容量无法足够大,对研究所得到的结果产生了一定的影响,其稳定性还需进一步验证。其次,教学工作评价指标体系的建立还需在未来的研究中进一步完善,还可以将学生自身对评价结果有影响的特性纳入到评价指标体系中,使得教学工作评价结果更加合理。

注释

①《现代汉语辞典》,北京:商务印书馆,1983年,第1488页。

②陈玉琨:《教育评价学》,北京:人民教育出版社,1999年,第18页。

③陈想平、刘绍平:《校内本科教学工作评价体系研究》,《江汉石油学院学报(社科版)》2000年第6期。

④⑤刘大海、李宁:《SPSS15.0统计分析从入门到精通》,北京:清华大学出版社,2008年,第348-349页。

⑥邱皓政、林碧芳:《结构方程模型的原理与应用》,北京:中国轻工业出版社,2009年,第1-3页。

⑦Kaiser,H.F.The Application of Electronic Computer to Factor Analysis.Educational Psychology Measurements.1960(20):141-151.

⑧陈灏珠:《实用内科学》,北京:人民卫生出版社,2005年,第20页。

责任编辑 文音

2010-05-01

本文受工程管理专业实习环节教学质量保障体系构建与创新人才培养研究项目资助