应用型本科院校经管类实验教学质量评价研究

邱 燕，胡永政，张圆刚

(黄山学院 经济管理学院,安徽 黄山 245041)

应用型本科院校经管类专业是在新形势下培养适应经济与社会发展需要的、具有较强实践能力和竞争能力的应用型、复合型人才，其核心环节是实践教学。在教学实践的探索中，应用型本科院校逐渐形成了一种共识，即实践教学的质量关乎人才培养的成败，其中，作为实践教育重要组成部分的实验教学体系是影响经管类专业实践教学质量提升的关键一环[1]。近年来，高校经管类专业实验教学不断加强，取得了积极进展，但是也存在一些不容忽视的问题，包括实验教学方式方法单一，针对性和实效性不强；创新创业教育理念滞后，与专业教育结合不紧密，与实践脱节；实验指导教师自身实践水平和能力欠缺；实验平台短缺，实验保障体系不完善等，这些都严重影响了实验教学质量和学生综合实践水平的提升。因此，构建应用型本科院校经管类实验教学质量评价体系，改革现有的实验教学模式已迫在眉睫。

一、完善经管类实验教学质量评价体系的重要性

传统课程教学质量评价是以学生评教为主，当前主流的网络评教系统已在各大高校运行多年，评价指标和评价方式比较单一和片面。相比理工类实验，经管类实验有其自身的特点，一是实验课程通常作为理论课的辅助课程开设，单独设置实验课程的比较少，实验课在学时和内容安排上处于附属地位；二是实验项目以演示性、验证性居多，综合性和设计性实验项目较少；三是相较于理工类实验，经管类实验教学所需的设施设备少，类型比较单一，多以计算机、服务器、网络为主，辅以相关的实验教学软件，实验课往往是单人单台操作，缺乏团队合作和相互讨论研究。在对经管类实验教学质量进行综合评价时，影响实验教学质量的因素多，不确定性强，难度大。目前多数新升本科院校对实验教学质量的监控与评价方式，仍停留在对实验大纲、实验指导书和实验报告批改等常规性要求上，不能全方位地对教师教学过程和学生学习效果进行监控，从而大大影响了实验教学的改革。建立科学合理的实验教学质量评价体系，综合评价教师的教学能力和学生实验学习效果，规范实验教学管理与质量评价，改革实验教学模式刻不容缓。有鉴于此，课题组引入CIPP模型，构建应用型本科院校经管类实验教学质量评价体系。

二、应用型本科院校经管类实验教学质量评价体系构建

CIPP模型是由美国学者斯塔弗尔比姆针对美国二十世纪五六十年代兴起的教育改革实验效果评价而创立的，其基本观点是：“评价最重要的目的不在证明，而是改进。”[2]模型能提供整体、全面的信息，重视形成性评价，能够帮助目标的确定、过程的实施以及结果的考核，是改进工作和提高教育质量的重要工具，尤其适用于教育项目的评价[3-4]。CIPP分别是背景评估(Context evaluation)、输入评估(Input evaluation)、过程评估(Process evaluation)和成果评估(Product evaluation)英文首字母的缩写。本文以CIPP模型为基础，参考已有文献评价实验教学质量的因素，构建了应用型本科院校经管类实验教学质量评价体系，如表1所示，指标体系包含了4个一级指标和14个二级指标，其中背景评估包含实验教学目标、教学理念和教学计划三个因素，主要考察实验教学的指导思想和出发点。输入评估包含实验师资力量、实验环境和条件、实验经费投入三个因素，主要考察实验教学的投入资源情况。过程评估包含实验教学内容体系、实验教学方法和手段、实验教学材料、实验考核方式和实验教学管理五个因素。实验过程评估是实验教学质量评价的关键环节。成果评估包含学生实践能力提升、创新创业水平增强和学生对实验教学的满意度评价三个因素，重点考察实验教学取得的效果。在14个二级指标中，部分指标的量化评价比较困难，如实验教学目标和理念、学生实践能力和创新创业水平的增强等，因此本文运用德尔菲法，组成专家评价小组，并采用模糊层次分析法确定指标体系各层级因素的权重。

表1 应用型本科院校经管类实验教学质量评价体系

三、模糊层次分析法(FAHP)确定指标权重的步骤

模糊层次分析法(FAHP)是将模糊综合评价(FCE)和层次分析法(AHP)相结合的评价方法，在体系评价、效能评估、系统优化等方面有着广泛的应用，是一种定性与定量相结合的评价模型，一般是先用层次分析法确定因素集，然后用模糊综合评价确定评价指标的权重，具体步骤如下。

1.建立层次结构模型

首先根据评价总体目标，建立层次递阶结构模型。第一层为目标层，第二层为准则层，是评价的主指标体系；第三层为子指标层，是对第二层指标的细化，第四层为方案层。

2.构建模糊判断矩阵

由于判断矩阵的一致性与人类思维的一致性有显著差异，层次分析法需要对判断矩阵的一致性进行检验，当判断矩阵不具有一致性时，需要经过若干次的调整、检验、再调整、再检验过程[5]。因此，本文引入模糊判断矩阵，具体方法为根据每一层次中的元素针对上层元素的相对重要性构建模糊判断矩阵R=(rij)n×n，其中，两个元素重要程度的取值采用表2中的数量标度。模糊判断矩阵R具有以下性质：

∀i(i=1,2,…,n)，有rij=0.5。

∀i,j(i=1,2,…,n;j=1,2,…,n)，有rij+rij=1[6]。

表2 模糊标度及其含义

3.模糊判断矩阵的一致性调整

4.层次单排序

本步骤确定的权重是指相对于上一层某元素的相对权重，当模糊判断矩阵R具有一致性时，参考以下权重计算方法[8]。

5.层次总排序

四、实证检验

按照上述评价步骤，结合构建的应用型本科院校经管类实验教学质量评价体系，课题组选择了《企业资源计划(ERP)》和《物流管理》两门实验课程作为研究对象，比较两门实验课程的教学质量情况。

1.建立评价因素集和评语集

根据表1建立的评价体系，共有两层因素集合，第一层因素集的指标有4个，分别表示为A=(B1,B2,B3,B4)；第二层因素集的指标有14个，表示为B1=(C1,C2,C3),B2=(C4,C5,C6),B3=(C7,C8,C9,C10,C11),B4=(C12,C13,C14)。

评语是用于评价各个因素的模糊概念，一般地，模糊评价采用五个等级即可满足评价要求。经过专家组讨论，用“优秀”“良好”“中等”“合格”“不合格”这五个等级来评价各个指标对实验教学质量的贡献，设评语集为V，表达式为:V=(v1,v2,v3,v4,v5)=(优秀，良好，中等，合格，不合格)。

2.构建模糊判断矩阵并进行一致性调整

专家组对各层级指标之间的重要性程度进行评分，取其平均值，得到模糊判断矩阵，A、B1、B2、B3、B4。

3.计算各因素的权重

B层各因素相对A层的权重为：W=(0.197，0.2625，0.3137，0.2282)。

4.对实验课教学质量进行评分

在对二级指标进行量化评价时，本文采用百分制五级评分方法：90～100为优秀，80～89 为良好，70～79为中等，60～69为合格，60分以下为不合格。为了全面、客观地考察两门实验课的教学情况，评价从专家评价、同行教师评价和学生评价三个层面进行。首先，专家评价和同行评价的方式大致相同，都是通过查阅专业培养方案、实验课教学计划安排、实验课程相关材料(实验大纲、实验指导书、实验报告、实验过程记录册等)，并安排实验课听课，同学生进行专项访谈等，以此作为评判依据。学生评价方面，由于学生对二级指标中“实验教学理念”和“实验经费投入”这两个因素的评价存在困难，在实际评价中，参考了专家和同行的评价结果。

在实际调查中，每门课程发放问卷60份，其中专家10份，同行教师15份，学生代表35份。问卷回收整理时，采用模糊数学的方法对数据进行处理，例如对“实验师资力量”的评分结果为：评价为“优秀”的占33 % ，“良好”的占36 % ，“中等”的占19%，“合格”的占12 %，“不合格”为0，由此得到实验师资力量这个因素的评判向量为：s1=(0.33，0.36，0.19，0.12，0)。通过对两门实验课的评教数据处理，得到评价指标的评语集，如表3所示。

表3 《企业资源计划(ERP)》教学质量评语集

基于以上数据，根据前述评价模型的算法，得到对《企业资源计划(ERP)》课程教学质量的综合评价为 T1=(0.324，0.303，0.239，0.134，0)。根据综合评价结果分析，利用最大隶属度原则，得到该门实验课的教学质量评价为“优秀”。《物流管理》实验课的评价方法相同，限于篇幅，不列出评语集，其综合评价为T2=(0.142，0.298，0.345，0.215，0)，教学质量评价结果为“中等”。

5.评价结果及分析

(1)从经管类实验教学质量一级指标的权重来看，实验教学的过程评估相较其他三个因素更为重要，二级指标中，“实验教学目标”“实验师资力量”“实验教学内容”“实验教学方法手段”“学生实践能力提升”在各层次中的权重值较大，对实验教学的质量起着重要的影响作用。因此，深化实验教学改革，首先要准确定位实验教学的目标，即以培养应用型、复合型人才，培养学生实践能力和创新创业精神为指导思想，结合对应的专业实验课程来设置具体的教学目标。其次，必须不断增强实验教学的师资力量，通过搭建教师应用能力发展工作站，选派教师赴行业、企业锻炼，着重加强对教师实践教学、研究等应用能力的培养，同时以培养“双师型”教师为目标，以“教师应用能力发展工作站”为平台，鼓励教师深入相关行业企业、广泛开展产学研合作，为拓宽学生实习就业渠道奠定基础。再次，在实验教学过程中，指导教师要大胆改革传统的实验教学内容和教学方法，创新地运用沙盘演练法、博弈对抗法、项目驱动法、团队学习法、专题讨论法等，不断激发学生的学习热情，提升学生综合实践能力，提高实验教学质量。

(2)从实证研究中两门实验课程的评价结果来看，《企业资源计划(ERP)》实验课的评价优于《物流管理》实验课，从二级指标得分来看，《企业资源计划(ERP)》在过程评估中的实验教学内容、实验教学方法手段、成果评估中的三个指标平均得分都比较高，尤其是“学生对实验教学的满意度”得分为优秀的比例最高为47%。相反，《物流管理》实验课的得分却较低。进一步分析，由于《企业资源计划(ERP)》是一门独立实验课，主要通过直观的企业经营沙盘(专业软件平台)，让学生在分析市场、制定战略、组织生产、整体营销和财务结算等一系列活动中体会企业经营运作的全过程。实验课程融角色扮演、情景模拟和专家诊断于一体，最大的特点是在“参与中学习”，学生的学习过程接近企业现状。在实验过程中，学生以团队的方式去寻找市场机会、分析规律、制定策略，在各种决策的成功和失败的体验中，提高分析问题和解决问题的能力。同时，该门实验课也为学生参加学科竞赛(大学生创新创业ERP管理大赛)提供了学习基础和训练平台，因此学生对该课程的满意度较高，整体评价较好。与此同时，两门课程的综合评价与学校现行的网络评价系统得分情况基本相同，这也说明本文构建的评价模型是合理的。

(3)实验教学质量的评价是一个复杂、综合的系统，本文构建的评价指标体系，虽然在一致性方面得到了较好的调整，但是各级指标之间的相关性对计算指标的权重存在着影响。比如输入评估中“实验环境和条件”与“实验经费投入”两个二级指标间的相关性较强，当学校加强对实验经费的投入时，实验教学的硬件和软件水平自然能得到提升，反之亦然。另一方面，体系中的部分指标，在量化评价时存在困难，如背景评估中的“实验教学目标”和“实验教学理念”，成果评估中的“学生实践能力提升”和“学生创新创业水平增强”等，这些都将对实验课程的整体评价产生影响。对此，利用模糊层次分析法能较好地解决模糊的、难以量化的问题，隶属度理论能把定性评价转化为定量评价，对评价对象做出综合评价。

五、结 论

本文以CIPP模型为基础，采用模糊综合评价方法，从背景评估、输入评估、过程评估和成果评估四个方面构建了应用型本科院校经管类实验教学质量评价体系，并以《企业资源计划(ERP)》和《物流管理》两门实验课为例，进行了实证分析。该评价方法的优点是将定性与定量结合起来，把个人的主观判断用数学形式进行表达和处理，避免了主观性，减少了人为干扰，其操作方法更容易实现，结果更加客观，可以从多方面对实验课教学质量进行改进，具有较高的实用性和可靠性。应用型本科院校经管类实验教学质量评价模型的构建，为经管类实验教学质量的评价提供了一种新的研究思路，其对于提升经管类实验教学质量水平，增强学生对实验课程的积极性和主动性，提高实验教学在应用型本科教学中的重要地位具有现实意义。

[1] 邱 晖，杜忠连.应用型本科高校经管类专业立体化实践教学体系构建研究[J].哈尔滨学院学报，2014,11(35)：141-144.

[2] Daniel L.Stufflebeam，George F.Madaus ，Thomas Kellaghan.Evaluation Models: Viewpoints on Educational and Human Services Evaluation[M].北京：北京大学出版社，2007.

[3] 赵 华.以CIPP 模式开展体育课堂教学评价的研究[J].河北师范大学学报，2010(11):95-98.

[4] 宋素娟.基于CIPP模型的经管类大学生实践教学满意度及其影响因素—以淮阴工学院商学院为例[J].教育教学论坛，2016，4(16)：101-103.

[5] 张吉军.模糊层次分析法(FAHP)[J].模糊系统与数学，2000,6(14)：80-88.

[6] 杨霞芳.基于FAHP的供应商选择与评价指标体系[J].物流科技，2012(2):96-100.

[7] 陈 欣.模糊层次分析法在方案优选方面的应用[J].计算机工程与设计，2004,10(25)：1847-1849.

[8] 吕跃进.基于模糊一致矩阵的模糊层次分析法的排序[J].模糊系统与数学，2002，6(16)：79-85.