基于AHP-模糊评价法的OBE理念的课堂效果评价研究——以《ERP综合模拟实验》为例

赵成文

（宁夏理工学院经济管理学院，宁夏 石嘴山 753000）

0 引言

课堂教学是人才培养的重要环节，课堂教学改革是人才培养模式转变的一个重要手段。地方高校会计人才培养模式由研究型、理论型人才培养转变为高素质的应用型人才培养，人才培养模式的转变要求课堂教学跟着转变[1]。实践教学是学生检验理论掌握理论并创新理论的重要环节，是激发学生探索欲望、培养学生科学思维、创新能力的必要途径，也是培养学生快速掌握工作技能的基本方法[2]。成果导向教育（outcomes-based Education），首先萌发于西方基础教育改革中。上世纪末开始，OBE便成为盛行于美国教育界的术语。斯派帝（Spady W.D.，美国学者）所著的《基于成效的教育》中对于该模式做了深入研究。此书将OBE定义为“明确清晰地关注与架构教育系统，要确保学生掌握实质性成功的经验，驾驭未来生活”。他认为在此模式相较于传统模式更加注重学生学到了什么而不是何时学、如何学。

因此，将OBE与三螺旋场模式引入到本课程，运用新教学思维和教学模式，实施新的考核办法，使学生全面了解企业的经营过程，充分挖掘学生创新性思维的潜能，培育学生成果导向思维能力，加强学生组织团结和利用环境的能力，旨在提高学生在未来实践中的创新能力和团队意识[3]。从教育管理学的角度上来讲， 学习效果评价在课程建设过程中发挥着承前启后的关键作用，它一方面呼应着教育目标的价值追求，另一方面又制约着课程体系的资源内容和学习活动的组织形式[4]。成绩可以部分地反映学生的课程学习效果，但是对于实践课来说成绩的效果还是比较低的，因此有必为《ERP综合模拟实验》课程构建一套科学的课堂效果综合评价体系。

1 构建基于OBE理念的课堂效果评价体系

1.1 OBE理念的课堂目标

1.1.1 培养高素质应用型人才

将OBE与三螺旋场模型思维引入到“ERP综合模拟实验”课程，能够充分推进实践教学，以学生为中心，围绕学习成果的界定、达成过程、条件建设以及达成评价等的四个方面的开展。从而在内容上更加注重学生自我学习、自我教育、自我服务和自我管理能力的提高，更加注重综合素养和整体能力的形成，学生在学习和实验中会更加积极发挥主观能动性，积极发现并努力解决问题，以提高学生综合素质[5]。

1.1.2 提高教学水平

将OBE与三螺旋场模型思维引入到“ERP综合模拟实验”课程，是教学思想的一种变革，打破了传统实验教学模式。能调动学生的积极性和兴趣，可充分挖掘学生的潜能，从而实现教学水平的提高。

1.1.3 培养学生团队意识

将OBE与三螺旋场模型思维引入到“ERP综合模拟实验”课程，让学生分组成立团队，根据实验内容进行角色扮演，模拟创办一家企业，使得学生的学习过程更接近真实的企业环境，能够分析企业经营中经常出现的各种典型问题。有助于团队的小组人员相互合作、 互相商讨和共同进步。

1.1.4 促进学生创新创业的理念和参加相关比赛的积极性

将OBE与三螺旋场模型思维引入到“ERP综合模拟实验”课程，学生通过实验课程的深入学习，不断地吸取创新创业的理念。有了创新创业的理念，学生会对外界事物保持持续的好奇心，对于全区及国家举办的相关赛事也会积极参加。

1.2 OBE理念下的课堂效果评价指标体系设计

综合考虑“ERP综合模拟实验”课程的课堂目标，我们构建的评价体系包括一个目标层级评价目标“课堂效果”，然后在“课堂效果”下设四个一级指标（准则层）培养应用能力、提高教学水平、团队意识和创新创业的理念。在“培养应用能力”下设自我学习能力、自我教育能力、自我服务能力和自我管理能力这四个二级指标，在“提高教学水平”下设积极性和兴趣程度、学习潜能挖掘程度及学习成绩这三个二级指标，在“团队意识”下设小组参与度和互相商讨程度这两个二级指标，在“创新创业的理念”下设创新创业理念接受程度和参加比赛的多少两个二级指标。具体指标体系如表4所示。

1.3 指标体系层次分析及权重设定

目前，在确定指标权重时，一般采用的方法有两种：主观赋权法和客观赋权法。本文主要研究OBE理念下的课程课堂效果评价，且以案例研究的形式进行，因而采用层次分析法确定指标权重。分别建立一级指标的矩阵4个，二级指标的矩阵11个。邀请课程组五位教师，三位教师是一直从事“ERP综合模拟实验”课程，另两位教授虽然未从事该课程的教学，单一直从事或者关注管理学各课程的教学与评价工作。让这几位教师分别对上述五个矩阵中的元素按照1、3、5、7、9的尺度，对这些指标的相对重要性进行两两比较。然后根据美国运筹学专家satty 给出的标准进行一致性检验。

1. 层次分析法的步骤

首先，建立层次结构模型。结合上一节指标设计将每个因素按照自上而下的层次进行分解，各层次的很多因素是相互影响的。最上层是目标层，接下来是准则层，最下层是指标层。结构模型如表4所示。

然后，构造判断矩阵。首先对各项指标的重要性进行分析，其次构造判断矩阵。其中，比较尺度是1～9的数字构成的。标度表如表1所示：

表1 标度表

最后，计算权重向量和最大特征值，并做一致性检验。依据判断矩阵，计算权重向量及该矩阵的最大特征根λmax。计算公式为：

式中，CR是指一致性比例；CI是指一致性目标；RI是指平均随机一致性指标，RI由表2查得；λmax是指最大特征根。

表2 修正值RI

若CR小于0.1，则认为排序结果通过一致性检验；若CR大于0.1，则说明未能通过一致性检验，需要重新选取指标，直至矩阵所得的CR小于0.1，才可以通过一致性检验。

2. 确定指标权重

本节将采用层次分析法对OBE理念下的课堂效果具体指标的权重进行确定。通过分析，根据OBE理念对各维度具体指标之间的重要性进行打分。根据评价指标分别构造以A、A1、A2、A3为准则的判断矩阵，根据式（1）和式（2），分别计算各判断矩阵的最大特征值和特征向量并进行归一化处理，得到不同指标的重要性权重向量，进行一致性检验。根据表3可知，CR值全部小于0.1，所有判断矩阵通过一致性检验。从而确定各项指标权重如表4所示。

表3 一致性检验

表4 各项指标权重

从权重的分配结果来看，在一级评价指标中，培养应用能力的权重占比最大，该结果说明学校很重视培养学生的应用能力。而团队意识指标权重占比为27.07%，说明也比较关注学生的团队意识。在二级评价指标中，通过总排序权重，可以看到体现团队意识的小组参与度权重占比最大，为20.3%，这也符合该实践课程实操动手的特点。自我学习能力指标占比次之，说明在应用能力中更加重视学生自我学习能力。创新创业理念占比相对较小，并不是它不重要，而是由于大学课堂无法具体体现，只能通过理念接受程度去评价，占比为8%。

2 方案实施过程以及结果统计分析

2.1 研究方案的实施过程

根据宁夏某高校“ERP综合模拟实验”课程的课堂目标，项目组将上面的指标体系中11个二级指标分别描述为11种具体的基于OBE理念的学习效果或者行为表现，并且制作成为五点里克特量表形式的调查问卷。调查问卷的每一个问题下设五个选项，使得目标达成：强 、较强、一般、较弱和弱，让学生根据自己的实际情况匿名做出选择。随机给工商管理大类班级发放问卷，收回有效问卷数量61份，其中调查对象是实施课堂教学改革的人数是31名同学，而没有实施课堂教学改革的人数是30名同学。

2.2 模糊评价模型的构建及应用

2.2.1 建立课堂效果评价指标集

设一级评价指标集U={A1,A2,A3,A4}，A1,A2,A3,A4分别为培养应用能力、提高教学水平、团队意识和创新创业的理念。二级评价因素集A1={B1,B2,B3, B4}，A2={B5,B6,B7}，A3={B8,B9}，A4={B10,B11}，B1，B2，B3，B4，B5，B6，B7，B8，B9，B10，B11分别表示为自我学习能力、自我教育能力、自我服务能力、自我管理能力、积极性和兴趣程度、学习潜能挖掘程度、学习成绩、小组参与度、互相商讨程度、创新创业理念接受程度、参加比赛的多少11个二级指标。

2.2.2 确定评价因素的权重

2.2.3 设立评语集

设立评语集V={v1,v2,v3,v4,v5}，其中v1,v2,v3,v4,v5分别表示“强、较强、一般、较弱、弱”。评语集是评价主体做出的各种可能的评价结果的集合，如此一来，调查结果如表5所示，我们且以频率代替概率作为学生自我评价的统计数据，即得到各个因素对应于各等级的隶属度。

表5 基于OBE理念的课堂教学效果评价统计结果

2.2.4 建立模糊综合评价模型并应用

根据各个因素对应各等级的隶属度，从而得到单因素模糊评价矩阵R=（Rij）n×m。R是n×m阶模糊评价矩阵，Rij∈[0,1]，其中，n，m=1,2,3,4。然后，逐个对被评事物从每个因素上进行量化，即确定从单因素来看，被评事物对等级模糊子集的隶属度（R|Ui），进而得到模糊关系矩阵。矩阵R中第i行第j列元素Rij，表示某个被评事物从因素ui来看对vj等级模糊子集的隶属度。最后，利用合适的算子将权重矩阵A与隶属矩阵R进行合成，得到模糊综合评价结果向量B。其中B是由A与R的运算得到的，它表示被评事物从整体上看对Vi等级模糊子集的隶属程度。

建立模糊综合评价模型B=WR，并将B进行归一化处理，逐层算出所有两个个级别的指标对应的评价等级。根据11个二级指标的学生自我评价概率及其权重，可以算出4个一级指标的个别评价概率。

表6 基于传统的课堂教学效果评价统计结果

同理，根据表，可以计算出未实施课堂教学改革的整体评价。

2.3 评价结果的实证分析

（1）在“培养应用能力”方面，A1=(0.3247,0.5441,0.1250,0.0062,0.0000)，根据最大隶属度原则，评价的最高数据0.5441，处于“较强”的程度，离它最近的是左边的数据0.3247，说明OBE理念下自我教育能力目标达到了“较强”偏“强”的状态。而未实施教学改革的A1=(0.2397,0.2751,0.4247,0.0411,0.0194)，评价的最高数据0.4247，处于“一般”的程度。通过比较，说明OBE理念下自我教育能力目标达成度较高。

（2）在“提高教学水平”方面，A2=(0.4010,0.5144,0.0846,0.0000,0.0000)根据最大隶属度原则，评价的最高数据0.5441，处于“较强”的程度，离它最近的是左边的数据0.4010，说明OBE理念下提高教学水平目标达到了“较强”偏“强”的状态。而未实施教学改革的A2=(0.2442， 0.2622，0.3432，0.1044， 0.0459)，评价的最高数据0.3432，处于“较弱”的程度。通过比较，经过学生的侧面评价，能有效说明OBE理念下教师提高教学水平目标明显达成度高。

（3）在“团队意识”方面，A3=(0.5162， 0.4355，0.0403，0.0081，0.0000)根据最大隶属度原则，评价的最高数据0.5162，处于“强”的程度，离它最近的是右边的数据0.3247，说明OBE理念下团队意识目标达到了“强”偏“较强”的状态。而未实施教学改革的A3=(0.2583， 0.2750，0.3333，0.0833， 0.0500)，评价的最高数据0.3333，处于“一般”的程度。通过比较，说明OBE理念下团队意识目标达成度很高。

（4）在“创新创业理念”方面，A4=(0.3549,0.4839，0.1290，0.0215，0.0108)根据最大隶属度原则，评价的最高数据0.4839，处于“较强”的程度，离它最近的是左边的数据0.3549，说明OBE理念下创新创业理念目标达到了“较强”偏“强”的状态。而未实施教学改革的A4=(0.1778，0.2556， 0.4111，0.1222，0.0333)，评价的最高数据0.4111，处于“一般”的程度。通过比较，说明OBE理念下创新创业理念目标达成度较高。

（5）课堂教学效果的整体水平评价。V=(0.3947,0.5018,0.0949,0.0074,0.0013)，根据最大隶属度原则，评价的最高数据0.5018，处于“较强”的程度，离它最近的是左边的数据0.3947，说明OBE理念下改革后的课堂教学效果整体水平达到了“较强”偏“强”的状态。而未实施教学改革的V′=(0.2381， 0.2703， 0.3828，0.0744，0.0344)，评价的最高数据0.3828，处于“一般”的程度。通过比较，说明OBE理念下课堂教学效果的整体水平较高。

3 结束语

课堂教学效果的评价是监控课程教学效果和确保人才培养质量的重要手段。根据社会对创新创业人才的需求，设计出基于OBE与三螺旋场模型下“ERP综合模拟实验”课程的新教学模式和新思维，通过AHP-模糊评价法对课堂效果评价发现，基于OBE与三螺旋场模型下“ERP综合模拟实验”课程课堂教学效果更佳。