基于层次分析法的混合式教学评价体系研究

杨 芬

（浙江育英职业技术学院，浙江 杭州 310018）

0 引言

后疫情时代，混合式教学模式的应用越来越广。混合式教学评价机制是混合式教学顺利开展的关键。教学评价是运用科学可行的评价标准，对教学内容和过程进行全面、系统的评价[1]。在混合式教学评价方面，很多学者做了较为深入的研究。文献[2]认为混合式教学的评价维度可以从学生参与度、教师和学生教学互动性、学生对于教学模式的适应性以及教学的效果和学生学习的满意度等角度进行评价；文献[3]提出教学效果评价需要关注学生学习态度、学习过程和学习效果三部分；文献[4]提出教学评价需要多元化，要结合线上教学和课堂教学两个方面，设计出适合高职学生的教学评价体系。同时，在评价方法研究方面，模糊综合评判法、BP神经网络模型以及数据包络分析法使用较多，相对而言，利用量化计算模型对评价指标进行计算的研究相对较少[5]。本文以某高职院校“外贸跟单实务”课程为例，采用AHP（Analytic Hierarchy Process，简称AHP）方法确定混合式教学的评分各级指标，计算出指标体系各维度的权重系数，从而建立科学、严谨、可操作性强的混合式教学评价体系，为其他课程开展混合式教学评价提供参考，促进高职院校人才培养质量的提升。

1 混合式教学评价体系构建要素

“外贸跟单实务”课程混合式教学评价存在评价标准不统一，评价依据不完善，缺乏符合学生个性的、可持续发展的评价体系等问题。针对这些问题，本文构建的混合式教学评价体系包括教学设计、教学环境、教学过程和教学效果4个评价要素。

1.1 教学设计

教学设计指标（B1）从教学目标、教学策略及教学方法3个方面来反映。

1）教学目标（C1）。“外贸跟单实务”课程的教学目标是以外贸企业的真实工作项目为载体，通过课程学习全流程的操作，锻炼学生实际操作的能力，帮助学生适应工作岗位。

2）教学策略（C2）。“外贸跟单实务”课程教学过程中，教师坚持“以学定教”“以问题为导向”，通过使用情境式、翻转式等教学策略[6]来满足学生个性化、微型化、移动化的学习需求。例如，教师根据外贸企业跟单员的实际工作情况设置相对应的教学情境。

3）教学方法（C3）。在“外贸跟单实务”课程教学过程中，教师结合实际教学情况，充分发挥不同教学方式的优势以更好地完成教学任务。

1.2 教学环境

教学环境指标（B2）从教学支持和教学资源两方面来反映。

1）教学支持（C4）。混合式教学将线上教学和线下课堂教学结合。一方面，在线开放课程提供视频、测试、作业等项目，为“外贸跟单实务”线上线下教学提供支撑。另一方面，线下教学设施的不断升级、优化为线下课堂教学的开展提供了保障。

2）教学资源（C5）。“外贸跟单实务”课程线上教学视频时长为257 min，题库数量为456个，配套教材主要选用校本教材《外贸跟单实务》。

1.3 教学过程

教学过程指标（B3）从教学环节、教学内容、教学参与及教学考核4个方面来反映。

1）教学环节（C6）。教学实施包括线上发布教学任务和获取学生线上学习信息、设计教学策略、线下实施教学计划、课后检查学习情况、教学评价反馈等教学环节。在教学过程中，通过师生互动和合作帮助学生掌握外贸跟单知识和职业技能。

2）教学内容（C7）。“外贸跟单实务”课程选取了外贸跟单岗位工作中的核心内容作为教学内容。

3）教学参与（C8）。依据“多元性评价”，教师在混合式教学评价中除了关注学生的期末考试成绩，还将学生在教学活动中的表现和态度纳入到评价指标中。

4）教学考核（C9）。教学考核以外贸跟单员的职业资格考试标准为依据，包括过程性评价和期末考试成绩。过程性评价包括学生线上平台学习完成的情况（视频观看、论坛讨论、作业）及学生课堂教学中的参与程度。

1.4 教学效果

教学效果指标（B4）包括学生学习和教师教学两方面。学生学习方面主要是从学习意愿、学习能力两方面来反映，教师教学效果则以学生满意度来反映。

1）学习意愿（C10）。教育目标分类理论包括认知、情感和动作技能三大领域。其中情感方面关注学生学习积极性、主动参与学习的意愿[7]。本文学习意愿关注的是学生参与学习的积极性。

2）学习能力（C11）。课程学习需要关注学生对外贸跟单知识的分析、评价、运用的能力[8]。本文用学生认知技能指标来反映学生的学习能力。

3）学生满意度（C12）。学生满意度是学生对教师混合式教学最终效果给出的评价。根据成果导向理论，学生满意度的高低根据学生知识、能力、素养等方面的提升效果来反映。

2 AHP评价指标体系各指标权重确定原则

采用AHP方法计算指标权重包括建立层次结构模型、构造判断矩阵、层次排序及一致性检验、判断矩阵一致性检验4个步骤。

2.1 建立层次结构模型

本文采用yaahp10.3软件来构建混合式教学评价指标权重体系。

1）根据AHP法确定评分指标并创建递阶层次模型。教学设计、教学环境、教学过程、教学效果4项评价维度作为中间层的评价准则。根据专家及同行反馈，本文收集省内在线开放课程记录中的学生过程性评价数据来制定第三层指标体系，以此得出层次分析模型。第一层为目标层，教学评价（A）。第二层为准则层，包含实现目标的准则，共有教学设计、教学环境、教学过程、教学效果4个指标（B1—B4）。第三层为因素层，包括教学目标、教学策略、教学方法，教学支持、教学资源、教学环节、教学内容、教学参与、教学考核、学习意愿、学习能力、学生满意度共12个指标（C1—C12）。混合式教学层次结构模型如图1所示。

图1 混合式教学层次结构模型

2）建立判断矩阵。判断矩阵使用的是Saaty的9级比例标尺，如表1所示。量化参与调研专家的偏好和判断形成判断矩阵，运用矩阵理论分析其偏好，求得每个层级的系数。

表1 AHP评价尺度

根据Saaty的AHP评价尺度，结合以上构建的层次结构模型，构建各指标的两两判断矩阵。结合混合式教学评价指标设计权重问卷，根据问卷结果评判各指标的重要程度[9]而形成对比对象的判断矩阵，使得分析的结果更具有可靠性。本次问卷调查在问卷星平台展开，共调研了10位高职院校国贸专业教师、企业专家，以及杭州3所高职院校开设国际贸易专业的169名参与《外贸跟单实务》混合式教学的学生。

2.2 构造判断矩阵

调查问卷回收后，基于yaahp10.3软件采用群决策的模式，专家权重选择平均权重，集合的方式选择判断矩阵，并计算平均权重。如果出现两两对比错误，则重新输入推荐数值，确保一致性。

2.3 层次排序及一致性检验

计算权重使用的是矩阵集结后的数据，利用方根法求解各指标的权重。

1）计算判断矩阵元素乘积的n次方根，计算公式为：

式中：bij为判断矩阵b中的元素；n为判断矩阵阶数;为判断矩阵第i行元素的乘积的n次方根。

3）计算判断矩阵的最大特征根λmax，计算公式为：

更为重要的是，因为闲书的阅读，没有压力，没有强迫，没有功利，纯粹是根据个人的兴趣和爱好，所以往往更能引领自己寻找到自己的真正擅长，真正打开属于自己天赋的灵田。很多人在人生路的中途又独辟蹊径，答案正在这里。一个农民成了作家，一个医生成了诗人，一个教师成了画家，不都是因为他们横向的寻找吗？

2.4 判断矩阵的一致性检验

检验判断矩阵的权重系数是否合理，首先要求出CI（一致性指标）的值，计算公式为：

CI=0表示判断矩阵完全一致，CI越大，判断矩阵的不一致性程度越严重。

根据计算出的λmax得出判断矩阵的CI值，然后根据n值找到对应的RI（随机一致性指标）值，如表2所示，计算出一致性比例CR，公式为:

表2 随机一致性指标RI数值表

如果各层指标CR＜0.1，可以判定矩阵满足一致性的条件，通过一致性检验；如果CR≥0.1，则考虑对判断矩阵进行适当修正，直到其通过一致性检验。

3 应用层次分析法计算指标权重

3.1 各层指标的组合权重计算

利用上层元素的组合权重作为计算本层对应各元素的加权和。再根据最底层的指标对总目标的权重系数分布情况，得到教学评价指标体系中各个评价指标的重要程度排序[10]。具体的结果如表3—7所示。

表3 混合式教学评价对总目标的矩阵及权重

表4 教学设计对总目标的矩阵及权重

表5 教学环境对总目标的矩阵及权重

表6 教学过程对总目标的矩阵及权重

表7 教学效果对总目标的矩阵及权重

3.2 一致性检验

表3—7中各个矩阵的CR值分别为0.066 5，0.017 6，0.000 2，0.075 9，0.090 4 ，每个值均小于0.1，因此矩阵通过一致性检验。

3.3 总层级排序

表8 各层的权重及排名

由表8可见，在准则层指标中，权重最高的是教学过程（B3）。在因素层指标中，教学设计（B1）中权重最高的是教学目标（C1），教学环境（B2）中权重最高的是教学支持（C4），教学过程（B3）中权重最高的是教学内容（C7），教学效果（B4）中权重最高的学习意愿（C10）。

4 混合式教学评价优化建议

4.1 优化混合式教学评价设施

混合式教学评价中，线上教学网络支持是重要因素。各院校需要对软硬件设施进行完善和优化，以保证在线学习能够顺利实施。职教云和省内在线开放课程平台不断优化服务器，确保后疫情时代大规模在线教育能顺利开展。按照目前高职院校在线教学发展的势头，未来教学设备的发展方向应该是系统化、人文化、环保性。

同时，各院校需要根据混合式教学的需求不断开发课程资源，加强智能化教学设施的建设。高职院校可以根据课程的特点、选择合适的教学平台开展教学，根据选择合适的平台，平台应能够提供完整的教学评价体系，保证评价结果的公正性、客观性；高校可以建立一个安全、高效的直播平台，利用直播和虚拟仿真实现跨时空教学，学生可以在直播平台上分享课程学习的成果，提高教与学的互动性。

4.2 完善混合式教学的多环节评价

后疫情时代，线上与线下教学融合的过程中，需要借助现代智能工具，将原来单一的讲授模式转变为任务驱动、课前预习、课上教师引导、多维度检测和反馈的多环节新型教学模式。教学流程的多样化对教学标准、教学内容的要求不断提高。因此，高职院校需要根据学生的特点设计出新型混合式教学模式，增加课程评价的多样性，提高教学效果。

4.3 丰富教学内容增加评价宽度

后疫情时代，混合式教学的内容需要根据学生的兴趣扩展知识的范围，从单纯的外贸跟单专业知识扩展到课程思政、地理文化通识等多维度。教师备课时选择适合外贸跟单专业课程的网络资源加入到课程教学中，满足学生个性化、多样化的学习需求。随着学生接受的信息不断丰富，高职院校需要创设更多的评价场景，将学生资料收集筛选和应用能力等加入考核之中，增加对学生评价的宽度。

4.4 构建多层次的混合式教学评价体系

每个学生的接受能力和学业水平不同，线上学习环节给基础薄弱的学生提供巩固学习的机会，对基础较好的学生进行拓展和延伸学习。线下课程则是根据学生线上学习的情况进行分组讨论和作业。教学评价不局限于实习报告或者期末考试，而是最大程度地细化教学评价指标，根据不同类型的学生制定个性的评价体系，重构线上线下的成绩比例，强调自主学习和合作学习，关注学生各个环节学习能力的提升，注重学生个性化差异。

5 结语

本文基于层次分析法，分析了后疫情时代“外贸跟单实务”课程混合式教学评价的指标，计算了各层指标的组合权重，并根据分析结果对混合式教学评价提出了优化建议，以提高高职院校混合式教学效果。