技能型课程线上教学质量评价指标体系构建研究

黄 琦，陈 艳

（湖南商务职业技术学院，湖南 长沙，410205）

一、引言

自新冠疫情暴发以来，学校多次开展线上教学，教师的信息化水平和线上教学质量经受着考验，特别是技能型课程，它以职业能力和技能为本位，具有操作性较强的特点，需要通过“讲、范、练、评”等教学环节方能达到学生掌握技能的教学目标，而且技能型课程教学对实践操作的设施设备依赖性比较强。教师要通过借助虚拟仿真实训软件等教学资源，科学合理进行教学设计，尽量克服线上教学短板，保证教学效果。对于学校来说，如何评价和把控技能型课程线上教学质量是需要关注的焦点问题。关于线上教学评价，赖玲玲，彭丽芳[1]从在线教学服务质量、在线教学平台服务质量、在线教学资源服务质量和在线教学管理服务质量等四个方面构建了高校在线教学服务质量评价指标体系。赵立莹、赵忆桐[2]构建了包含教学条件保障、教学过程和教学效果在内的在线教学质量评价体系。杨晓宏、周海军、郑新[3]确立了包括组织统筹、资源保障、教学实施、支持服务、监测督查五个维度的在线教学质量分析框架。综观现有的关于在线教学质量评价的研究，均以线上、线下混合式教学为研究对象，仅从教学平台、教学资源、教学管理等几个方面构建在线教学质量评价体系，并未基于在线教学过程构建全面系统的在线教学质量评价体系，而且未对技能型课程在线教学质量评价进行专门研究。鉴于此，课题组以技能型课程线上教学为研究对象，构建技能型课程在线教学质量评价指标体系，这对后疫情时代打造线上技能型课程和技能型课程线上、线下混合式教学起到引导作用，为学校评价技能型课程在线教学提供参考。本研究中的技能型课程线上教学是指利用教学平台和办公软件，采用直播、直播+录播和MOOC 等方式开展技能型课程全面线上教学的形式。

二、技能型课程线上教学质量评价指标体系的构建原则

影响技能型课程线上教学质量的因素是多方面的，为了构建全面合理的评价指标体系需要综合考虑多方面的因素。在构建技能型课程线上教学质量评价指标体系时需要遵循以下原则：

（一）线上教学全过程评价原则

不论是理论课程教学还是技能型课程教学，都离不开教学设计、教学实施、教学评价与教学反思等教学步骤，在评价技能型课程线上教学质量时可基于教学过程构建评价指标体系进行全面评价。

（二）过程与结果相结合评价原则

在评价技能型课程线上教学质量时，不仅要对技能型课程线上教学的各个环节进行评估，而且要考核线上教学效果，将教学过程与教学效果相结合。

（三）外在与内在相结合原则

如前文所述，技能型课程线上教学离不开实训设施设备、教学平台和教学资源等外在条件的支撑。同时，技能型课程线上教学质量与授课教师的教学能力和工作态度也密切相关。在评价技能型课程线上教学质量时，既要考核外在条件，又要考核教师的教学能力与工作态度。

（四）体现先进教学理念原则

技能型课程在职业教育课程体系中占有非常重要的地位，线上教学是技能型课程的一种特殊授课方式。技能型课程线上教学要体现“岗课赛证融通”“课程思政”“双创理念”等先进教学理念。

三、技能型课程线上教学质量评价指标体系的构建

课题组查阅了线上教学相关文献、职业教育相关政策文件以及教学能力大赛评分标准之后，总结归纳了技能型课程线上教学质量影响因素，并针对技能型课程线上教学特点，在遵循技能型课程线上教学质量评价指标体系构建原则的基础上，初步构建起包含4 个层次，教学条件、教学设计与组织、教学内容、评价反馈和能力态度、教学效果等6 个一级指标、20 个二级指标、45 个三级指标的技能型课程线上教学质量评价模型。选取各指标的依据和对各指标的说明如下：

（一）评价指标的选取

1.教学条件

教学条件是开展技能型课程在线教学的前提条件。线上教学平台是支持高校线上教学活动顺利、有序、高质量开展的基础。[4]从教学平台的稳定、流畅和易操作三个方面评价教学平台；相对于理论课而言，技能型课程对教学条件的要求更高，需要提供技能操作器材。但除了学生可以自备一些体积较小、日常生活比较常见的实训器材以外，若需要专业仪器和实验设备，线上教学效果就很难达到。在此情形下，部分有条件的授课教师会借助虚拟实训平台为学生提供线上操作机会，弥补线上教学不能现场操作的缺陷。PPT、教学视频、教学课件、教案、案例、习题库等教学资源为在线教学的顺利实施提供保障。同时，这些教学资源的使用可以将课堂教学延伸到课前和课后，以达到更好的教学效果。对于教学资源来说，首先应该是多种多样的，能满足学生课前、课中和课后的学习需求。同时，行业发展迅速，教师要结合行业发展新技术、新动态进行教学内容更新。[5]那么，作为课程教学内容载体的教学资源也需要及时更新。另外，针对技能型课程教学离不开教师操作示范、学生模仿练习的特点，有必要给学生准备技能操作视频供学生反复观看模仿，帮助学生突破技能学习的难点。且相对于图文解说，操作示范视频形象直观。因此，将“示范视频的画面和解说是否清晰”作为评价教学资源的指标。

2.教学设计与组织

教学设计是教学活动不可或缺的重要环节，教学设计的好坏决定着一堂课的成功与否。对于线上教学来说，科学合理的教学设计能最大限度地克服在线学习的局限性。[6]从课前确定教学目标和教学重点难点，选取教学内容、教学方法，创设教学情境，到课中把控教学进度，开展师生互动活动，再到课后答疑和作业批改，每一个教学环节都需要精心设计与组织安排。从以下六个方面考核教学设计与组织：首先，教学目标要明确。在设定目标时要注意教学目标是否科学合理，一般从知识、技能和素质三个维度设定教学目标，且教学目标的设定要符合学情。其次，教学要突出重点难点，并选择合适的方法突破重点和难点。第三，根据教学内容采用多样、有效的教学方法。第四，在真实的情境中,通过灵活的教学系统与学习者的主动建构，学生可获得技能。[7]情境学习更有利于知识的迁移和技能的培养。因此，技能型课程教学有必要以真实工作任务创设教学情境。第五，课堂中的师生互动情况对于衡量教学质量以及学生学习成效具有重要作用。[8]线上教学因缺少面对面的沟通与交流，线上师生互动活动对于提高学生的参与度就显得尤为重要了。同时，由于直播课堂线上教学时间有限，教师要充分利用课后时间在线上进行答疑。因此将是否开展提问、答疑、讨论、小组竞赛、情境模拟等多种直播课堂师生互动活动，是否营造了良好的课堂氛围，课后是否及时答疑等作为考核指标。第六，每堂课都要张弛有度，让学生保持良好的学习状态，而且整门课的教学进度安排要合理。

3.教学内容

教学内容的选取是教学设计的重要环节，也是评价技能型课程在线教学质量的重要指标。为培养高素质技能型人才，我们要将思政教育贯穿人才培养全过程。对于专业技能课，要实施课程思政，做到与思政课同向同行。即从课程思政的内容和形式两个方面考核课程思政教学改革理念的落实情况。

职业教育以就业为导向，专业技能教学要对接岗位需求和标准，及时更新内容，将行业的新业态、新技术、新标准、新模式和新发展融入教学内容。为增强高技能人才培养的适应性，课程除了与岗位融合以外，还要与竞赛、证书相融，实现“岗课赛证”融通。[9]创新创业教育都是高等教育活动的有机组成部分，要将创业教育与专业教育相融合，培养学生的创新意识、创新精神、创新能力和创新思维。[10]综上，从实施课程思政、对接岗位与标准、支撑教学目标、体现双创理念四个方面考核教学内容。

4.评价反馈

这里的教学评价是指教师对学生的评价，即教师对学生的学习行为以及学习效果进行判断。它是教学活动的重要组成部分，是检验教学和学习效果的重要手段，是教师反思改进的依据。为避免评价的片面性，教学评价要将过程性评价与结果性评价相结合，在注重学生期末考试成绩的同时关注学生学习过程，对学生所学的知识、技能以及劳动态度、工匠精神等进行全面评价。而且，对于学生的评价要实行学生自评、学生互评、教师评价、从业人员评价等多方参与的多元评价机制，尽量避免主观因素对评价结果的影响。为了促使学生参加技能竞赛和参加职业资格证书考试，将课程学习延伸到课外，需要实行与职业技能竞赛、职业技能证书有关的学分互换制度。

反馈是指师生之间的相互反馈学情和教情。技能型课程线上教学，教师无法及时发现并反馈学生技能操作存在的问题。这就需要学生将实践操作过程拍成视频或是作品提交给教师，教师及时观看并及时在教学平台把意见反馈给学生，让学生及时发现自己学习上的不足并及时修正。为了了解学生对教师教学的意见和建议，教师要定期对学生开展线上回访调查，并以此为依据及时调整教学方案。因此，从教师及时批改作业、教师及时反馈学生学习情况和教师定期开展线上回访三个方面评价“师生反馈”。

5.能力态度

教师的教学能力和态度是保证课程教学质量的内在因素。相对于传统的技能型课程，技能型课程线上教学除了要求教师具有较强的语言表达能力和专业技能以外，还要求教师具备一定的信息技术，能熟练操作教学平台开展在线教学。因此，从语言表达能力、专业技能和在线教学技术三个层面评价教师的教学能力；从态度是否认真、治学是否严谨两个维度衡量教师工作态度。

6.教学效果

评价教学效果就是检测教学目标的达成程度，它是检测教学质量的核心指标。如前文所述，从知识、技能和素质三个维度确定教学目标。那么，在检验技能型课程线上教学效果时也需要从这三个维度考核。与传统教学所不同的是，线上教学引发了“学习革命”，学生自主探究性学习成为新风尚。[11]因此，线上教学在帮助学生提升专业技能的同时，还要注重学生自主学习能力的培养。故从提升自学能力、培养工匠精神和端正劳动态度三个方面考核学生在素质培养方面的教学目标达成度。

（二）指标权重的确定

设计问卷调查专家对模型中各要素重要性的判断。专家为职业院校具有副高及以上职称的教师，其中副教授12 名，教授7 名。问卷由三部分组成：（1）个人信息，包括姓名、职称和工作单位；（2）技能型课程线上教学质量评价模型（3）专家对模型中各要素的重要性进行评分。调查问卷采用层次分析法中的1～9标度法。同一层级的因素两两比较，前者较后者，根据重要程度分别记9 分、7 分、5 分、3 分和1 分；后者较前者，根据重要程度分别记1/9、1/7，1/5、1/3、1，其中1分表示两者同等重要。使用迈实 AHP 层次分析法软件统计分析问卷。

1.构造判断矩阵并确定权重

首先依据专家对同一层次两两比较打分的结果构建各层次两两比较判断矩阵，并计算出各指标在所属层次中的权重，即相对权重或层次单排序，并进行一次性检验。如专家打分不合理，会采用粒子群优化算法对专家打分矩阵进行修正，使结论更加科学合理。对专家1 权重矩阵进行修正后的准则层判断矩阵及权重如下：

表1 修正后的准则层判断矩阵及权重

2.层次总排序及一次性检验

层次总排序一次性检验公式为CR=∑Wi*CIi/∑Wi*RIi，当CR＜0.1 时，层次总排序通过一次性检验。层次总排序一次性检验结果分别为：技能型课程线上教学质量CR=0.0973，教学条件CR= 0.0907，教学设计与组织CR=0.0975，教学内容CR= 0.0831，评价反馈CR=0.096，能力态度CR=0.0974，教学效果CR=0.0996。CR均小于0.1，层次总排序通过一致性检验。用类似的方法计算其他10 位专家给出的指标权重，并进行一次性检验。

3.群决策结论

各专家的指标权重计算出来后，使用直接均值法计算出评价指标体系中各指标的最终权重，即专家群决策的各权重结论值。因本研究中各专家的影响因子相同，即所占权重相同，专家群决策的各权重结论值等于所有专家的各相应权重值的平均数。技能型课程线上教学质量评价指标权重如表2所示：

表2 技能型课程线上教学质量评价指标权重

四、结果与启示

表2所示的各指标所占综合权重，可以为提高技能型课程线上教学质量提供以下启示：

1.一级指标中教学效果的权重最大。教学效果所属的三个二级指标按重要性程度依次为素质层面、技能层面、知识层面。素质层面和技能层面的教学效果的综合权重在二级指标中分别位居第一和第三位。技能层面教学效果的下一级指标“提升了专业技能“的综合权重在指标层中位居第一。这个结果符合职业教育以技能为本位的特点。另外，素质层面教学效果的下一级指标中，“提升自学能力”的综合权重大于工匠精神的培养和劳动态度的改变，这可能与线上课程的特点有关。这就告诉我们，技能型课程线上教学要以教学效果为导向，侧重培养学生形成操作性技术技能，[12]注重学生素质培养，尤其要注重学生自主学习能力的培养。

2.教学设计与组织的综合权重在准则层中位居第二，足可见教学设计与组织的重要程度。由于时空限制，线上教学要达到较好的效果，教学设计与组织非常重要。在教学设计与组织的下一级指标中，“教学目标”所占相对权重最大，其次是“师生互动”，再次是“教学方法”。在指标层中，“教学方法有效”和“以真实工作任务为教学情境”分别位居第六、第七位。这就告诉我们，技能型课程线上教学的教学设计与组织首要考虑的是科学合理地设计教学目标，然后围绕教学目标，着重于教学方法的选用、教学情境的设置以及互动活动的开展，以营造良好的课堂氛围。

3.教学内容是影响技能型课程线上教学质量的第三大要素。教学内容包含的指标中，“对接岗位与标准”所占综合权重最大，其综合权重在子准则层中排列第五。结果显示，对于“对接岗位与标准”来说，最重要的是“所授专业技能对接岗位要求”。“教学内容支撑教学目标”的综合权重在三级指标中位居第四。这说明教学内容的选取是考核技能型课程线上教学质量时要重点考虑的因素。在选取教学内容时要注意教学内容与教学目标相匹配，所授专业技能要与岗位对接，符合岗位要求，这与职业教育要面向产业发展，对接岗位需求培养适应社会的高素质技术技能人才的培养理念相契合。[13]

4.能力态度的权重在准则层中位居第四。教学态度和教学能力的综合权重在二级指标中分别位居第二、第四。“教学态度认真”在三级指标中属于第三重要的要素，仅次于“提升了专业技能”和“掌握系统的专业知识”。这就说明要取得较好的教学质量，教师的教学态度必须端正。学校必须重视教风建设，可以通过加强教师督导和考核等帮助教师形成勤勉的教学态度。

5.评价反馈的综合权重在所有一级指标中排在最后。但“教学反馈”的综合权重在二级指标中的排名却比较靠前，位居第六。“教学反馈”中，最重要的还是“教师及时反馈学生学习情况”，因为教师所反馈的学习情况是学生自我调整学习状态的依据。