课堂教学中增值评价模型设计与应用探索*

2023-10-16 14:34谭飞刚招晓菊秦盛妮
中国教育技术装备 2023年12期
关键词:对象评价模型

谭飞刚 招晓菊 秦盛妮

1 深圳信息职业技术学院交通与环境学院 广东深圳 518172 2 深圳盐田高级中学 广东深圳 518000

0 引言

随着科学技术的不断发展,教育工作者也在不断探索利用科学技术来提升教学质量[1]。教学评价作为教学质量的重要评价手段受到广大教育学者关注。2020 年6 月,中共中央、国务院印发《深化新时代教育评价改革总体方案》(以下简称《方案》),提出:改进结果评价,强化过程评价,探索增值评价,健全综合评价,充分利用信息技术,提高教育评价的科学性、专业性、客观性[2]。这是增值评价首次以国家政策文件形式展示出来,为增值评价的探索与实践提供了有效的政策支持。增值评价中的“增值”是指评价对象在经过一定的教育教学活动后,在各评价指标上现有水平与活动前水平之间的差值。这种增值评价主要关注学生的自我比较,鼓励学生看到自己的进步,激发学生学习兴趣,帮助学生找回自信心[3]。

增值评价起源于20 世纪60 年代美国的学校效能研究,其目的是更客观、更科学地评估学校、教师在学生成长进步过程中的作用。近三十年来,增值评价在美国、英国、中国香港等地得到较为广泛的应用。我国于20 世纪90 年代也开始了对增值评价的探索,在中小学教育、高等教育研究领域都有所涉及。特别是随着《方案》的提出,各级教育形成了一股研究热潮,其学术关注度和学术传播度分别如图1和图2所示。王瑾[3]在归纳了增值评价的三种模型后,提出了一种高职院校学生增值性评价实施方案。罗啸[4]则从何为增值、增什么值和如何测量增值三个方面向大家进一步阐述了增值评价。增值评价不仅仅是评价学业成绩上的增值,还需要对学生德智体美劳各方面进行增值评价,谢小蓉等[5]探索“五育”并举视域下学生增值评价的发展困境并阐述了一些破解策略。林溪[6]则将增值评价与“1+X”证书制度进行融合,探索了在“1+X”职业等级证书制度下高职院校构建增值评价体系。潘杰宁[7]通过对中、东、西部6所高职院校3000多名在校生进行2 次问题解决能力测评并计算增值效应量,结果显示:样本学生问题解决能力增值呈正向效应;样本学生问题解决能力前测和后测值具有显著的组间差异。由此可见,增值评价已经在我国教育教学中快速进行本地化应用探索[8-9]。

图1 增值评价学术关注度

图2 增值评价传播度

国内近年来对增值评价进行了众多研究,但是仍存在一些问题需要进一步进行探索解决,其主要体现如下。

1)增值评价内容较为单一。由于学生学业成绩的可测量性较高,所以目前增值评价大多使用标准化考试成绩数据作为分析基础,多用于测量学业成绩的进步幅度,缺乏对学生学科成绩以外诸如品德、学习能力、社交能力、沟通能力等不易测量方面的分析。

2)增值评价工作量大。增值评价过程需要教师收集每位学生在各个阶段产生的“价值”,并转化为可用的数值库,进而通过增值模型来计算各个阶段的“增值”。目前,大量的数据仍依赖于人工收集、筛选和转换,这必定会给教师带来额外的且非常大的工作量。

3)增值评价模型过于复杂多样。增值评价的效果依赖于增值模型,当前增值模型的复杂性阻碍了增值评价的应用与推广。因为模型的复杂性不仅需要教师收集长期多元化数据,还需要教师学会利用分析软件进行数据分析,这些无形中增加了非常大的工作量,使得许多教师望而却步。

基于上述分析,和基于公平公正原则激励所有学生共同进步的目标,本文以某校城市轨道交通运营管理专业线上线下混合式金课为依托,探索出一套适用于高职院校课程教学的增值评价指标体系。

1 常见的增值评价模型

增值评价模型是进行增值评价研究和应用的核心技术[10]。目前,国内外提出了许多增值评价模型,例如:获得分数模型、学生成长百分位等级模型、协变量校正模型、多因变量模型、多水平分析模型等。虽然增值评价模型众多,但是各模型都是基于某一个具体问题研究提出,其或多或少均存在一定的局限性。本文将阐述几种常见增值评价模型并对其进行优缺点分析。

1.1 学生成长百分等级模型

学生成长百分等级模型基于学生以往成绩来估计其当前成绩的条件分布,即在同类学生中,其学业成绩所处的条件百分位数为其成长百分等级。这就为我们比较不同起点学生的学业进步提供了可能。该模型优点在于让学生跟同类竞争者进行对比,避免了评价方法的公平性危机。同时,其在实施过程中不需要收集学生背景信息,便于实施。但是该模型的评价结果以百分等级呈现,是顺序数据,数据分布为非正态分布,支撑后续分析能力有限。

1.2 均值增量评价模型

均值增量评价模型根据学生考试成绩各等第人数比例结构计算出均量值,当年均量值与往年均量值的差就是均量值增值,其正值代表进步,负值代表退步,增值数据大小则代表进步或退步程度。均值增量评价模型表现形式如下:

其中:k1,…,k5为权重系数,A、B、C、D、E分别代表测试成绩中5 个等级学生所占比例。增值则是前后两次进行差值对比,如下所示:

其中:M2、M1分别表示第二次和第一次学生考试成绩。

该模型优点在于计算简单、数据易于收集、导向明确,其既可以作总分增值评价,也可以作学科增值评价。该模型缺点是需要较大的数据样本作为基础,一般要求以学校及以上单位为研究对象,不能针对学生个体进行增值评价。另外,模型的权重系统设计缺乏科学依据,其一般都是基于研究者经验进行设计,说服力和适用性有待增强。

1.3 田纳西州增值评价模型

田纳西州增值评价系统根据学生多年成绩动态变化作追踪评价,是当前国际上最成熟和完善的增值评价系统之一。该系统采用大量与课程目标相关程度高且满足敏感度测量的变量,运用项目反应理论和多元回归分析等分析计算。通过多年学生学业成绩的“增值”来评价教师、学校等影响。该模型的优点在于其参数覆盖面广,数据量大,评估有效性高。但是其缺点也非常明显,即大量的且连续多年的数据收集难度大,数据计算量大。

1.4 三级跳增值评价模型

三级跳评价最早于1975 年由麦克马斯特大学提出,后被广泛使用在不同的教育评价实践中。三级跳增值评价模型以评价对象的多次评价为基础,获取评价对象在不同时间节点的表现情况,构建每个评价对象自身成长的参考系,来体现其个体在认知能力和非认知能力上的增幅,强调个体差异。该模型优点在于以项目式教学为引导,不断通过项目间学习进行多轮评价,及时鼓励个体成长。该模型的缺点在于需要收集大量的多个角色间数据,还需要根据项目不同设计科学合理的评价指标体系,其适用性有待进一步改善。

2 增值评价体系设计

项目式教学是以学生为中心的教学方法,整门课程划分为相互关联的几个项目,每个项目在教师指导下,学生通过发现问题、分析问题及解决问题这一过程来学习和掌握知识。项目式教学不仅培养学生自主学习、独立思考等能力,而且也促进团队协作、沟通等职业能力培养。项目式教学目前已广泛应用于各级教育教学中。本文以城轨专业电动列车驾驶课程项目式教学为依托,在分析已有增值评价模型优缺点的基础上,从增值评价体系构建基本原则、增值评价指标体系和增值评价模型设计几个方面进行探讨。

2.1 增值评价体系构建基本原则

为充分发挥增值评价的导向性、激励性等功能,增值评价模型构建须遵循发展性、个性化、系统性、科学性原则。评价的最终目的是实现评价对象的不断进步,因此,增值评价体系的首要原则是具有发展性,从促进评价对象发展的价值取向出发扭转唯分数论的价值导向。个性化原则要求评价体系以人为本,尊重个体差异,公平对待各类评价对象,实现评价个体均衡发展。系统性原则要求评价指标具有全面性,从多个方面来考察评价对象。科学性则是要求在评价过程中以科学严谨的态度,运用科学技术手段收集、处理和分析数据,作出客观的评价结果。

2.2 增值评价指标体系设计

根据增值评价体系构建基本原则以及项目式课堂教学特点,本文构建了如表1 所示的增值评价指标体系。整个指标体系由三级组成,总共2 个一级指标,4 个二级指标,12 个三级指标。

表1 增值评价指标体系

2.3 增值评价模型设计

设计增值评价模型的目的是公平、公正地激励所有评价对象,最终实现全员进步。但是在实践过程中,成绩好的其上升空间及上升难度要大于成绩相对低的评价对象。例如,评价对象A 成绩30 分,评价对象B 成绩82 分,经过一段教育活动后,评价对象A 成绩达到了45 分,成绩上升了15 分,上升了5 个名次,评价对象B 成绩达到了90 分,成绩上升了8 分,上升了3 个名次。若按照分数或者名次进行均值评价,不难得出评价对象A 增值优于评价对象B,但是这样的结论很难服众。基于上述分析,本文以上一次成绩为基数,设置增值评价模型如下:

其中:△T表示增值,T1、T2分别表示第一次和第二次根据评价指标计算出的平均成绩。式中通过以T1为基数,可有效缓解上文中评价对象A、B评价差异。基于公式(3)不难得出评价对象A 的增值为4.5,评价对象B 的增值为6.56。由此可见,所提模型既关注了评价对象成绩所在位置,也考虑了评价对象成绩提升的难度。

根据评价体系,评价对象最终的增值量由各个指标增值得分后取平均,如式(4)所示:

其中:n表示指标个数。

3 课程教学实践

本文选取笔者所在学校城市轨道交通运营管理专业2020 级3-2 班学生,并以城市轨道交通运营管理专业核心课且是线上线下混合式金课城市轨道交通电动列车驾驶课程为例。教材选用自编的项目化活页式教材,课程内容总共分为6 个项目22 个任务。各项目授课安排如表2 所示。为方便管理和数据收集及处理,以项目为时间节点进行数据收集,同时以第一个项目的各项数据平均值作为初始值。经过6 个项目学习后,学生本门课程班级平均成绩变化如图3 所示。班级中成绩偏后同学C 与成绩偏前同学D 的各项目平均成绩变化如图4所示。

表2 城市轨道交通电动列车驾驶授课安排

图3 各项目班级平均成绩

图4 样例同学成绩变化

从图3 及图4 中不难发现,随着项目教学的进行以及增值评价的不断应用,班级整体成绩有了提升,学生个体成绩也有了提升。为了更好地研究增值评价应用效果,以评价体系中二级指标为基准,通过一个学期项目化教学数据采集与分析,班级各指标数据如图5 所示。从图中不难分析出,项目1各项指标比较低,其主要原因在于学生刚经历暑假,还没进入学习状态,所以在学习技能、纪律性、小组沟通合作方面均比较低。因前三个项目以理论为主,所以其实践性相对比较低。同时,采用了增值评价体系,认可不同层级学生的每一次进步,不断鼓励他们,激励他们与自己前一段时间比较,增强他们的自信心和学习动力。如图4 中不同层级同学C 和同学D 的学习进步,也正因为每位学生通过自我比较不断提升自己,最终使整个班级成绩得到了整体提高。

图5 班级二级指标分析

总的来说,通过轨道交通运营管理专业2020级3-2 班学生进行增长评价体系设计和实践,班级整体成绩、各评价指标等都印证了所设计模型的有效性。但是,课程每个项目内容不同,项目实操要求也不同,导致每个项目间数据收集后的平均值存在一些影响。后续将通过其他课程应用,进一步完善所提模型。

4 结束语

本文针对当前高职课程教学过程中教师重结果考核轻过程考核,对学生个体差异关注不足等问题,以中共中央、国务院印发的《方案》为指导,设计了增值评价体系和相应的增值评价模型,探索基于线上线下混合式教学平台的课程教学增值评价应用。以本校城轨专业学生作为评价对象,以线上线下混合式课程城市轨道交通电动列车驾驶课程教学为例进行实践探索。从当前的应用效果来看,本文所设计模型对学生的学习具有一定的激励作用,鼓励学生与自己比较,注重自己在整个学习过程中的进步。但是,因为课程每个项目在内容量、课时量、理论实操分配比例等方面存在一些差异,其对每项数据收集和处理存在一定的影响,后续将在城轨专业其他课程上进行进一步应用探索。

猜你喜欢
对象评价模型
神秘来电
中药治疗室性早搏系统评价再评价
重要模型『一线三等角』
重尾非线性自回归模型自加权M-估计的渐近分布
攻略对象的心思好难猜
基于熵的快速扫描法的FNEA初始对象的生成方法
3D打印中的模型分割与打包
区间对象族的可镇定性分析
FLUKA几何模型到CAD几何模型转换方法初步研究
保加利亚转轨20年评价