魏轶娜
(中央教育科学研究所信息中心,北京 100088)
绩效评估
——对教师教育技术能力培训评估的有力补充
魏轶娜
(中央教育科学研究所信息中心,北京 100088)
在全国范围内开展的教师教育技术能力培训中,主要的评估方式是终结性考试和过程性评估,侧重于对教师知识的评估,为了更深入地对教师教育技术能力进行评估,需要借助绩效评估方法对教师教学行为及其结果加以关注。文章以Kirkpatrick评估模型为基础,探讨了绩效评估在教师教育技术能力培训中的应用。
绩效评估;教师教育技术能力培训;Kirkpatrick评估模型
2004年,教育部印发《中小学教师教育技术能力标准 (试行)》,2005年,教育部启动全国中小学教师教育技术能力建设计划,旨在全面提高教师的教育技术应用能力,随后以信息技术与学科有效整合为主要内容的教育技术培训在全国范围内全面实施。
对于如此大范围、大规模的教师教育技术培训,保证培训效果至关重要。目前,中小学教师教育技术培训评估主要由终结性考试和过程性评估组成。为了形成鼓励广大教师不断提高自身教育技术应用水平的动力机制,教育部举办了全国中小学教师教育技术水平考试。除此之外,在以网络平台为基础的教育技术能力培训中,为准确把握各地培训的进度,掌握参训者的基本信息和培训者的教学、组织水平,进一步促进各地提高培训的质量,充分应用了“教师教育技术能力培训质量监测与过程性评价系统”进行过程性评估。参加培训的教师只有在培训中通过了过程性评估,才能在培训结束后参加教育技术水平考试。两种评估方式相结合,一方面保证了培训过程中教师的充分参与,另一方面实现了对培训结束后教师教育技术水平的测量。
教师教育技术培训的目的是全面提高教师的教育技术应用能力,促进技术在教学中的应用。“能力”与“应用”是培训评估的两个关键点。美国心理学家Spencer认为,能力是人的一种持续的特征,这种特征会产生一种优秀的工作行为。能力是看不见、摸不着的,它必须借助外在的活动才能表现出来。对能力的评估无法通过简单的纸笔测验等方法实现,只有通过个体在相应活动中的具体行为表现,才能判断其是否具有某种能力以及能力的高低。这就将“能力”与“应用”有机结合起来了,简而言之,教师的教育技术能力是通过教师在实际教学活动中应用技术的具体行为表现出来的。教师的教育技术能力是否提高,技术在教学中的应用是否得到促进,需要通过对教师实际教学中具体行为表现的评估来判断。
但是,目前应用的两种评估方式都是在脱离实际教学情境的情况下完成的,无法实现对教师行为的评估。为此,有必要找到一种能够对行为进行评估的方法。
绩效评估正是一种关注个体行为与结果的评估方法,Mohrman(1989)认为绩效由四个方面的变量组成,分别是行为主体、行为、行为的情境 (或环境)和行为结果。绩效评估就是在行为情境中对行为主体的行为和行为的结果进行评估。与一般评估方法相比,绩效评估有许多独特之处,比如,需要将现实生活中的知识或技能展现出来,将隐性知识变成可以表达出来的知识或技能(Slavin,1994);不仅要让学员呈现出来他们知道什么,而且还要看他们能做什么,强调知识和能力的“显性化”(Slavin,1994); 以行为的结果(consequence) 或 行 为 的 成 就(achievement)作为评估的对象;绩效评估以能力提高为目标,最终目的是通过对结果或成果的评估来使学员能力得以提高。
Kirkpatrick评估模型是目前最知名的培训评估模型,由Donald L.Kirkpatrick于1959年首次提出。该模型强调从反应(Reaction)、学习(Learning)、行为(Behavior)和结果(Result)四个层级进行评估。下面以Kirkpatrick评估模型为基础,探讨教师教育技术能力培训的绩效评估。
1.第一层级:反应
此层级评估学员对培训的满意度,并通过学员的反馈分析培训中存在的问题,不断改进和完善培训课程。
评估内容可以包括学员对培训课程内容设计的反应、对培训课程组织与实施的反应、对培训教材的反应、对培训中教师教学的反应、在以后的教学中是否能用到所学的知识和技能等方面。根据培训项目的具体情况可做相应调整,比如网络培训中可以对网络平台的人性化、可能存在的问题等进行评估;在面对面培训中可以对师生互动、答疑等进行评估。
评估方法可以选择访谈、问卷调查等,可以在培训结束时,或者培训中的某个时刻实施。在培训结束时开展此层级的评估,可以根据评估结果对培训课程的设计与实施进行调整,有利于下一轮培训的开展;在培训中开展此层级的评估,可以对此次培训进行相应的调整,针对性更强,有利于此次培训的进行,但是对培训课程的设计和实施人员的要求较高。
2.第二层级:学习
评估学员在培训过程中的学习情况。评估的实施可以在培训开始前、培训过程中的某个时刻或者培训结束后,分别对学员的教育技术能力进行前、后测。通过比较前、后测的差异,可以得出学员在培训中对知识、技能等方面的掌握情况。
根据培训的侧重点,可以选择纸笔测验、上机考试、过程分析评估法等多种评估方法。其中,纸笔测验比较适合理论性知识的评估,上机考试比较适合技术操作能力的评估,过程分析评估法是笔者于2008年提出的一种关注评估对象生成的方式与过程的评估方法,通过对教师教学行为载体——电子教案、PPT演示文稿的过程分析,评估教师在完成这些工作中所用到的能力,适合于相关技术能力的评估。
一般的教育技术能力培训,培训内容不会只包括理论知识或只包括计算机操作,都会强调技术在教学中的应用,侧重的是将教育技术应用于教学的能力,既包括表象的知识、技能,又包括潜在的动机、意识等,这些特征最终会通过行为体现出来,这就是下一层级的评估对象。
3.第三层级:行为
评估学员在实际教学中应用所学内容的情况。这一阶段的评估需要在培训结束一段时间后开展,比如培训结束3到6个月后,此阶段的评估内容很明确——行为,对教师行为评估的最好方法是课堂绩效评估。
开展课堂绩效评估首先需要将培训目标转化为绩效评估指标,绩效评估指标应该是具体的、明确的、可衡量的、可以实现的。第二,利用绩效评估指标制作课堂观察记录表。第三,观察课堂教学行为,填写课堂观察记录表。最后,分析课堂观察记录,总结教育技术能力情况,并将其反馈给教师,对后续的学习提供更有针对性的建议与指导,从而提高教师的教育技术能力。
比如,根据培训目标得出一条绩效评估指标为:分析教学内容,明确教学目标,得出教学的重点和难点,并将其作为选择教学策略、媒体、资源的参考。将其列入课堂观察记录表,在课堂观察过程中,注意教师运用了哪些教学策略、媒体和资源,这些是否有助于教学重难点的教学,如果是,则在课堂观察表中做相应标注,表示教师具备了这项能力。
4.第四层级:结果
与第三层级相比,第四层级的评估侧重于评估行为带来的结果,包括课堂气氛、教学效果、学生学习兴趣等。这个层次评估的难度是最大的,也是最重要的,它是整个培训实施的目的,需要在培训结束一段时间后实施,比如培训结束6到12个月之后,应该在第三层级评估结束后实施。
此层次的评估可以在使用课堂绩效评估和访谈的同时,充分运用360°反馈评估法,以调查问卷的方式,从多个角度对教师进行评定,可以由学生评教师、同事评教师、领导评教师和教师自评等组成。通过综合各种评估结果,可以分析培训中给教师带来的教学行为的改变,是否已经产生了良好的结果,由教育技术能力提高带来的教学结果的改善才是培训项目实施的最终目的。
以上是对基于Kirkpatrick评估模型的教师教育技术能力绩效评估的初步探讨,可将各层级评估实施的时间、具体评估方法和评估目的总结如表1所示。
表1
结束语
绩效评估与其说是一种评估方法,不如说是一种系统、全面的评估思想,基于这种评估思想,在不同的时间段结合具体的评估对象与评估目的,综合运用多种评估方法,从而实现对能力的有效评估。
目前中小学教师教育技术培训中广泛开展的终结性考试和过程性评估主要是对反应和学习两个层级的培训情况进行了评估,绩效评估的开展可以有效地弥补在行为与结果这两个更深层级的评估,绩效评估将是对教师教育技术能力培训评估的有力补充。
绩效评估是一项复杂的系统工程,需要评估实施者投入较多的时间与精力,而且需要注意在实施绩效评估中不断地积累,力争通过各层级绩效评估的严格实施形成一套绩效评估工具,比如绩效评估实施计划表、课堂绩效观察记录表、360°反馈评估表等。由于绩效评估的流程清晰,绩效评估工具的可操作性强,一旦形成一套完整的绩效评估工具,后续的培训项目评估将变得非常便捷。
[1]M ohrman,A.M.Jr,Resnick-W est,S.M,Law ler III,E.E.Designing Performance Appr-aisal Systems-Aligning Appraisalsand Organizational Realities,1989.
[2]Donald L.Kirkpatrick.Evaluating Training Programsthe Four Levels.[DB/OL]http://www.google.com/books?hl=zh-CN&lr=&id=lijXE3M 6AaQC&oi=fnd&pg=PR 9&dq=Donald+L.Kirkpatrick+Evaluating+Training+Programs+the+Four+Levels&ots=2IBRpuLUva&sig=dTWnJF5_SqQCGK4PqSSJmY5QgGk#v=onepage&q&f=false.
[3]Daniel L.Stufflebeam、George F.M adaus、ThomasKellaghan 著,苏锦丽等译.评估模型,Evaluation Models:Viewpointson Educational and Human ServicesEvaluation[M].北京:北京大学出版社,2007.
[4]张祖忻.绩效技术概论[M].上海:上海外语教育出版社,2005.
[5]宋永刚.促进教师专业发展的一项大工程——中小学教师教育技术能力建设计划解读[N].中国教育报,2006-6-12(5).
(编辑:王天鹏)
G451.2
A
1673-8454(2011)06-0023-03