贾佳
(国家开放大学,北京市 100039)
试卷分析工作对评估试题质量,命题水平,评测学习效果及完善试题库建设有重要指导性作用。试卷分析的标准量化一直是考务的一个重要课题。规范化的试卷分析,可以真实客观的反馈教师的教学水平以及学生的学习效果,可以反映学科知识点与试题内容的趋同度,进而为进一步提高教、学、考的和谐统一提供重要依据并提出有针对性的改进措施。
国家开放大学(前身:中央广播电视大学)自1999年开始实施“中央广播电视大学人才培养模式改革和开放教育试点”项目。到2012年为止,开放本科开设16个门类28个方向的近300门课程,开放专科开课33个门类69个方向近530门课程(课程数只含中央统设必修课程)。作为全国性的统一考试,无论是考点数量,试题科目还是阅卷人员的数量都是极为庞大的,如何通过试卷分析能够使终结性考核更好地反映教学目的以及教学效果,使考核题目能够对学生的知识点掌握进行有效的跟踪,是一个非常值得研究的重要题目。在以往强调考前命题的基础上,试后的试卷以及答题情况分析在教学过程中的重要性越来越得到突显。通过对试卷的有效合理分析,使考试更为客观、准确、定量得评价教学过程成为指导教学工作的重要依据。
国家开放大学有别于普通高校,它存在考点分散、学习内容与现实工作的高紧密性、学员人数众多且层次各异等多特点,所以试卷分析工作的必要性便显得尤为突出。通过试卷分析,不仅要反映试题已经存在的问题,更要反映出各地考试组织的实际情况、教学的实际水平,阅卷工作的严谨度等等,只有从根本上认识试卷分析的重要性并完善试卷分析流程才能真正达到国家开放大学试卷分析工作的目的。
但是以往的试卷分析工作并不能完全适应国家开放大学的教学、考试需求,且存在着以下问题:
个别老师对试卷分析工作没有引起足够的重视。可能认为试卷分析只是流于形式的一件工作,从根本上不认为试卷分析能对考试工作有所影响。其表现就在于对于材料的撰写以及相关表格中的内容填写过于简单,不够详细。尤其针对某一门课程相关的教学分析、试题难度分析以及结果分析也浮于表面,没有进行深入的分析。使其本身应有的参考价值大大降低。
虽然试卷分析不能只限于定量分析,考生考试这一行为本身也会受考场环境、监考的严谨度、考生的紧张度等多重因素影响,但是这些因素也只能为定性分析作一个参考。试卷分析的重点还应该是放在试题与考试结果这两方面上,然而以往的试卷分析报告过多的强调了考试组织情况、考试的报考工作、考务检查工作、考风考纪工作等方面,这些方面实际是属于考试工作总结的范畴。但对于作为重点的考试结果、评卷阅卷工作却提及较少,而试卷本身包括答题情况的总体分析归纳几乎未在报告中有所体现。这种结果导致了试卷分析工作本来的初衷得不到彻底的贯彻。
基于国家开放大学的实际情况,试卷分析的要求当然不仅仅只局限于试题本身,更要对学生的及格率、答题效率、得分率以及老师的阅卷工作情况等多方面进行统计分析。在此基础上才能了解国家开放大学的实际教学水平,学生学习达到的知识水平,从而才能进一步合理化国开的教学、考试方式,使其更能适应国开学生的学习要求,更能适应开放教育的学习需求。经过对试卷分析工作现状的分析,现总结出以下几点改革措施。
考试是衡量教学效果的最主要方式,考试环节的规范性对人才培养质量意义重大。考试不仅仅是对学生的学习行为进行检测,更是对任课教师的教学水平进行检测。[3]而试卷分析是针对整个试卷布局的合理性乃至每一道题目的准确性进行分析。鉴于此,试卷分析对于整个学校的教、考工作的正常运行都起着尤为重要的作用。所以,上至校领导下至一线的任课老师乃至阅卷考务工作人员都要对试卷分析工作引起高度重视。
试卷分析是任课老师通过对试卷本身以及对学生及格率、失分率的归纳分析,并与学生平常的学习情况相结合,总结出学生学习的共性与个性。从而反思教学出现的问题,改善教学过程,提高教学质量。基于试卷分析工作的根本目标,本文认为试卷分析工作应分为以下两点:
1、阅卷工作分析
此项分析主要是针对每学期试卷评阅组织、评卷标准控制、评阅试卷管理等诸方面进行工作介绍以及对工作中出现的问题进行分析,总结出试卷评阅中好的经验,并对存在的问题和不足提出建设性意见和建议。
2、试题以及考试结果的分析
利用已有的考试统计结果,认真比较本省考试结果总体情况,针对不同教学点、不同课程的考试成绩进行比对分析,结合学生考试过程中的作答情况,分析教学原因,为教学改革提出进一步改进的意见和建议。此领域的分析主要被分为试题定量分析以及考试定性分析两部分。
第一部分试题定量分析,分为以下5个维度:
(1)信度分析,信度主要包括试题内容的覆盖面,学生基本知识理论和技能考查内容的比例分配合理度,分数分配及评分标准的合理度。
(2)难度分析,试题难易程度是衡量试题和试卷质量的重要指标参数。每门课程的试卷难度分析可以以教师任课的教学班为单位,之后再以大多数学生对某道题或者整份试卷的难易程度感知作为依据进行判断难易程度是否合适,是较难、中等偏难还是适中。
(3)区分度分析,此维度旨在判定试卷是否区分了优劣学生、是否是对学生实际水平的真实反映。对此维度的有效分析可以使试卷设计得更为合理,从而使老师对学生以及学生自身有更为准确的定位。
(4)内容效度分析,内容效度指的是试卷内容与教学大纲以及培养目标的匹配度、及格学生是否达到了本课程基本要求、试题是否体现了教学效果。内容效度的分析可以促进考试根本目的的达成,了解学生是否真正学习到实际知识,并最终达到学以致用。
(5)总体意见,依据以上分析得出当次考试存在的普遍问题,对有利于未来国家开放大学的考试改革以及教学方法改革提出好的设想,甚至于具体的实施举措。
第二部分考试定性分析
考试结果分析指的是依据各省考试结果以及反馈试卷中各类试题的得分区间情况、实考率、及格率、平均分等,总结出各省考试结果的差异,教与学效果的客观性以及教与学信息的真实性。具体可分为以下四个方面:
1、全省总体情况表:总体情况表主要内容包括任课老师、试卷名称、应考人数、实考人数、及格率、卷面平均分等,以此反映当次考试在各省的总体情况。再在42个国开分部中,根据各省的实际情况,依据上次考试的总体及格率、实考率等数据抽取指定的试卷进行有针对性的分析,汇总后形成科目试卷分析总体表,进而对全国学生总体掌握水平进行了解。
表1 为某科试题2012年1月考试全国总体情况图。
2、卷面基本情况分析:单项试题分析的目的,旨在掌握试题在组织结构,题型设计,各小项难易程度以及课程题型的失分,得分情况,知识点掌握情况等,进而对所涉及科目的课程试卷题型及知识点进行分析。这个过程既是试题,题型不断完善的过程,也会成为今后各地教学的指导性依据(见表 2)。
(表2单项试题统计表)
通过卷面基本情况分析,进而形成卷面反映的主要问题类型,换句话说就是学生在此知识点导致失分的主要原因,其表现为是否对知识点不求甚解;是否只是单纯的死记硬背而不能灵活应用;是否知识体系不全面,知识面狭窄;教师在讲授知识点上是否做到全面准确,重点强调;(下转第147页)在平时的作业形考中,所涉及的知识点是否覆盖不全;试题本身是否存在试题超纲,题型不合理,与教材内容不相符等情况。
通过分析以上可能性原因,得出试卷本身真正存在的问题,为教师提出合理化的意见和建议。为今后指导命题工作和教学工作提供重要依据。
国家开放大学覆盖面广,试题科目众多,试卷分析己经成为指导教学、命题、考试的重要手段和依据。规范化、量化的试卷分析会进一步提高教,学,考和谐统一,对整个教育有着深远的意义。
[1]汪艳丽.高校课程考试质量的分析与评价[J].北京联台大学学报.(自然科学版),2003,17,(4):44—47.
[2]齐佩金.加强试卷分析完善题库建设[J].东北财经大学学报,2003,(6):66-68.
[3]刘伟东等.试卷分析的量化与规范化[J].辽宁工业大学学报,2012,(4):100-102.