徐培全等
[摘要]现代大学制度的建设需要多方面的内涵提升,全英文课程建设是推行国际化教学的主要手段之一。围绕全英文课程建设,开展教学研究和经验累积,试卷分析和相应的考试检测与反馈功能是教育目标管理的主要手段。分析和评价了全英文课程建设2年来2009和2010级四年制“Welding and Joining of Materials”的试卷质量。为课程进化、题库内容更新、提升课程服务内涵奠定基础。应用excel2010对试卷进行了统计分析,两次考试成绩均呈负偏态分布,信度0.68以上,效度0.76以上,难度0.71和0.62。试卷成绩分布基本合理,信度、效度高,区分度良好。本课程试题库质量良好,但有部分试题需要进一步修改或删除,降低2010级试题难度。
[关键词]内涵建设 全英文教学 题库质量 新专业建设
我校自2014年9月起被市教委确立为上海市实施现代大学制度建设首批试点高校,与2014沪浙教育综合改革相结合,推出了很多重要举措。全英文课程建设是推进国际化教学的主要手段之一,Welding and Joining of Materials是一门新专业的专业基础课程,我校课程建设的在建课程,试卷建设是课程建设的基础内容之一,包括期中考试、期末考试,课堂测试等[1~3]。考试是教学过程中很重要的环节,考试的检测与反馈功能是教育目标管理的主要手段,考试结束之后,通常要对试卷进行科学合理的分析,不但可以对试卷和考试做出恰当的评价,有助于获得充分的教学反馈信息,了解学生掌握知识的情况,找出学生学习中存在的问题,为改进教学、指导教学提供重要依据[4]。
试卷分析有如下优点[5]:(1)有利于确定每次考试的有效程度,试卷质量不符合要求的试卷不能测出考生的真实水平,如果试卷的难易程度不同,不同班级的考试结果不同,那么我们要对这样的班级进行评价,就是不可信的。(2)对试卷质量分析有利于在以后的同类考试中有针对性地选择命题,很好地把握重点和难点。通过不断地修正、改进,才能使一份试卷不断趋于合理,成为一份有效的试卷、可信的试卷。(3)有利于今后考试水平的提高。(4)有利于改进教學工作,通过全面的考试过程能反映出教师和学生的教与学的状况,通过对试卷的质量分析,可以找出师生双方的不足,在教学中加以改进。
为了及时反馈课程建设两年来的建设成果的有效性,不断更新课程内容,于2014年12月对我校0511111等四个班级138份期末试卷进行了分析。
一、材料与方法
选取2009级、2010级四年制本科学生Welding and Joining of Materials期末试卷138份(2009级67份、2010级71份)进行分析,题型、题量、分值相同,由于本课程的考核采用多项目评估手段,即总成绩包括Homework,Lab,Mid-Term Examination和Final Examination四部分,因此,分析主要针对Final Examination部分进行。试卷题型分值构成如表1所示。
具体题型如表2所示:在各个题型中,也提供多项选择。
二、结果与分析
(一)成绩分布
一般认为,高校课程合格性考试的学生成绩在75-80分,标准差10左右比较理想。由各年级成绩分布统计表3可见:2009级、2010级平均成绩和标准差基本符合这一要求。如表4所示,根据分数段频率分布统计结果,2009级成绩主要集中在60~70分、90~100分,其中,60分段最多占34.33%,90分占15.05%;2010级主要集中在60-80分,其中60分段的比例与2009级相差不大,说明该段需要提高,70分段~100分段的都有所增长,比例趋于均匀化。2009级0511104班标准差偏大,达到了16.12,2010级标准差为11,全距用来表示分值的变异量数,分值最大值与最小值之间的差距,即最大值减最小值后的分值,可用于等距变量、比率变量。结果表明,2009级0511103班级的全距为46,而2009级0511104班级的全距为64,2010级的全距减小为32。偏度系数是描述分布偏离对称性程度的一个特征数。当分布左右对称时,偏度系数为0。当偏度系数大于0时,即重尾在右侧时,该分布为右偏。当偏度系数小于0时,即重尾在左侧时,该分布左偏。偏度系数分别为0.56、-0.39和0.01,表明两个班级的考试成绩分别呈正偏态分布与负偏态分布,2010级为正偏态分布。如果以试卷为对象,2010级的全距为67,偏高,标准差为12.96,偏度系数为-0.1。
(二)信度
信度指试卷的稳定性和可靠性程度,是衡量考试成绩与考生真实水平一致性如何的指标。目前,试卷分析多位计算内部一致性信度,常采用内在信度Cronbachα系数法,
其中:s2为总分方差,si2为第i题分数的方差,n为试题数。二份试卷的信度系数见表5所示。
一般认为,信度大于0.9可靠性较好,但对高校课程的合格性考试0.5以上即可,计算2010级中,n=5,总分方差为12.96。两份试卷的信度系数均在0.65以上,表明两次考试成绩均是可靠的,考试成绩能够比较真实地反映考生的实际水平。
(三)效度
效度指试卷的准确性和有效性程度,反映了考试成绩与预期目标之间相关的程度。效度分为内容效度、效应关联效度和构想效度,学科测验主要考虑内容效度。内容效度主要是在试卷中,试题对预测教学内容的代表性程度,即教学目标是否通过考试实现了预期的考察。一般用个章节考题分数与教学学时数两列数据的积差相关系数反映考试与教学的一致性。本研究主要通过几大部分考察效度,执行力、实验能力、背诵、朗读、英文读说、想象力等几个方面,相关系数介于0.4~0.6认为考试与教学要求基本一致;相关系数介于0.6~0.8认为考试与教学要求一致;当相关系数大于0.8时,考试则与教学要求高度一致。计算结果表明,两次考试内容效度分别为0.76,0.82,说明两次考试与教学要求有较高的一致性。
(四)難度
难度是评估试卷难易程度的指标,可以用难度系数表示,难度系数越大,难度越低。表6和表7是本次调查试卷的难度分布,分析结果表明,难度系数在0.5~1之间,名词解释偏容易,选择题、填空题、读图题偏难,2009和2010级难度系数分别为0.71和0.62。试卷整体的难度系数可以由各题的难度指数加权平均求出,对于高校课程合格性的水平考试,通常试卷整体难度以0.7~0.8为好,表6显示,2010级试卷整体有一定难度,可以选择降低难度。
题型结构是试卷内容的主要表现形式。考试的题型一般可以分为两类:主观题和客观题。主观题主要考察学生对知识的理解、掌握深度和表述能力,答题相对自由,题型有问答题(简答题、论述题)、分析题等,对于这类题型,学生可以灵活运用所掌握的知识充分表述个人的见解。此类题型了解学生综合分析问题、解决问题的能力,检测学生对知识点的理解及综合运用等方面具有优势,但此类题型题目大,分值高,涉及课程内容的题量相对较少,内容涵盖面相对较窄,有一定的局限性。客观题题型较固定,主要考察课程中学生必须掌握和记忆的基本概念、基本原理等。题型有选择题、名词解释、填空题、改错题等,此类题目小,题量多,内容覆盖面广,题目和答案较为固定,用于检测学生对课程基本知识掌握、理解的程度。这类题型还与学生复习的仔细程度和对知识点的记忆能力有关,在检测考生知识的综合应用能力和整体思维能力等方面有所欠缺。
三、结论
综上所述,两份试卷分析充分显示全英文课程试卷Welding and Joining of Materials总体质量良好,题库试题组成基本合理、科学,符合教学大纲要求,能较全面反映教学内容,考核学生的真实水平,使考试有较高的效度和信度,但同时发现题库还存在一些不够完善的地方,部分试题有一定难度,而有些题型较为容易,因此在这些试卷分析的基础上,我们对已有试卷进行了拓展,提出了18套优异试卷,建立了Welding and Joining of Materials基础题库,根据需要及时删减或修改过于简单的试题,增加具有深度和广度的试题,逐步完善试题库,使题库质量得以真正提升。
未来教改方向,1.课程综合改革,逐步达到国际平均水平;2.逐渐降低课堂人数,完善平时成绩的考察,增加学生参与课堂的意愿,使平时成绩成为真正提高学生综合素质的平台;3.进一步提高试卷质量,使题目难易程度均匀化,更合理、更有效地考察学生的理论水平和解决问题分析问题的能力。
[参考文献]
[1]李文娟.专业课全英文教学面临的问题与建议.佳木斯教育学院学报,2013,130(8):349+359
[2]胡水清,张玫,王荣欣,顾维萍.本校“双语教学”的调查报告及分析.重庆医学,2009,38(19):2514~2515
[3]徐培全,马春伟,任江伟,刘传根,曹晓莲.“050180: Welding and Joining of Materials”课程期末评估及问题初探.教育理论与教学研究,2013,205(12):41~42
[4]冯修猛,李凯军,闫实,刘星,王莞.试卷分析及其对教学工作指导作用的研究.西北医学教育,2009,17(4):698~700
[5]王天义.试论统计分析方法在试卷分析中的应用.兰州工业高等专科学校学报,2004,11(1):62~65
(作者单位:上海工程技术大学 材料工程学院 上海)