刘婷婷
摘要信度在大学英语四级考试的作文评分中非常重要,指出了目前存在的缺陷,并提出提高其信度的对策——教师与计算机结合阅卷的可行性,对其他全国统一的英语作文考试评分有一定的参考价值。
关键词大学英语四级考试信度问题与对策
中图分类号:H315 文献标识码:A
大学英语写作极其重要。董亚芬(2003)认为“我国的英语教学应始终以读写为本”。在听、说、读、写、译五项技能中,写是比较难的,但它最能使学生有成就感,也是激发学生非智力因素的最好方法之一。①但目前对于作文评阅信度的研究深度和广度都不够,打开学术期刊网站,相关研究屈指可数。在介绍相关概念后,指出了目前存在的缺陷,并提出提高其信度的对策——教师与计算机结合阅卷的可行性,对其他全国统一的英语作文考试评分有一定的参考价值。
1信度的概念及大学英语四级作文评阅要求
1.1相关概念
信度,指的是测试结果是否稳定可靠。也就是说,测试的成绩是不是反映了受试者的实际语言水平。例如,如果同一套测试在对同一测试对象(即受试者本身没有变化)进行的数次测试中,受试者的分数忽高忽低的话,则说明该测试缺乏信度。②大学英语四级考试作文题型主要是测试学生的综合语言运用能力,作为一种主观题型,阅卷教师的操作流程直接关系到写作考试的信度。
1.2大学英语四级考试大纲作文部分的评分要求和阅卷流程
目前大学英语四级考试的作文按档次计分,作文部分的总分大概为105分,把105分按语言的能力,篇章结构以及综合水平划分为5个档次。譬如最高分的那档就要求语言几乎没有错误,篇章组织好,作文条理清晰等。这个评分标准基本保证了大学英语四级作文评阅的信度,但还是有一定的缺陷。从阅卷流程来看,首先教育部在全国主要高校选拔认真负责的大学英语教师参加阅卷,然后进行相关培训。阅卷是按小组划分的。过去集中在上海外国语大学或上海交通大学阅卷。现在把阅卷权限放到了各个省的省会城市主要重点大学进行。总体流程比较规范,但由于时间紧迫,任务大,差错难免。
2大学英语四级作文评阅中信度的问题
(1)阅卷高强度的工作负荷减少了阅卷的信度。尽管存在统一的评分标准,目前网络阅卷便利快捷,但由于教师人数有限,很多大学英语四级作文的阅卷时间少于1分钟,加上有少数教师责任心缺乏,使其信度大大打了折扣。
(2)教师的教学理念存在偏差,作文评阅模式存在诸多缺陷。③
(3)有些阅卷教师阅卷带有强烈的个人主观色彩,或过多的拘泥于语法和评写等语言错误而忽视总体内容,可谓是只见树木不见森林,抓住局部忽视主体。
3人工与智能机器结合阅卷的可行性
要提高大学英语四级的作文评阅的信度,我们可以采纳国外同行的经验,将人工与智能机器结合阅卷结合起来。近年来,国外考试研发机构均将传统由人工进行的作文评阅环节纳入计算机评卷系统。2007年,美国麦克劳-希尔加州考试中心研发的WritingRoadmapTM2.0在线英语教学软件进入中国,该系统不但可以为学生在线提交的作文作出及时评分、生成分析报道,也可以为教师全面了解学生的写作情况提供多维分析报告。此外,“托福、GMAT这类全球性、大规模的国际性英语考试也已开始广泛应用机器自动化作文评阅系统”。④计算机评分系统虽然省事,但也存在不少弊端,它只能对学生的语言水平作出评定,而始终无法对作文的风格,内容等进行公平的打分。基于此,特推荐一种人工与智能机器结合阅卷方式,来提高大学英语四级的作文评阅的信度。
第一步为机器阅卷,给出考生的语言分,该项占大约百分之五十的比例。第二步,教师按照大学英语四级的作文评阅的评分要求按档打分,重点看写作内容和篇章布局及修辞等。第三步为不同阅卷小组对在线交换评阅作文,有争议的考生作文在线由阅卷组长定夺。以2011年6月的全国大学四级作文话题onlineshopping为例,首先电脑对学生的语法,拼写和字数给出一个基本分,再有教师按评分要求分档次记分,最后阅卷组复核。有时要掌握灵活性,如对语言功底好的考生可以总体加7分,当年一位考生的结尾这样写“Theforemostistoenforceestablishsomerelevantlawsandregulations,withstrongsupervisionoversomeshoppingwebsitesbeingreinforcedaswell.Then,theconsumersalsoshouldbeequippedwithmorealertincaseofbeingtrapd…”。由于其表达很地道,最后小组决定多加7分。
总体说来,教师与计算机结合阅卷有切实可行性,节省了时间和物力,最大限度地保证了大学英语四级考试的作文部分评分的信度,对其他全国统一的英语作文考试评分有一定的参考价值。
注释
①吴斐.大学英语四级作文评阅的信度问题与对策[J].科教文汇,2009(11).
②丁往道.英语写作手册[M].外语教学与研究出版社,1994.
③Gray.Hill 托福考试一本通[M].世界图书出版社,2007.
④Jacob,G.M.,Bal,l.J.AnInvestigationoftheStructureofGroupActivitiesinEFTCourseBook[J].EFLJournal,1996(50):99-107.