刘丹青
摘 要: CET-4和TEM-4同为全国性的英语教育类考试,二者包含的写作类题目皆具有考点综合全面、考查直观深入的特点,这些共同点使得部分学生在备考时极易忽视其差异性,导致考试结果不理想。本文以这两项考试中作文评分标准作为切入点,分析其效度和信度的高低,从而揭示二者各自的侧重点,以期为高校英语的教与学起到引导和推动作用。
关键词: 大学英语四级 英语专业四级 评分标准 效度和信度
一、引言
CET-4(大学英语四级考试)是由国家教育部组织的全国性教学考试,考查对象是全国在校大学生。其目的是推动大学英语教学大纲的贯彻执行,对大学生的英语能力进行全面、客观的评价,进一步促进我国大学英语课程教学质量的提高。该考试自1987年正式实施以来,伴随着考查方向的变化,多次对试卷结构和考查题型进行优化和调整,最近于2013年12月改革,题型按顺序依次为写作、听力理解、阅读理解、翻译四个部分。该考试总时长为130分钟,满分为710分,其中作文在时间分配上为30分钟,分值上为106.5分。
TEM-4(英语专业四级考试)是由国家教育部组织的全国性教学考试,考查对象是高校英语专业二年级本科生。其目的是全面考查已完成英语专业四级课程学习的学生对教学大纲所要求的各项内容的掌握程度,具体从听、读、写、译等方面对学生的单项和综合能力进行系统、客观的评价;该考试能有效评估院校英语专业教学质量,加强院校之间的交流学习。该考试自1991年起实行,试卷题型结构分为听写、听力理解、完形填空、语法与词汇、阅读理解、写作六个部分。其中写作类试题又包含两个板块,一个是议论文或说明文的写作,俗称“大作文”;另一个是应用类文章写作,俗称“小作文”,本文主要探讨“大作文”的评分标准。该考试总时長140分钟,满分100分,其中“大作文”在时间分配上为35分钟,分值上为15分。
二、CET-4和TEM-4写作的评分标准
虽然CET-4和TEM-4在写作题型的设置上存在诸多相近的地方,但其评分标准却相差甚远,评分标准分别如下:
1.大学英语四级
大学英语四级写作要求学生在30分钟之内写出一篇长度在120~180词内的短文。CET-4作文题采用总体评分方法,阅卷人员就总的印象给出奖励分,从内容和语言两个方面对作文进行综合评判。要斟酌作文是否切题,是否涵盖了给出的要点,是否充分用英语清楚而恰当地表达了思想,同时要避免中间现象,该给高分的给高分(包括满分),该给低分给低分(包括零分)。因此,一名阅卷人员在所评阅的全部作文卷中不应只给中间的几种分数。具体评分标准如下:
2分:条理不清,思路紊乱,语言支离破碎或大部分句子均有错误,且多数为严重错误。
5分:基本切题。表达思想不清楚,连贯性差,有较多的严重语言错误。
8分:基本切题。有些地方表达思想不够清楚,文字勉强连贯,语言错误相当多,其中有一些是严重错误。
11分:文章切题。表达思想清楚,文字连贯,但有少量语言错误。
14分:文章切题。表达思想清楚,文字通顺,连贯性较好,基本上无语言错误,仅有个别小错误。
此外,还有两点需要说明。第一,阅卷人员需根据评分标准,对照样卷阅卷。如若认为与某一分数(如8分)相似,即定为该分数(即8分);若认为稍优或稍劣于该分数,则可加一分(即9分)或减一分(即7分)。第二,字数不足应酌情扣分。白卷,或作文与题目毫不相关,或只有几个孤立的词而无法表达思想,则给零分;51—60个词应扣4分,不足50个词最多只给5分(所计字数不包括卷面上已给主题句);只写一段者0—4分,只写两段者0~9分(只规定三段的作文)。
2.英语专业四级
相较而言,英语专业四级的“大作文”要求学生在35分钟之内写出一篇200词左右的短文。TEM-4作文题按语言点的错误数目扣分,阅卷老师要在明显的错误下划线,最后总计得分。具体评分标准详见下表:
a. 思想与表达:满分7分,其中6-7分为优秀,4-5分良好,3分一般,1-2分较差。
b.语言运用能力:满分6分,其中6分为优秀,4-5分良好,3分一般,1-2分较差。
c.写作规范:满分2分,其中2分优秀,1.5分良好,1分一般,0.5分较差。
此外,需要说明的有两点。第一,满分15分,分项可以打0.5分。第二,字数不符合要求应酌情扣分。超出200词过多扣1分;完成规定内容,字数少于170词扣1分;未完成任务的不仅扣字数分,还要从内容上扣分;只有topic sentence,没有supporting points,一般只能得3-5分。
三、写作测试的效度和信度
测试的效度并非指效率,而是指有效性,就是考试所考的是否就是应该考的,或者说有多少是考了教学目的所要求的。由于写作试题的特殊性,考生在做题时会采用躲避技巧,即在写作中,考生可以选择要表达的内容和表达方法。这样考生就可以在语义层和表达层上采取躲避技巧,即避开不会表达的内容或不会使用的表达方法。因此,单从题型上看,其效度往往不如其他题型。
测试的信度,是指它的结果分数用于评价受试者表现的可靠程度。李筱菊(2001)指出,一项考试信度主要受试题质量、考试实施、评卷这三方面因素制约。
首先,就试题质量而言,一般说来,考生在写作测试中只要把握试题的标准和要求,按照题目的要求做答,应该具有较高的信度。但由于CET-4和TEM-4写作的试题范围往往较窄,考查形式较为单一,因此考生很容易按照一定的范文模式进行语言的填鸭式写作,这就导致写作测试的信度大大降低。曾有资深评卷人指出,即使是CET-4和TEM-4的满分作文或是范文,也存在结构死板、内容空洞、缺乏创新观点的问题。
其次,考试实施具有客观性和偶然性。CET-4和TEM-4两项考试都是对听、读、写进行综合考查,受考试环境影响较大,且考查时间往往较为紧迫。因此,本着公平公正的宗旨,在考试的组织、管理上,都应该有明确的规定,比如答题时间、听音设备、监考严密的力度等环节,对所有受试者应当保持一致,尽量规避考试实施中的偶然性。
最后,评卷的保证。由于写作测试是主观性测试,因此其信度很大程度上取决于评卷这一环节。即便每位阅卷人都同样按照语言运用能力、组织能力、逻辑思维能力等标准衡量文章的优劣,但每个人的主观认知和评分尺度多少存在偏差,这就会降低该测试的信度。
四、CET-4和TEM-4作文评分标准对比探析
CET-4和TEM-4作为两项全国性的考试,都已经有超过20年的历史,其试卷质量和考试组织具有丰富的经验和极高的水准,这两个方面影响其信度的几率远低于评卷环节。因此,在某种程度上,CET-4和TEM-4作文题的信度直接取决于阅卷人对评分标准的贯彻实施。具体分析如下:
第一,CET-4的受试人员是高校所有专业的学生,对英语的掌握水平相对较差。因此,阅卷人往往会只看学生的语言运用,忽略写作的其他技能,如逻辑思维能力等。而TEM-4的受试人员是英语专业的学生,且一般为英语专业本科生,英语功底相比而言较为扎实。因此,阅卷人在对学生的语法词汇掌握程度要求比较高的同时,还会注意是否突出主题、合理地组织段落、运用多种句型等,从而使评分具有更强的综合性和合理性。
第二,CET-4作文评分采用整体评分法,评分标准直接将作文较为粗略地划归为五档。Vaughan(1991)在其调查研究的基础上指出:“虽然评分员接受的是同样的训练,不同的评分员在阅卷过程中仍会侧重作文不同的方面,并且可能采用个人的阅卷方式。因此,整体评分法事实上是一种个人独自思考后作出决定的行为。”TEM-4作文是按语言点的错误数目给分,阅卷老师需要在明显的错误下划线,所以评卷老师必须认真负责,客观给分,不易出现主观上的评分偏差。
第三,CET-4作文的评分以整数分值加减,TEM-4作文的分项可以打0.5分,这就使得质量相近的作文能有更精准的区分。
第四,CET-4作文的评分标准对字数的要求是不足时酌情扣分,TEM-4作文的评分标准对字数的要求更严格,不足和超出均扣分,这就避免了冗长重复的表达,对考生的语言水平提出了更高的要求,更能反映考生的写作水平。
由以上四点可知,从作文题评分环节看TEM4比CET4有着更高的效度和信度。笔者认为,这种比较并不是用来评判二者哪个更优,而是在比较中能够切实反映二者各自的侧重点,从而对不同的备考对象起到纲领性意义,引导他们更加重视这两项考试的差异性。
五、结语
由于作文这一题型能够较好地考查学生对语言的掌握程度,因此它历来是语言测试中的一个重要部分,备受考生重视。单纯从考试这一形式来看,阅卷人员和评分标准是作文能否真正评估考生真实能力的关键之处之一,也是评估一项测试信度和效度的关键所在。CET-4和TEM-4不同的评分标准反映了两种考试对考生的不同要求,这就要求考生在备考时需要区分对待;同时作为教师,我们必须积累更多的教学经验,紧扣考试大纲的内容及要求,从而对考生做出合理有效的引导。
参考文献:
[1]Bachman & Palmer.Language Testing in Practice[M].上海:上海外语教育出版社,1999:208-211.
[2]Mcnamara,T.F.Measuring Second Language Performance[M].New York,Longman,1996.
[3]Vaughan,C.Assessing Second Language Writing in Academic Context[M].Norwood,New Jersey:Ablex Publishing Corporation,1991.
[4]费茜,赵毓琴.大学英语四级写作评分标准中的问题分析[J].外语教学理论与实践,2008(4).
[5]李筱菊.语言测试科学与艺术[M].湖南教育出版社,2001.
[6]杨亚东.解读英语专四作文阅卷标准[J].国际关系学院学报,2009(3).
[7]余瑞雪.基于评分标准的大学英语四级写作探析[J].太原城市职业技术学院学报,2011(5).
[8]赵琪凤.国内语言测试写作评分标准理论与应用发展述评[J].理论与实践,2009(8).
[9]鄒申,杨任明.他们如何使用写作评分标准?——TEM4新老评分员调查[J].国外外语教学,2002(3).
作者系西北大学外国语学院在读研究生,任教于西安翻译学院。