英语四级统考完形填空试题的内容效度分析

陆 彦

(广东女子职业技术学院,广州 511450)

英语四级统考完形填空试题的内容效度分析

陆 彦

(广东女子职业技术学院,广州 511450)

在回顾测试中完形填空试题形式的演变及其发展的基础上,采用定性分析方法对 2007—2009年大学英语四级完形填空分别从字数、题材、体裁及实词和虚词、句子层面和语篇层面等综合运用能力方面进行内容效度分析,分析结果表明完形填空题的内容效度较高并满足测试目的。

完形填空;效度;内容效度;衔接;语篇

完形填空是外语教学中常采用的一种综合性较高的测试题型,是获取学生个体发展和教学反馈信息的重要手段,可以了解和检查学生掌握课程教学大纲所规定的语言知识和语言技能的深度、广度和熟练程度,使学生能了解自己的学习情况,同时也是对教师的教学活动以及教学计划、教学大纲所体现的教育目标的检验。

一、完形填空及其演变

刘润清提及完形填空最初称完形程序 (Cloze Procedure),是由W.L Taylor在 1953年发明的,其根据来源于格式塔心理学 (Gestalt Psychology)。Gestalt是德语词,意为“完形”、“经验的整体”。这派心理学家认为,人们在观察物体形状时,会下意识地把形状中的空缺填补上去[1]。

Taylor认为,人的阅读过程也是完形的。但对有空缺的语言片段的完形过程有不同于对有空缺的图形的完形,还原有空缺的语言片段,实际上是进行信息处理。自然语言中有许多冗余的信息,由于其意义的重复和词汇之间的内在联系,故能够去掉许多词而不影响传递信息。但是,完形测试不仅涉及到破坏信息量,而且涉及语言本身的难易程度,这种难易程度不仅与文字本身有关,而且与内容的熟悉程度有关[2]。

完形填空发明之初是用来测试母语文章的可读性,后来被广泛应用于外语测试中,随着新的问题的出现,其形式也在发生变化,出现了多种不同的题型。

定距删词完形填空 (the fixed-ratio cloze)。所谓定距删词完形填空,是指固定地每隔多少个词删掉一个词。据称,有规律地去掉词才能保证测试的信度和效度。但问题很明显,刻板的删词不能满足出题者的测试意图。于是,出现了许多完形测试的变体。

合理删词完形填空(the rational cloze)。所谓合理删词完形填空是指打破标准完形填空测试的规定,不定距地、有选择地删除短文中的一些词,这样就改变了测试的随机性,加强了目的性和使用性。

改型完形填空(modified cloze)。由于前面提到的两种完形填空都会面临这样的一个问题,即考生的填词虽然与原文的不一样,但却是可以接受的,这为评分带来一定的麻烦。于是,诞生了选择式完形填空,即给每个空格提供几个选择项(多数情况下提供四个选择项),其中有一个正确答案,其他是干扰项。这避免了评分中的争议,但题目的难度有所降低。

完词式完形填空(C-cloze)。C-cloze是指将空缺处单词去掉几个字母的完形填空题,这种变体是德国于 20世纪 80年代发明的。其优点是命题容易,考点多,评分客观。缺点是试题的效度不够好,表面看去题目缺少整体感。

二、大学英语四级统考真题完形填空内容效度分析

(一)效度、内容效度及内容效度的分析方法

效度和信度是测试中必须考虑的基本问题。其中效度的高低是衡量语言测试目标的成功程度的最重要的质量指标,或者说是语言测试的基本出发点。林连书认为效度也叫有效性,指研究结果是否反映了研究者想要研究的东西[3]。1974年美国心理学会发行的《教育和心理测验的标准》一书将效度分为三大类:内容效度、观念效度和效标关联效度,也可从两个方面去理解:一是考试的目的,二是考试的内容。

Heaton认为内容效度基于对被测试语言的认真分析及特定的课程目标,为了明显地含有代表性的样题,体现出测试题目之间的关系,这才是测试设计的目的[4]。Richard同样认为内容效度是测试中有效性的一种,以测试能充分地测出所要测量的技能程度为基础[5]。简单的说,内容效度主要采用定性分析方法,指的是测验的内容是否概括了所要研究的内容,测验内容是否有代表性,是否全面,是否考了大纲规定要考的内容,考试题目在多大程度上能代表它所要测量的目标。

内容效度主要靠试题设计和试题生产(命题和审题)时严格遵守考试大纲要求,黄光扬主张其分析主要依靠有关专家对测验题目与应测内容范围的吻合程度作出判断[6]62。

(二)大学英语四级统考完形填空题内容效度分析

我国大学英语考试是一种标准化考试,按照考试的方式划分可分为分离式测试(discrete-point test)和综合式测试(integrative test)。现在常用的听写、完形填空、翻译、作文等都属于综合式测试,其中,完形填空采用的是改型完形填空形式。2006年修订的《大学英语四级考试大纲》(以下简称《大纲》)明确规定在 220～250词为学生熟悉题材的短文中有 20个空白,空白处所删去的词既有实词也有虚词,要求考生选择一个最佳答案,使短文的意思和结构恢复完整。对测试的语料选择要求题材广泛,包括人文科学、社会科学、自然科学等领域,所涉及的背景知识应为学生所了解;体裁多样,包括记叙文、说明文、议论文等[6]4-5。

本文就 2007年、2008年和 2009年大学英语四级统考五套真题的完形填空分别从字数、题材、体裁及实词和虚词、句子层面和语篇层面等综合运用能力方面进行内容效度分析。

表1

表1显示,过去三年进行的五次试题无论在短文字数还是短文题材和体裁方面都较严格地完成了《大纲》的明确规定。五次试题短文长度控制在 222～257字数之间;语料选择最多的是社会科学,其次是自然科学领域,社会科学领域中两篇短文选择的都是学生们关注的教育话题;文章体裁以议论文和说明文为主,说到体裁,值得一提的是有些短文体裁不单纯只有某种文体特征,往往同时具有多种文体特征。再者,数据表明,短文中人文科学题材涉及的较少,可能是今后出题应该注意弥补的一点。

《大纲》还明确规定:“完形填空测试考生各个层面上的语言理解能力及语言运用能力。”[6]5具体地讲,从基本层面——词汇层面看,试题中是否存在较为合理比例的实词和虚词选项;或者从较高层面——句子层面到更高层面——语篇层面分析,选项中的正确选择是否兼顾了基于句子层面或语篇层面的理解,杨惠中强调它首先是测试考生对篇章的理解能力[7]112。见表2。

表2

表2中的统计数据表明:

1.从词汇层面来看,选项中实词通常占到大约 15个,约占75%,很明显,实词始终是考试的重点。实词指动词、名词、形容词、副词、数词等。对实词的选择既要看其意思用在句子中是否得当,也要看它与其他词的搭配关系是否合适,是否符合英语语言表达习惯。虚词占到5题左右,约占25%。虚词指介词、连词等,主要用来表示语法结构关系。杨惠中同样认为在上下文中选择虚词是语法问题,但必须基于对上下文的正确理解才能判断出作者真正要表达的意思[7]114。数据表明短文一直是以较稳定的比例兼顾实词和虚词的考查检测。

从考题统计分析来看,词义辨析题和逻辑衔接题是考查的重点,尤其是近年来,逻辑衔接题的比重在不断加大,这足以见得考试中完形填空的命题注重的是短文意义的理解,而不仅仅局限于掌握句法结构。

如果说单纯测试词汇层面属于对语言基础知识的基本要求,那么考查句子层面和语篇层面则无疑是对考生提出更高的要求。

2.从句子层面和语篇层面看,短文完形填空题较侧重考查学生语篇层面的知识和技巧的运用,五次试题相比较,句子层面占到 20%～55%,语篇层面占到45%～80%。

华先发认为句子是能够单独存在并能表达相对完整意义的语言单位。英语句子按其结构可分为简单句(由一个独立分句组成)和非简单句(由两个或两个以上的分句组成)[8]96。在这一层面上,试题应不仅检测学生分析句子结构、句子各主要部分之间的逻辑关系的能力,还且要考查学生分析句子之间的逻辑关系、句子与段落之间的关系及其他相关背景知识的综合能力。

语篇(text或 discourse),简言之是指有意义的表述的集合。华先发认为它是语言的最高层面,是一个语义整体,语篇的分析可以解决许多语法解决不了的问题。结构上的衔接或者称为黏着性(cohesion)和意义上的连贯性(coherence)是其两大重要标记,常通过段落来建构[8]123。当语篇中一个成分的含义依赖于另一个成分的解释时,便产生衔接关系。衔接的手段主要有:照应(reference)、替代 (substitution)、省略 (ellipsis)、重复 (repetition)、同义/反义 (synonym/antonym)、上下义(hyponomy)、搭配(collocation)及连接 (conjunction),其中照应、替代和省略属于语法衔接手段,重复、同义/反义、上下义和搭配 (collocation)属于词汇衔接手段。胡壮麟认为连接是通过连接成分来体现语篇中各个成分的各种逻辑关系的手段,连接成分往往是一些过渡性的词语,如表示时间、条件、因果等逻辑上的联系,主要由连词、连接副词和介词短语体现。它们可以表示为顺接、逆接、添加、对比、同位等语义关系。需要强调的是,表示时间、因果逻辑关系时,有时并不用明显的连接成分来表示,这时称为零形式连接或意合形式连接[9]。

表2数据显示出近三年的完形填空短文基于语篇层面的选择呈明显递增趋势,表明对语篇层次的要求愈来愈高,还有一个有趣的发现就是在采用语篇衔接手段体现语义时连接手段运用得最多。

三、结语

测试的后效应对教与学起着不可低估的反拨作用,完形测试题分析结果提示教师在教学中,应从语篇的题材、体裁和句法、词汇等层面分析文本,重视语篇衔接手段对语义连贯表达的地位作用,分析理解语篇的建构过程,注重培养学生具有从语篇的层次来宏观分析文章的内容和结构、领悟作者的写作意图、把握主题、获取完整信息的逻辑判断思维能力,提高英语教学效率和效果。

[1]刘润清.语言测试和它的方法[M].北京:外语教学与研究出版社,1991:52.

[2]Taylor,W.Cloze Procedure:A New Tool for Measuring Readability.Journalism Quarterly30,1953:415-433.

[3]林连书.应用语言学实验研究方法[M].广州:中山大学出版社,2001:5.

[4]Heaton.J.B.W riting English Language Tests[M].Longman:Longman Group UKLimited,1988:160.

[5]Richard,J.C.,Platt,J,&Platt,H.Longman Dictionary of Language Teaching&Applied Linguistics[M].Hong Kong:AddisonWesleyLongman China Press,1992:101.

[6]全国大学英语四、六级考试委员会.大学英语四级考试大纲(2006修订版)[M].北京:高等教育出版社,2007.

[7]杨惠中,C.Weir.大学英语四、六级考试效度研究 [M].上海:上海外语教育出版社,1998.

[8]华先发.新编大学英译汉教程[M].上海:上海外语教育出版社,2004.

[9]胡壮麟,朱永生,张德禄.系统功能语法概论[M].长沙:湖南教育出版社,1989:156-157.

The Analysis on Content Validity of Some Cloze Tests of CET-4

LU Yan
(GuangdongWomen's Polytechnic College,Guangzhou 511450,China)

This paper first reviews the evolution of cloze forms,and then analyzes some cloze tests of CET-4 from the perspective of content validity with the method of qualitative analysis,and the result shows that these cloze tests satisfy the demand of testing students'comprehensive ability.

cloze test;validity;content validity;cohesion;text

H319

A

1001-7836(2010)03-0170-03

(责任编辑:孙大力)

2009-11-30

陆彦 (1964-),女,江苏新沂人,副教授,文学硕士,从事英语语言文学研究。