2012至2017年英语专业八级成段改错考点效度分析

2018-04-28 01:45:29林萍
文化创新比较研究 2018年7期
关键词:惯用词组效度

林萍

(广西师范大学外国语学院,广西桂林 541004)

英语专业八级考试短文改错试题共10小题。其中10行标有题号,每行均有一个语误。学生根据“增添”、“删去”或“改变某一单词或短语”改 正语误[1]。成段改错题型属于C类试题,注重考察考生语法、词汇及逻辑能力。除对语法知识、常见错误足够熟悉外,还要有灵敏的语感、地道表达和连贯的逻辑思维。

1 考点效度定义

桂诗春认为,效度是指一套测试测量了它所要测量的东西的程度。效度的高低是语言测试最重要的指标,是语言测试的基本出发点[3]“它虽然可以从多方面来解释,但总是根据测试分数所做出推论的准确性程度”[5]。Bachman认为,效度可以分为内容效度、预测效度、共时效度、实验效度。它们是一个整体概念中的不同方面[4]。根据李筱菊的语言测试科学和艺术,可以从以下方面来对考点效度进行分析:(1)考点层次;(2)考点因素;(3)考点覆盖分析。考点层次可以分为单词层次(W)、词组层次(P)、句子层次(S)、语篇层次(D)。 考点因素一般分为三个范畴:语法因素、惯用搭配因素以及意义因素[2]。

2 考点效度分析

本文以2012至2017年成段改错试题总计60题为研究对象,从考点层次、考点因素以及考点覆盖这三个方面来进行考试效度分析。

表1 考点层次和考点因素分析表

表1是考点层次和考点因素分析表。其中W,P,S,D分别代表单词层次,词组层次,句子层次和语篇层次。G,M,C代表语法因素,意义因素以及惯用搭配因素,表格数字为相关项目所占百分比。考点层次高低决定题目效度。一般来说,考点层次越高,考点效度越高。(1)从表1可看出试题单词层次考试次数为0,词组层次平均占16.7%。语篇层次,平均占16.7%。句子层次平均占66.7%。考点层次主要集中在句子层次,语篇层次上和词组层次不相上下。总体而言,考点层次较高,除2012和2016年涉及语篇层次更高外,其他均涉及10%,所以未来改错题可以稍微提高语篇层次考点数量。(2)除2012年考点层次相对较低,其他几年考点层次均属理想值,显示了专八试题的高水平和高效度,其中2016年最高。但是词组层次没有考点也不完善。改错试题重在考查准确性,词组层次涉及到还是比较均衡的。(3)横向看表格,词组层次考点试题逐渐减少,句子层次和语篇层次考点试题逐渐增加。这说明专八改错试题更加倾向于测试学生综合知识能力,对学生辨错、改错能力要求逐渐提高。

成段改错试题总体目的偏重于考查准确性的试题,因此焦点会涉及较多语法项目。(1)由表1可知,语法因素均占63.3%。意义因素均占23.3%。惯用搭配因素最高均占13.3%,虽然改错题会不可避免出现较多语法题,但2012年语法因素高达90%,意义和惯用搭配仅占10%,所以此处考点因素略微不合理。其他几年考点因素分布相对均衡。(2)横向看表1可知,语法项目呈现下降趋势,意义因素呈缓慢增长趋势,惯用搭配因素稳步增长并保持稳定。由此可以看出专八试题试图减少考察语法,加大对意义因素、惯用因素的考察,对学生词汇、惯用用语以及句子语篇理解能力要求加大提高,对于地道表达和连贯思维能力要求提高,从而也提高了对于学生综合知识能力的要求。

表2为考点分布表,该表参考李筱菊《语言测试与艺术》考点覆盖分析表,在此基础上,笔者根据研究对象对该表格进行稍微调整。由表2可以看到考点分布大体上相对广泛。(1)从考点总次数得出:词法共计27次,冠词、限定修饰词、副词、肯定词、否定词、以及固定用语较多考到,这些考点是考生平时较难掌握也容易出错的考点,但对于冠词尤其是冠词the考试过于频繁,基本每年都有涉及,因此此处考点不合理,出题人应该对其他词法考点多加分配。例如虚拟语气,连系动词、分词等。(2)句法共考18次,其中It句型、连词连接语以及定语从句较多考到,也是较难考点,提高了考试题目的难度和层次。尤其是连词连接语主要考句子的逻辑关系,这种类型题目要求学生对语篇有较高理解能力。但是该考点也稍过于频繁,比如连接语和定语从句基本每年都会涉及,这样就会影响试题效度,所以句法考点里出题人也应当尽量对于比较句型、动词句型、词序等其他考点有所照顾。(3)平行结构共考2次,仅2013年有而其他几年均未涉及,一年两次过于集中,可间断来考。这个考点要求学生对于短语、句子、甚至语篇都要全面理解,所以适当增加此类考点对于改错题也是合理的。(4)词汇和其他共考13次,词汇除2012年之外,其他都有涉及并且呈现增长趋势,说明改错题对于学生词汇掌握要求逐步提高。2015、2016、2017这三年均涉及3个,处于适量范围。

表2 考总分布表

3 结语

通过以上分析得出近6年改错试题考点效度较高,但仍可有所提高,命题人可以利用成段改错试题的语境优点,在现有基础上增加语篇层次考点,适当提高考点效度。此外,也可以均衡考点因素以及考点分布方面来提高考点效度。

[1]高等英语专业八级考试大纲修订小组编.高等英语专业八级考试大纲(2004年新版)[M].上海:上海外语教育出版社,2004.

[2]李莜菊.语言测试科学与艺术[M].长沙:湖南教育出版社,1997.

[3]刘润清,韩宝成.语言测试和它的方法[M].北京:外语教学与研究出版社,2000.

[4]BACHMANLF.FundamentalConsiderations inLanguage Testing[M].London:OxfordUniversity Press,1990.

[5]修旭东.中外语言测试基本理论与实践[M].青岛:青岛海洋大学出版社,2002.

猜你喜欢
惯用词组效度
中日惯用谚语对比研究——以动物隐喻为中心
表原因的惯用型研究
慈善募捐规制中的国家与社会:兼论《慈善法》的效度和限度
资金盘传销惯用包装伎俩和鉴别方法
被看重感指数在中国大学生中的构念效度
心理学探新(2015年4期)2015-12-10 12:54:02
外语形成性评估的效度验证框架
副词和副词词组
复杂图形测验对区分阿尔茨海默病与非痴呆的诊断效度