2005～2012年英语专业四级完形填空题的考点效度分析

摘 要：本文以2005～2012年的英语专业四级完形填空为研究对象，运用李筱菊的考点效度理论对该部分试题进行了统计分析。结果表明：英语专业四级改革后，该部分试题以句子层次和语篇层次考点为主，侧重句子及语篇意义的理解，并涉及语法和词汇，符合新考纲的要求，考点效度较高。

关键词：TEM4；考点效度；考点层次；考点因素

0 引言

英语专业四级（TEM4）考试的目的是全面检查已完成英语专业基础阶段课程的学生是否达到了《高等学校英语专业英语教学大纲》所规定的各项英语专业技能要求。根据2004年新版的《高校英语专业四级考试大纲》，完形填空试题考试时间和总分比重不变，题量由原来的15题增加到20题。本部分采用多项选择题，短文约250单词，题材熟练，难度中等，填空的词涉及语法和词汇。该试题测试学生的综合语言知识和能力。该题型在改革后的实际应用中试题效度如何？是否符合新考纲的要求？本文将对200～2012年的TEM4完形填空进行考点效度分析，以期为今后TEM4的命题工作提供参考。

1 完形填空试题的考点效度

考点效度的概念是由我国的语言测试专家李筱菊教授在《语言测试科学与艺术》一书中首次提出。我们现在最常用的完形填空题是“合理删词分题选择”完形填空，信度，评分效率有保证，但是更根本的结构效度、使用效度、反拨效度等仍有待改进。而考点效度就是指命题者在命题时对所要删除的项目进行分析考察，尽量提高删除项目的语篇制约范围的考点层次，充分发挥完形填空语篇语境的优势，以便真正考查受试者综合运用语言知识的能力。这也正是专四考纲中对完形填空这一题型的测试要求。李筱菊认为，考点效度主要包括考点层次和考点因素两方面。考点层次可以分为4个层次，即单词、词组、句子和语篇层次。单词层次最低，指光看单词，无须看单词之外的上下文就能决定填什么词；词组层次主要看要填的词和它前后的词的固定搭配关系，只要看空缺前或后的词便能决定该填什么；句子层次指空缺需要填什么词，本句之内就可以决定；语篇层次则是指空缺要填的词要超出句子，在语篇层次上考虑才能决定。显然，语篇层次考点的题目比单词层次的考点更能测出受试者运用语言的真正能力。而且高层次的考点，在考高层次能力的同时，必然也考到低层次的能力，而低层次的考点却不能反过来包含高层次考点要考的能力。因此，考点层次越高，意味着考点的效度就越高。

李筱菊认为，考点因素涉及三个范畴：语法因素、惯用搭配因素和意义因素。一个考点往往兼考两或三个因素，但每个考点都有侧重考的因素即焦点因素，以及附带考到的因素。语篇层次的题目，侧重意义因素的考查；单词层次的题目，侧重语法因素的考查；词组和句子层次的题目，其考点的焦点可能是意义，惯用搭配或语法因素。同一层次中，以意义为焦点的题目同时能考到惯用搭配和语法；以惯用搭配为焦点的题目，也同时能考到语法；但是以语法为焦点的题目，却不能反过来考到意义因素和惯用搭配因素。

2 考点效度分析与讨论

根据李筱菊的考点效度分析方法，笔者对2005～2012年TEM4完形填空试题从考点层次和考点的焦点因素两方面进行分析。以新考纲出台后的2005 TEM4完形填空题为例，这里列出其考点分析结果（见图1）。

由图1可知，2005年TEM4完形填空20题中，语篇层次考点9个，占总数的45%，句子层次考点10个，占总数的50%，词组层次考点1个，占总数5%。考点以语篇层次和句子层次为主，考点层次较高；就考点因素而言，考查意义因素的占总数的65%，考查词组搭配的占30%，考语法的占5%。综合这两方面因素，2005年的专四完形填空试题以中高层次考点为主，侧重对意义理解的考查，兼顾考查短语搭配和语法项目，符合新考纲的要求，试题的难度和区分度较好，考点效度比较理想。笔者对2005～2012年TEM4完形填空试题的考点效度和考点层次进行了统计，结果如下：

表1中的字母依次代表年份，单词，词组，句子，语篇和百分比。从该表可以看到，除了2006年有一道考查单词层次的题外，其他年份都没有单纯考查该层次的题；词组层次的考点在2005～2012年完形填空中所占的均值为20.6%，句子层次的为51.3%，语篇层次的为27.5%。由此可见，这八年的完形填空中，句子层次和语篇层次考点的比重较大，尤其是句子层次的考点，比重最大。从考点层次来讲，语篇层次的比重越高，试题的效度就越高，就越能发挥完形填空试题的优势：从语篇语境考查受试者运用语言的真正能力。因此，改革后完形填空的效度还有待进一步提高，命题人应争取更多地突破句子层次，达到语篇层次，以发挥完形填空试题的优点。表2中的字母依次代表年份，语法，惯用搭配，意义和百分比。在表2中可以明显看到，考查意义的考点因素比重最大，均值为64.4%；考查惯用搭配因素的比重次之，均值为22.5%，考查语法因素的比重最少，均值为13.1%。这些以考查意义为考点因素的题目，答案的确定往往取决于句子的含义，或者跨越段落甚至语篇，需要受试者通过阅读上下文信息，综合起来进行分析判断。这样的题目就能考查受试者的综合运用语言知识的能力，效度也就较高。

综合图1，表1和表2，2005～2012年TEM4的完形填空试题以中高层次的考点为主，虽然语篇层次的考点比重在总体上没有占到最大，但是以意义为考点因素的题目比例却最大，题目涉及语法和词汇，测试学生的综合语言知识和能力；其中2005年的完形填空试题的区分度和考点效度较之其他七年更为理想。因此整体上改革后的TEM4完形填空试题的难易度适中，效度很高，命题符合新考纲的要求。

3 结语

本文运用李筱菊的考点效度理论，分别从考点层次和考点因素两方面对2005～2012年TEM4完形填空试题的考点效度进行了分析比较，发现这一题型在这八年中以句子及语篇层次的考查为主，偏重对句子及语篇的意义理解方面的考查，同时也涉及语法及词汇的运用，虽然整体上句子层次考点的数量较之语篇层次来讲仍然较多，但该题型题目的设计符合改革后新的考纲要求，难易度适中，比较适合对英语专业基础年级学生的考查，效度很高。就考点效度这一概念而言，命题者在命题过程中，应充分利用完形填空试题的语篇语境优点，突破句子层次，更多地设计语篇层次考点的试题，进一步提高试题效度，尽量体现这种题型的特点和效度。

参考文献：

[1] 高等学校英语专业四级考试大纲修订小组.高校英语专业四级考试大纲[M].上海：上海外语教育出版社，2004（9）.

[2] 顾晓微.TEM-4改革前后完形填空的考点效度对比分析[J].安徽工业大学学报社科版，2010（1）：81-83.

[3] 李筱菊.语言测试科学与艺术[M].长沙：湖南教育出版社，2001.

[4] 邹申，杨任明.简明英语测试教程[M].北京：高等教育出版社，2000.

作者简介：沈艳静（1983—），女，硕士，福建师范大学闽南科技学院助教，研究方向：为第二语言习得与测试。