基于试卷分析的大学英语测试研究

2015-05-30 05:02王萌宋岳礼
北方文学·中旬 2015年6期
关键词:难度区分度效度

王萌 宋岳礼

摘 要:英语教学和英语测试密不可分。本研究基于教育测量和统计分析理论,结合2011级农学专业《大学英语4》期末考试情况,用SPSS软件对试卷的难度、区分度、信度和效度进行定量分析。统计分析表明:本次测试较好地达到了测试的目的,基本反映了学生的实际水平,但信度有待进一步提高。从而为改进教学方法和完善大学英语试题库提供科学依据。

关键词:语言测试;信度;效度;难度;区分度

大学英语教学是高等教育的一个有机组成部分,大学英语是为非英语专业本科生开设的一门公共基础课。而考试是考查和评价学生对所学知识掌握程度的一种有效手段,对教与学都有较大的影响。本文以我校2011级农学专业本科生在2012—2013年度第二学期大学英语期末考试为例,用定量化的方法从试卷的难度、区分度、信度和效度四个方面对试卷进行分析评价。

一、研究设计

(一)研究对象

本文的研究对象为西北农林科技大学农学院2011级农学专业1班和2班大学英语第四册期末考试试卷,共50份。本次试卷总题目为86道,全卷满分为100分。其中客观题(快速阅读、阅读理解、词汇语法、完型填空)为80道,分值为75分;主观题(翻译、写作)为6道,分值为25分。

(二)研究方法

试卷的评判根据提前制定的评卷标准和标准答案,按照流水方式进行阅卷。数据处理:将50名学生每个人的总成绩和每小题的答题情况输入计算机,用SPSS18.0统计软件包进行数据处理和统计分析。

三、研究结果与讨论

(一)试卷的描述性统计分析

试卷满分为100分,平均成绩为73.5分,标准差为8.5分,最高分为92.0分,最低分为43.5分,全距为48.5分,不及格率为4.0%。学生成绩分布的直方图显示学生在各分数段的人数分布呈现中间多、两头小的趋势,基本上符合正态分布。

(二)试卷质量检验指标分析

衡量试卷质量的主要检验指有难度、区分度、信度和效度。

1.难度

试题的难度是指题目的难易程度,指答对题目人数所占的比例,也叫“容易度”。难度一般用字母P表示,P越大表示题目越简单,P越小表示题目越难。本次试卷难题和较难题所占的比例(40.5%)与容易题与较容易题所占的比例(42%)基本相当。

2.区分度

区分度是区分应试者能力水平高低的指标,用字母D表示。区分度高的试题能将不同水平的考生区分开来,即学业水平高的考生得分高,学业水平低的考生得分低。其中区分度很好和良好的题目共13道,分值占32%;区分度尚可的题目有17道,分值占20%;区分度较差和差的题目共56道,分值占48%。又对每大题的难度和区分度综合分析,此次测试区分度D值为0.20,区分度尚可。区分度偏低,要作为竞赛的试题应作适当的修改,但作为期末考试,是对学生基础知识的考察,能兼顾不同程度的学生,可以考虑采用。其中完型填空难度是0.67,区分度是0.03,属于较难题,区分度差,此题出的不好。

3.信度

信度是测试结果的稳定性和可靠性。在语言测试学中对试卷信度的检验一般采用内在信度检验中的Cronbach Alpha系数检验。Cronbach Alpha系数介于0和1之间,系数越高,表明内在一致性越强,测试的结果就越可靠。运用SPSS软件对测试结果进行内在信度检验,可知整个试卷的信度系数为0.512。根据测试学有关理论,Alpha达到0.80以上,则表明试卷的信度是理想的。此次考试整个试卷的信度系数为0.512,远低于0.80的标准,说明本试卷的信度系数有待提高。

4.效度

测试的效度指测试是否考查了原定需要考查的内容,考试的结果能不能用来评判预定要测试的语言能力。本次测试,测试的内容与教学大纲、教学内容基本保持一致。纵观全卷,可发现本试卷对读、写、译的能力有充分的反映,而未涉及到听和说的能力测试,故在这两方面无有效性。试卷构成共六大题,满分100分,其中客观题四道,占总分75%,主观题两道,占总分25%。从题型来看,主客观相结合且比例恰当,既全面考查了学生各方面的能力,又保证了评分的客观性。

四、研究结论

通过从各个角度对试卷分类分项分析,评析了试题质量,分析结果表明:

(一)从整个试卷看,本次测试总体是可信的、有效的,基本反映了学生的实际水平。

(二)从试题的难度和区分度看,整套试卷难度居中,区分度尚可,能在一定程度上鉴别学生的学习能力;快速阅读、词汇语法、翻译是比较简单的题目,影响了试题的区分度。

(三)从试卷的信度和效度看,试题符合大纲要求,考点覆盖教学内容,主客观题比例恰当,但试卷的信度不高。命题时应该注意避免太简单的题目,完型填空命题要加强。

五、结语

总之,英语教学和测试密不可分,要充分发挥测试对英语教与学的正面反拨效应(positive washback)。教师要在提高教学效果和教学质量上狠下工夫,不断完善科學、规范的试题库,使考试能真正反映学生对英语的全面掌握和实际运用情况。

参考文献:

[1]魏红梅.SPSS对语言测试题信度和效度的检测分析[J].四川教育学院学报,2007(11).

[2]武尊民.英语测试的理论与实践[M].北京:外语教学与研究出版社,2008.

作者简介:王萌(1990–),女,河南焦作人,硕士研究生,研究方向:二语习得;宋岳礼(1965–),女,陕西户县人,副教授、硕士生导师,研究方向:二语习得。

猜你喜欢
难度区分度效度
慈善募捐规制中的国家与社会:兼论《慈善法》的效度和限度
浅谈试卷分析常用的几个参数及其应用
浅观一道题的“区分度”
基于SPSS软件的高校学生课程考试成绩定量分析
财务会计下的难点及对会计工作的影响
单维参数型与非参数型项目反应理论项目参数的比较研究*
被看重感指数在中国大学生中的构念效度
外语形成性评估的效度验证框架
复杂图形测验对区分阿尔茨海默病与非痴呆的诊断效度