浅析一份听力课程网考试卷题型及其测试效度

2010-08-31 09:15易璐露
太原城市职业技术学院学报 2010年8期
关键词:内容效度通过率效度

易璐露

(湖北省三峡大学外国语学院,湖北 宜昌 443002)

浅析一份听力课程网考试卷题型及其测试效度

易璐露

(湖北省三峡大学外国语学院,湖北 宜昌 443002)

听力作为一项语言技能,其重要性已越来越受人们的重视。听力考试是大学英语考试中的重中之重。因此,论文从语言测试学的角度评析了三峡大学英语专业2009年秋季学期听力课程考试试卷的四种题型的特点及其对听力教学的启示。

大学英语;听力考试;题型;特点

我们都知道,语言测试是为语言教学服务的,语言教学的任务是培养实际运用语言的能力,语言测试的任务则是正确评价运用语言的能力。听力是一项重要的语言技能,是衡量个体综合语言能力的重要指标。因此听力教学是语言教学的重要组成部分,听力测试是语言测试中一个非常重要的环节。听力测试是对学生听的水平的一种检验和评估,旨在通过测试来反映出学生的听力水平如何。所以说,听力课程一直是英语学习的重中之重。三峡大学从2008年开始试点使用网络听力测试,因为网考相对于传统听力测试,有很多便捷之处,具有更及时发挥诊断性的作用,可以快速、准确地反馈考试信息,教师能依据反馈信息及时调整教学而提高教学质量。首先,它能在学生提交试卷之后就可以迅速得出相应数据,给授课老师带来方便,同时也可以让授课老师根据相应的数据在今后的听力教学中做到有的放矢。选择符合我们目的与要求的具体考试种类后,并不意味着我们就能确保考试真实、有效地获取我们所需要的有关学生语言能力或具体技能的信息。Baehman进一步提出了在以测量学习者交际性语言能力为目的的考试中所必须包含的几大要素:信度、结构效度、真实性、相互性和可行性。语言测试的目的在于通过测试获得学生对所学知识的掌握程度的反馈。在测试中,效度的高低是衡量语言测试最重要的参考标准,也是考试研究的核心问题。本论文合听力理解和听力测试的特点,对网络考试听力部分的题型和选材等方面进行了效度分析和研究。在整个研究过程中使用到的研究方法包括:考试试卷文本分析、问卷调查,以及对受试者进行多套试题的测试以收集相应的数据。下面,我们就根据三峡大学英语专业学生在2009年秋季学期的听力网考得出的数据进行试卷评析。

一、题型与效度

题型不仅是表面形式,而且与测试的效度和信度有着紧密的联系。所谓效度,就是考试达到其预期测试意图的程度。效度又可分为内容效度、效标关联效度和构想效度等几个层面,其中与题型有密切关系的是构想效度。构想效度指考试实际测得的东西与理论所假设的能力要素或心理特征相吻合的程度。题型是引出考生语言能力的中介,“通过限制所测试的内容和过程而影响测试结果的意义”,有时能混淆欲测试的构想,如混淆答题技巧与掌握的知识、辨认与回想、事实知识与更高层次的思辨力等。李筱菊指出:“语言测试的效度,亦称有效性,指测试所考的,是否就是所要考的,或者说,在多大程度上,是考了目的所要考的”。效度分为内在效度、外在效度、使用效度和超考试效度。其中,内在效度是指测试本身的效度,包括内容效度和结构效度。这里主要分析内在效度中间的内容效度。

二、试卷内容效度分析

内容效度是指测试是否考了考试大纲规定要考的。我们来看看这次考试的试卷内容:

项目 题量 分值 比例WordParaphrase 10 1 10%Sentence Paraphrase 10 2 20%Shortconversations 10 2 20%LongConversations 10 2 20%Passages 10 2 20%TRUEorFALSEQuestions 10 1 10%

三、项目分析

1.听力测试分数分析

分数段分析

分数段 90以上 80-90 70-80 60-70 50-60 40-50人数 1 10 9 9 1 2

从上表可以看到,两头小,中间大,不高不低的大多数,体现了分数的正态分布。李筱菊指出:“分布正态,说明它反映了人的能力分布实况,说明考试有信度”。

2.听力过关试题通过率和区分度分析

我们以整套题目中的第二大题来进行分析,首先我们来看通过率:

题号 11 12 13 14 15 16 17 18 19 20正确率 42%54%52%20%48%62%56%48%52%54%

从通过率来看,这套题目难度分布不是很好,十道题目只有一道题通过。第16题的通过率及格,为62%,其他的题目都没有很好的通过率,最低的是第14题,通过率仅为20%。还有18个同学没有提交任何答案,可见第二大题的难度偏高,超过了学生本身的能力范围,没有很好地检测出学生的真实水平。

12.A)He doesn’t listen to such horrible music usually.

B)It is horrible for teenagers to listen to such kind of music.

17.A)He disagreedwithmyidea.

a)He thoughtmyideawas important.

20.A)The president’s speechwas longerthanbefore.

a)The president’s speechwas shorterthanbefore.

从以上给出的几个例子题目可以看出,题目题材多偏向于社会人文生活,而实时性的新闻、评论等内容较少,体裁稍显单一。

四、结论和建议

由于该次分析的题目数量较少而且无音频资料,所以分析具有很大的局限。但是该次分析所反映出来的问题是值得试题命题者思考的。在做完这套听力过关测试的项目分析之后,笔者发现了一些问题,并得出以下结论:

(1)听力测试内容效度较高,但是题材过多地以文化历史社会人文为主;文体属于口语体,内容比较贴近现实生活。需要补充新闻等实时性较强的内容。

(2)从测试分数上看,分数呈正态分布,测试还是有一定信度。

(3)测试实施的条件为网络测试,有的同学的耳机可能会出现问题,效果不好甚至收不到音的情况严重影响测试的信度,所以监考教师考前必须提醒考生检查好考试设备,避免考试过程中设备出现问题的情况。

选择听力材料的时候,比较理想的是人际间的真实交流片段,比如谈话、访谈、新闻报道等等。当然,我们还要根据学生的实际听力水平来确定听力材料在长度和内容深度上的难度,因此,材料要口语化,使原文更符合实际的语用环境,保证听力试卷的效度。

[1]李筱菊.语言测试科学与艺术[M].长沙:湖南教育出版社,2001.

[2]舒运祥.外语测试的理论与方法[M].上海:世界图书出版公司上海分公司,1999.

[3]邹昆,杨任明.简明英语测试教程[M].北京:高等教育出版社,2005.

G642

A

1673-0046(2010)8-0137-02

猜你喜欢
内容效度通过率效度
瓦里安VitalBeam直线加速器Portal Dosimetry验证通过率低故障维修
COSMIN方法介绍:评价患者报告结局测量工具内容效度的评分系统
慈善募捐规制中的国家与社会:兼论《慈善法》的效度和限度
基于高职英语教育效果市场化探索研究——以英语AB通过率为例
英语专八阅读理解部分内容效度的历时对比研究(2009—2017年)
被看重感指数在中国大学生中的构念效度
大学英语新四级阅读理解内容效度研究
外语形成性评估的效度验证框架
提高CLEN通过率的策略与成效
淮北卫校2014年护生执业资格考试通过率创新高