海上专业英语平时成绩信度与效度实证研究

顾玉莲,陈 莹

(青岛远洋船员学院,山东青岛 266071)

海上专业英语平时成绩信度与效度实证研究

顾玉莲*,陈 莹

(青岛远洋船员学院,山东青岛 266071)

通过实证方法,借助SPSS统计软件,对青岛远洋船员学院海上专业学生英语平时成绩的信度和效度进行分析,进而探讨保证学生平时成绩信度和效度的方法。

青岛远洋船员学院;海上专业;英语;平时成绩;信度;效度

平时成绩是对学生学习的阶段性和过程性评估,侧重考查学生的学习态度、学习能力和学习策略。平时成绩考核的目的是为了加强对学生学习过程的督促、指导和管理,促进学生自主学习,也为了更加全面地反映学生的学习情况,对学生学习作出更加合理的评价。

不少教师在教学实践中都有这样的发现:部分学生平时学习认真,按要求完成学习任务,期末测试成绩却不理想;部分教师在取分依据、给分标准和操作程序等方面存在随意性、偶然性和非规范性。本文通过数据分析研究以下问题:不同教师对平时成绩的评定是否存在差别?如有差别,在统计学意义上是否显著?学生平时成绩与期末测试成绩之间的相关性如何?平时成绩的高低对学生学习是否有影响?如何保证平时成绩的信度和效度?

一、研究设计

本文采用实证研究的方法,借助SPSS13.0统计软件对样本数据进行分析。抽取青岛远洋船员学院2009级船舶驾驶和船舶机电专业共计12个合班,即24个自然班,涉及学生937人、任课教师12人。各班人数及各班入学第一学期平时成绩均数与第一学期期末测试成绩均数如表1所示。

表1 研究样本及相关数据

青岛远洋船员学院英语课的成绩构成及各部 分比例如表2所示。

表2 青岛远洋船员学院英语课的成绩构成

二、分析与讨论

1.数据分析

(1)对不同教师量分的方差分析。由表1可见,学生平时成绩普遍高于期末测试成绩,最大差值17,最小差值2,差值均数也达到7.9。这首先说明教师在量分方面标准比较宽松,大都采取鼓励为主的原则;其次说明不同教师在评定平时成绩上存在一定的差别。为调查这种差别是否显著,借助SPSS13.0统计软件对各班平时成绩进行方差分析。结果表明,不同教师对于平时成绩的评定存在显著差别(见表3),也就是说,不同教师评价学生的标准存在显著差别。从这个层面上讲,教师所评平时成绩不具有很好的信度[1]。

表3 各班平时成绩方差分析(ANOVA)

对比学生平时成绩与学生评教分数(见表4)发现,学生平时成绩均值明显高于其他班级的教师3所得,学生评分也高于大多数教师。平时成绩与学生评教之间的关系如何?师生之间在打分方面是否存在相互“取悦”的现象?取班级平时成绩均数与学生给教师打分的值,做Spearman相关性分析。结果显示相关系数 r为0.021,显著值p为0.948,p值远远大于0.05,故推翻原假设,即证明教师给学生的平时成绩与学生评教打分之间没有显著的联系。

表4 教师任课班级平时成绩均值与学生评教分值

(2)平时成绩与期末测试成绩的相关性。平时成绩主要考核学生学习态度与学习任务的完成情况,而期末测试主要考核学生知识水平的提高,两者各有侧重,所以本研究中不期望平时成绩与期末测试成绩呈现完全正相关,但不相关甚至负相关的情况同样是不能接受的。取各班学生的平时成绩与期末测试成绩做两个变量Pearson相关分析,得Pearson相关系数和相关显著性如表5所示。

表5 各班平时成绩与期末成绩的相关性

结果显示,所有班级学生的平时成绩与期末测试成绩均呈现出正相关,其中1个班为一般正相关,2个班为显著正相关,9个班为非常显著正相关。这首先说明学生学习过程中的表现是决定测试成绩的重要因素,通过前者能在一定程度上对后者进行预测。其次,则说明教师所计平时成绩具有较好的效度,具有一定的区分度。再次,也证明提高平时成绩比例具有一定的可行性和有效性,对于考查学生的学习态度和评估学生的学习过程具有实用的意义。

(3)平时成绩与进步成绩的相关性。取各班入学英语摸底成绩平均值与各班第一学期英语期末考试成绩均数,得各班平均成绩的进步分数值,将其与各班平时成绩的均数作Spearman相关性分析,试求平时成绩对学生学习能力和学习效果的影响(见表6)。

表6 平时成绩与进步分数的相关性

表6显示,学生平时成绩与进步分数之间的正相关程度相当高。形成此结果可能有两点原因:其一,相对高的平时成绩是学生学习态度端正、班级学风良好的结果,这样的学生和班级进步幅度相对较大也在意料之中;其二,教师平时成绩给分标准相对宽松,经常鼓励学生、肯定学生的学业表现对学生的学习会产生激励和促进作用,带来学生知识水平的较大提高。

2.如何保证平时成绩的信度与效度

(1)合理安排总评成绩的组成及权重。近年来,高校呈现加大公共课程平时成绩权重的趋势,甚至有学者建议平时成绩应当占到总评成绩的60%。[2]笔者通过访谈了解到多数教师及学生认为平时成绩的比例应不低于30%,在30%～50%为宜。这也顺应了2007年教育部颁布的《大学英语课程教学要求》中所倡导的以形成性评估与终结性评估相结合的模式评价学习。以加大平时成绩比例为基本特征的形成性评估模式,有利于降低传统考试的偶然性和单一性等不足,培养学生良好的学习习惯,使其重视学习过程,把学习能力的提高放到首位。

(2)制定平时成绩记录单和打分标准,并要求教师严格执行。制订平时成绩记录单,作为学生学习档案的一部分。记录单上分列课堂表现、作业、自主学习和平时测验等部分,要求每一部分记录至少两次成绩,取其均值作为该部分得分,最终按照比例算得平时成绩。同时,基于教学目标选择合适的依据,对平时成绩各构成项目的考核尽可能量化。对于不易量化的依据,比如笔记,也设定一个参考的标准,可按照框架的完整性和内容的充实性评分。[3]明晰的取分依据是保证平时成绩信度与效度的前提。

制定统一的评分标准只是第一步,还必须要求教师严格执行标准,尽量缩小打分差距。表1中所显示的轮管3班和驾驶3班的平时成绩均值比期末测试均值分别高出了17分和16.1分。诚然,如前所述平时成绩考核当中对学生的平时表现多加肯定能有效促进学习,但是过高的平时成绩很难保证评价的效度,也势必会影响区分度,所以要求教师评分时拉开档次。

要降低不同教师平时成绩量分差别对学生成绩的影响,还需采取其他一些做法。比如,在评定奖学金的时候,应以班级为单位配以一定比例,而不采取各专业年级统排的方法。这样,只要班级内部的平时成绩有信度、效度和区分度,奖学金的分配就会相对合理。

(3)对学生自主学习情况的考查需要网络平台的支持。平时成绩的设计要以“学”为中心,即以学生的自主学习为中心。这就要求平时成绩要对学生的学习具有激励和督查的双重作用。[4]评价学生的自主学习活动除检查学生的学习笔记、读书笔记之外,更需要有网络平台的支撑。当前,一些院校开设了师生交流的网站或者引进了多媒体自主学习系统,无论是网站还是自主学习系统中,都需要有能够记录学生学习行为的功能或软件,以方便教师掌握学生的自主学习开展情况,也为平时成绩量分提供有效依据。

(4)确保平时成绩公开、公正,重视平时成绩的反馈作用。要做到公开、公正,有三点要求:其一,教师在首次上课时就公布取分依据,让学生清楚平时成绩的构成和考核标准;其二,将学生每次的得分及时、明晰地录入平时成绩记录单,允许学生查看,并认真对待学生对自己的成绩提出的异议,如有偏误及时纠正;其三,学校可要求任课教师在考试之前将平时成绩录入并提交教务系统,以防止任课教师参照卷面成绩对平时成绩作出随意的调整。此外,还可以通过其他途径确保平时成绩的公开、公正,比如引入学生自评和同学互评的评价方式作为师评的有力补充。

三、结 语

本研究以实证的方法,对平时成绩的信度与效度进行初步的研究和探讨。结果表明,青岛远洋船员学院英语教师所评平时成绩有较好的效度和区分度,但不同教师评定平时成绩的标准存在显著差别。进而从学校制度、硬件支持和课堂实施等层面探讨了保证平时成绩信度与效度的方法。

目前平时成绩考核面临着巨大的难题:多数院校的英语课程是按照大班制开设的,课堂人数多达七、八十甚至上百人,准确评价如此众多学生的课堂表现、作业完成情况、自主学习开展情况和平时测验无论在时间上还是精力上对任课教师都是极大的挑战。如何能高效地考核学生平时学业表现值得进一步探究。

[1]HEATON J B.Writing English language tests[M].北京:外语教学与研究出版社,2000:159-168.

[2]刘寿堂.大学公共课程平时成绩考评手段质疑及商榷[J].黑龙江高教研究,2009(2):174-176.

[3]陈冰杰,邵青山,范文芹.大学生平时成绩与期末考试关系研究[J].运城学院学报,2006(6):69-71.

[4]张 卓.模糊综合评判法在学生平时成绩考核中的应用[J].广州大学学报:社会科学版,2009(5):62-64.

U676.2

A

1006-8724(2010)03-0088-03

2010-05-23

青岛远洋船员学院教改课题“大学英语基础课程形成性评估实践与研究”

顾玉莲(1979-),女,讲师,主要从事应用语言学与英语教学研究。