钟 歆
基于作文自动评分系统的高职学生英语写作自我效能感研究
钟 歆
(扬州市职业大学,江苏扬州 225000)
大数据时代,学生的英语写作可以在线完成,通过语料库和云计算技术提供自动在线批改。这种写作模式对传统英语写作教学产生一定影响。文章对作文自动评分系统使用下的高职学生写作自我效能感进行了实验和调查,发现:部分高职学生的英语写作自我效能感偏低,通过使用作文自动评分系统,英语写作自我效能感有一定提高;写作难度和写作经验这两方面对英语自我效能感的影响较大,而写作评价和写作归因影响较小;高职学生的写作自我效能感与写作成绩有很强的相关性。
作文自动评分;英语写作;自我效能感
写作是一项复杂的认知活动和情感活动,而传统的写作教学往往关注学生语言学习结果(如:写作能力的提高),对于非语言学习结果(如:学习者自身的一些变化)关注不够。其中,自我效能感就是一种非语言结果,这在学习中是一个重要的动机变量,可以促进良性的语言学习行为[1]。写作自我效能感是自我效能感的一种派生,指个体对完成特定写作任务所具有的行为能力的自信程度[2]。实证研究发现,写作任务的复杂度和难度、写作的成绩、教师书面纠错反馈以及元认知策略等对英语写作的自我效能产生一定的影响[3-5]。同时,自我效能感是英语写作成绩的有效预测指标[6]。然而,目前对于英语写作自我效能的研究主要是基于传统纸质写作方式。随着“互联网+”时代的到来,另一种写作模式——在线写作日渐流行,传统纸质写作方式受到较大冲击,这对英语写作教学产生一定影响。学生可以在线提交作文,网站根据语料库和云计算技术进行及时评分并做诊断性反馈,这就是作文自动评分系统(Automated Essay Scoring,简称AES)。国内外学者对于这种作文自动评分系统已有一些研究,但对于这种系统对英语写作自我效能的影响研究较少。因此,在前人研究基础上,笔者以部分高职学生为研究对象,采用问卷调查、访谈等方式,将定量和定性研究相结合,试图探究使用作文自动评分系统后高职学生的英语写作自我效能感的总体情况,比较学生使用作文自动评分系统前后英语写作自我效能感的异同,分析作文自动评分系统对高职学生的英语写作自我效能感的影响因素与英语写作成绩之间的相关性如何?
本研究拟回答以下三个问题:高职学生的英语写作自我效能感的总体情况如何?使用作文自动评分系统前后英语写作自我效能感有何异同?使用作文自动评分系统后,高职学生的英语写作自我效能感与英语写作成绩之间的相关性如何?
研究对象为Y市职业大学商务英语专业一年级学生,共两个自然班,58人,其中男生11人,女生47人,由笔者统一授课。
本研究使用的作文自动评分系统是JQ批改网,该系统通过计算学生作文和标准语料库之间的差距,对其提交的作文进行及时反馈,这是一种基于语料库和云计算技术提供的在线批改服务。“批改网”提供拼写错误、语法错误、搭配错误等反馈信息,学生根据反馈对作文进行修改,可多次提交。
本研究历时一年,研究数据来自三方面:调查问卷和访谈情况;学生作文数据;实验前后学生的写作成绩。
1.4.1 调查问卷与访谈
本研究中的调查问卷题目的来源有三个:一是写作自我效能感的相关文献,二是试验性实验中与个别学生的访谈,三是笔者的写作教学经验。问卷主要从写作归因、写作评价、写作经验和写作难度四个方面进行调查,由20个封闭性问题和2个开放性问题组成,封闭性问题均为单选题。问卷的选项编写依照Likert五级量表进行设计,五个选项分别为完全同意、同意、不确定、不同意、完全不同意,每个选项对应相应分值(完全同意=5、同意=4、不确定=3、不同意=2、完全不同意=1),根据学生所选之选项的分值计算问卷个体得分。发放问卷58份,回收58份,合格率为100%。
同时,为了进一步了解作文自动评分系统对学生英语写作自我效能感的影响情况,本研究对学生进行了半结构访谈,受访学生为6人。接受访谈的学生为批改网系统中记载的成绩好(80-90)、中(70-80)、差(60-70)各2名学生,其中男女生各1名。笔者对访谈内容录音并转写。
1.4.2 学生的作文数据
学生在批改网上注册一个账号,可以通过电脑或手机登录,完成每次教师布置在网上的作文,并根据批改网的批改提示进行修改。在为期一个学年的实验周期中,学生要完成10篇作文,每学期5篇。10篇作文均为一般性文体,无应用文写作,便于批改。
1.4.3 实验的前测与后测成绩
本研究是为了探讨作文自动评分系统对高职学生英语写作自我效能的影响,而英语写作自我效能对写作成绩具有预测作用。因此,研究的开始和结束时,笔者均要求学生在批改网上在线完成一篇作文,不得在线修改,写作时间为30分钟。结束后提交至批改网,获得本次作文的成绩以及各种数据,如拼写、语法情况、文章长度等。前后测的题目难度、写作时间、写作方式均一致,由批改网进行批阅后得出各种数据。题目为两次大学生英语写作大赛(高职组)的题目。测试结果见表1。
表1 实验前后英语写作成绩对比表
表 1 显示:实验前后,Sig值为.000<0.005,存在显著性差异,受试学生英语写作成绩均值有一定提高。
将问卷调查所采集的数据运用SPSS16.0软件进行统计分析。分析分三步进行:1)用描述性统计得出高职学生的英语写作自我效能感的总体情况的平均数、标准差;2)配对样本T检验分析,实验前后学生的写作自我效能感的差异;3)Pearson Correlation(皮尔逊相关系数)分析英语写作自我效能各影响因素和成绩之间的相关性。
由表2的数据可知高职学生英语写作自我效能的总体情况。
表2 英语写作自我效能感描述性统计表(学生数=58)
实验前笔者通过调查问卷对所有58名学生的英语写作自我效能感进行了调查,运用SPSS16.0进行描述性统计分析。从表2可以看出,影响学生的写作自我效能感的各因素得分在2.38和2.78之间,均值为2.54,刚刚超过2.5的零界点,属于中等偏下程度。
英语写作属于综合产出性技能,层次高、难度大、涉及面广[3]。在学生掌握大量英语词汇、语法知识的同时,还需要深厚的人文社科知识、分析能力、逻辑表达能力等。部分高职学生英语基础薄弱,其知识和技能一般比大学本科生弱,加上基础教育阶段的学习经历,他们的英语写作自我效能较低。
笔者就学生的英语写作自我效能感进行了实验前后两次问卷调查,将调查结果进行配对样本T检验,如表3所示,发现实验后的英语写作自我效能感有明显提升(M=3.14),介于2.5与3.4之间,从实验前的中等偏低程度(M=2.54)变成了中等偏高程度(M=3.14)。班杜拉认为影响英语写作自我效能感的因素主要是个人自身行为的成败经验、替代经验、言语劝说、情绪唤醒和情境条件[7]。本研究中的四个维度也是基于这五个因素基础上设立的。由表4可见,在使用作文自动评分系统后,学生的英语写作自我效能感的四个维度都有一定提升。这其中写作难度和写作经验对英语写作自我效能感的影响较大,写作归因和写作评价这两项实验前后无显著性差异,对英语写作自我效能感的影响较小(写作归因Sig.236>0.05,写作评价 Sig.132>0.05)。
表3 英语写作自我效能感的数据前后对比表
表4 英语写作自我效能感的数据前后对比表
在众多影响因素中,写作经验对自我效能感的影响最大。不断成功会使得学生建立稳定的自我效能感,而且不会因为一时失败而降低。创造成功写作的体会,使学生获得成功的经验是培养学生英语写作自我效能感的最主要途径之一。学生通过作文自动评分系统可以不断修改论文,提高成绩,不断获得成功体验。访谈中,一位同学提到:他喜欢批改网中的“推荐作文”这一项,将写作任务中的优秀作文供给同学参考学习。学生在英语写作过程中看到有与自己英语水平相当的同学获得成功,就会相信自己也能达到类似水平,形成一种激励与动力,类似替代经验。因而,跟传统写作方式相比,写作经验的变化最大。
同时,因为批改网的评论非常详细,如:词性警示、动词错误、代词错误、搭配错误等,对于一些单词或词组的表达方式,网站给予推荐表达,可以让学生在写作同时,拓宽词汇量。这在一定程度上降低了写作难度,写作难度的降低会带来写作焦虑感的降低,进而提高学生的写作兴趣,激发写作动机,使得英语写作自我效能感提升。
虽然,评价可以给予学生写作能力高低的信息,作文自动评分系统的评价没有忽视任何一个同学的写作闪光点,让学生产生一种归属感,对自我能力表示信任而非怀疑,比较容易产生效能感。但是,评语的信度和效度值得商榷,作文的批改不仅仅是字词句的正确使用,更有篇章结构和内容上的过渡,这是作文自动评分系统目前的短处,因此,在自我效能的对比中显著性不够大,对自我效能的促进作用不太明显。
正确的归因方式会提高学生的自我效能感。作文自动评分系统可以让学生无限次根据评语修改自己的作文,因而只要学生愿意去修改,作文很少出现低于70分的情况。但是,归因是复杂的,实验前后学生对于写作归因的看法变化不大,作为学生,学习不努力这个归因他们是有的,但是学习动机不足,所以较难从归因这个角度促进英语写作自我效能感的提高。
学生使用作文自动评分系统的主要原因是为了成绩的提高,那么英语写作自我效能感与英语写作成绩又有怎样的相关性呢?笔者根据使用作文自动评分系统后的学生成绩作为自变量,学生英语写作自我效能感作为因变量,采用Pearson相关系数来计算学生使用作文自动评分系统后的写作自我效能感与写作成绩之间的关系,如表5所示。
表5 英语写作自我效能感与英语写作成绩的相关性示意表
表5数据显示,写作归因、写作评价、写作经验和写作任务所影响的英语写作自我效能感与英语写作成绩均呈显著正相关(p=.000)。这进一步验证了相关学者的研究结果,即写作自我效能感与写作成绩具有相关性[3][5]。英语写作的自我效能感越强,学生的完成写作任务的欲望也越强,通过作文自动评分系统,高频次的修改作文,提高写作成绩的欲望也随之增强,积极的学习动机对学习行为产生积极的影响,那就是学生写作成绩的提高[8]。
通过本次调查,可以得出以下结论:1)部分高职学生的英语写作自我效能感偏低;2)采用作文自动评分系统后,高职学生的英语写作自我效能感有一定提高,写作难度和写作经验这两方面对英语自我效能感的影响较多,而写作评价和写作归因影响较小;3)高职学生使用作文自动评分系统后的写作自我效能感与写作成绩有很强的相关性。
以上研究对高职英语写作的教与学具有一定的指导意义。首先,教师应意识到写作自我效能的重要性。从研究中可知,部分高职学生的英语写作自我效能感偏低,教师可以将作文自动评分系统与教师评阅相结合,帮助学生克服写作的心理障碍,降低写作焦虑,从而提高英语写作的自我效能。[9-10]其次,教师应在写作的各个阶段促进学生英语写作自我效能感的提升,充分利用作文自动评分系统这一平台,降低学生写作的难度,增加学生写作成功的体验,完善作文评价内容,对学生作文给予及时而全面的反馈。最后,教师应重视写作中的替代经验,加大同伴互评的内容,让学生分析、比较同学的文章,在与同伴互动中,提高英语写作自我效能。
[1]Woodrow L.A Model of Adaptive Language Learning[J].Modern Language Journal,2006(3):297-319.
[2]Pajares F.Self-efficacy Beliefs,Motivation,and Achievement in Writing:A Reviewof the Literature[J].Reading&Writing Quarterly,2003(19):139-158.
[3]丰玉芳,陆文娟,吴逢源.英语专业高低年级学生写作自我效能感比较研究[J].天津外国语大学学报,2015(6):48-56.
[4]宋夏.教师书面纠错反馈对非英语专业大学生写作自我效能感的影响[D].沈阳:沈阳师范大学,2013.
[5]孙丽.写作元认知策略、写作自我效能感与写作成绩的关联性研究[J].黄山学院学报,2016(6):106-110.
[6]孟彦莉.基于网络和课堂的大学英语写作效能感及其提升[J].沈阳师范大学学报(社会科学版),2014(4):190-192.
[7]Bandura A.Self-efficacy:Toward a Unifying Theory ofBehavioral Change[J].Psychological Review,1977(33):209-238.
[8]刘艳.浅谈提高高职学生英语写作能力的有效方法[J].湖南邮电职业技术学院学报,2014(4):149-151.
[9]丁文.二语写作效能感、写作焦虑与写作成绩的关系研究进展[J].海外英语,2017(7):41-46.
[10]李航,刘儒德.大学生外语写作焦虑与写作自我效能感的关系及其对写作成绩的预测[J].外语研究,2013(2):48-54.
Study of English writing self-efficacy of vocational college students based on automated essay scoring
ZHONGXin
(Yangzhou Polytechnic College,Yangzhou,Jiangsu,China 225000)
In the era of big data,students write in English online and get the feedback online via corpus and cloud computing technology,which exerts great impact on the traditional English writing.The present study probes into the vocational college students'English writing self-efficacy based on automated essay scoring(AES).The results indicate that:some vocational college students have low English writing self-efficacy;English writing self-efficacy can be improved by using AES,especially writing difficulty and writing experience producing more impacts than writing comments and writing attribution;there exists great correlation between vocational college students'English writingself-efficacyand their performance.
automated essayscoring;English writing;self-efficacy
10.3969/j.issn.2095-7661.2017.04.020】
H319.3
A
2095-7661(2017)04-0064-04
2017-06-23
钟歆(1983-),女,江苏扬州人,扬州市职业大学讲师,研究方向:二语习得、英语教育。
2016年教育部职业教育外语教指委重点课题“基于大数据的高职英语写作教学评价有效性探究”(课题编号:GZGZ5414-16);2016年江苏省社科应用研究精品工程外语类课题“大数据时代背景下大学英语写作教学有效性探究”(课题编号:15jsyw-35)。