多模态环境下大学生英语语言技能评价方法研究

陈 俊，裘莹莹

(淮阴工学院外国语学院，江苏 淮安 223003)

一 多模态概念及相关理论

模态指人类通过感官(如视觉、听觉等)跟外部环境(如人、机器、物件、动物等)之间的互动方式。用单个感官进行互动的叫单模态，用两个的叫双模态，三个或以上的叫多模态(顾曰国2007)。张德禄等(2010)认为，在话语分析研究中，人们发现单纯研究语言话语已经不能对话语进行深入全面的分析和研究，特别是随着现代科学技术的发展，很大部分话语意义是由非语言因素体现的，如伴语言特征、身体特征、教学设备、实验室、计算机、网络、周围的环境因素等。在这种情况下，交际不是利用一种模式进行，如说话是口头，书写是文字等，而是用两种或者多种模式同时进行，如用PPT上课则是图像、文字、口语同时进行的。这种以多种交际方式产生的话语就是多模态话语。模态话语指运用听觉、视觉、触觉等多种感觉，通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象(张德禄等2010)。随着多媒体网络技术的发展，在外语教学中，无论是教师的教学，还是学生的英语学习，仅靠某一种单模态已无法满足对学生各个感官综合能力训练的目的，所以在英语教学中，教师应该正确运用多模态的教学模式，即在教学过程中不仅运用视觉模态，听觉模态，触觉模态等感官模态的结合，也指教学过程中文本语言模态，图像模态，声音模态等的多模态的运用(黄雪飞2010)，以调动学生的感官能动性，培养学生的英语语言技能，达到英语教与学的目的。

二 多模态环境下对学生英语语言技能评价的理论依据

1.多元智能理论。

随着人们对自身智力认识的不断深入和发展，新的关于人类自身的智力(智能)理论也相应的产生出来，其中以被誉为“多元智能理论”之父的——美国哈佛大学的心理学家和教育学家霍华德·加德纳教授最具代表性，他提出了“多元智力理论”，该理论介绍人类的智能是多元化而非单一的。主要是由语言智能、视觉空间智能、音乐智能、身体运动智能、数学逻辑智能、人际交往智能、自我认识智能、自然观察智能八项组成。在多模态环境下，学生在学习英语的过程中，必然会想方设法的调动身体的器官，即调用自身的多元智能以便在建构语言知识同时提高自身语言综合能力。如在多模态环境下，学生可以运用其语言智能进行文字编辑(如教师让学生写作等)、英文电子邮件收发、PPT制作;运用其视觉空间智能可以对视频、计算机辅助图像、图形、空间想像等进行加工、编辑;身体运动智能可以帮助学生在任务型学习过程中，能够做到既动脑又动手，如PPT制作、演示真正地实现“做中学”(learning by doing);学生自身所具有的人际交往智能，主动地参与到在学习过程中，与老师沟通、与同伴沟通、用目标语与课堂之外的其他人进行交流;通过自我认识智能，学生对自己进行评价，这样学生可以认识到自身存在的不足，哪些地方需要提高，并为自己设定以后的学习目标，并努力为之奋斗;自然观察智能可以帮助学习者对周围所处学习环境如上课的教室、教师和学生所使用的动脑、投影机、音箱、屏幕等进行观察，并且适时地做出调整以适应这样教学环境。

2.多模态话语分析理论。

在多模态环境下进行语言的教与学，必然涉及到多模态话语分析(Multimodal Discourse Analysis)，它是20世纪90年代在西方发展起来的，其意义在于它可以将语言和其他相关的意义资源整合起来(Gibbon 2000)。朱永生(2007)认为多模态话语分析是在生命科学研究成果的基础上发展起来的。生命科学的研究成果认为生命体通过听觉、视觉、触觉、嗅觉、味觉等感知通道来获取外部环境信息，并对周围环境做出及时、有效的反应。换言之，学生(生命体)在学习语言的过程中，也会通过多种渠道和借助多模态如听觉、视觉、触觉、嗅觉和味觉等多种感官形式，来努力提高自己的英语听、说、读、写技能。英语教学的特点之一是使学生尽可能从不同渠道、以不同形式接触和学习英语，这也正是多模态所提倡的(杨家勤等2009)。在条件许可的情况下，充分利用各种听觉和视觉手段，英语教师在学校教学设备许可的情况下，也应充分利用各种听觉、视觉手段，比如在课堂英语教学中利用图片、音频、视频等，使课堂教学内容和形式更加丰富，让学生在多种模态环境下接触语言，进行语言的输入;还可以利用校园广播播放英语新闻、学生所学课本的音频文件、英文歌曲等，为学生在多种模态交互环境下提高其语言技能创造有利条件。

三 多模态环境下学生英语语言技能的评价方法

1.多媒态环境下对学生英语听、说能力的评价。

对学生的英语语言技能的评价应注重其过程性，即注重对“学生日常学习过程中的表现、所取得的成绩以及所反映出的情感、态度、策略等方面的发展”做出的评价，是基于对学生学习全过程的持续观察、记录、反思而做出的发展性评价。这种评价形对学生的自主学习产生了有效的推动作用，学生在新的评价方式督促下渐渐养成了自主学习的习惯，增强了学习自信心(蒋宇红，周红2010)。多模态环境下教学可理解成教师(或学生)在多媒体环境下充分调用多模态，如视频、电影剪辑、录音、图画、图表、实物、道具等，获取、传递和接收信息(应建芬2011)。在多模态环境下，学生可以在教师的指导下，合理有效地利用丰富网络资源:如因特网、学校自己建设可供学生使用的局域网资源(如如学校引进或自己开发的英语在线学习、反馈以及评价系统);或把文本、声音、图像、动作、教学设备、计算机等结合起来进行听说能力的培养和提高。进行多媒体语料库的开发和建设，即整合多媒体技术，把语料检索与音频、视频有机地结合起来。多媒体语料库开发人员在建库的时候，把英语国家标准、地道的与英语教学相关的音频、视频文件、音频或视频所附带的字幕以及与多媒体文件的相关资料和信息放入多媒体语料库。学生在教师的指导下逐渐学会自主学习使用该软件系统，利用该多媒体语料库练习听力、模仿口语，以提高自己的听力和口语能力。同时学生还可以在教师的指导下学习音频软件Praat，学生用音频编辑软件Praat定期将自己的口语录入进去，教师定期地把学生音频录制素材收集起来，并用音频编辑软件Praat进行分析，并结合上文提到的多媒体语料库对学生自己录制音频材料进行对比、分析，以便检查学生在一段时间内听力和口语能力也没有提高或提高了多少，进而达到了比较科学地评价学生的听力和口语能力的目的。

同时，为了比较全面地了解、分析和评价学生在目标语英语进行交际的语言特征以及伴随的手势、说话者面部表情、身体的姿态，身体的移动，以及说话者的周围环境，还可以使用多模态环境下学生的话语分析软件。王立非等(2008)介绍了有一种比较实用的多模态分析软件ELAN(见图 1)，ELAN(EUDICO Linguistic Annotator)是由马普心理语言学研究所(荷兰奈梅亨市)的Brigit Hellwig设计开发的一个多模态话语分析软件。如果想获得该软件最新版本3.9.0，用户可以到 http://www.latmpi.eu/tools/Elan网站免费下载。这个软件可以分析说话人(学生)的话语内容、语音语调、面部表情、唇形、肩部和手的动作等，并将学生的这些音频、视频文件保存起来，以便逐步了解和评价学生在用英语进行交际过程中的非言语交际能力。

图1 多模态话语分析软件ELAN［4］

2.多媒态环境下对学生英语读、写能力的评价。

评价要有利于学生的发展，对学生的学习起到促进作用。《大学英语课程教学要求》(2007)提到对学生的学习评估要采用形成性评价和终结性评价相结合的方式，着重评价学生的综合语言运用能力以及在学习过程中表现出的情感、态度和价值观。马光仲等(2010)认为对学生学习过程的评价，需要一定的过程信息。传统的基于纸张的文件夹在存储、维护、检索等方面存在很多问题和困难，信息技术的应用为上述问题提供了技术解决方案，其中电子作品(e－Works)和电子档案(e－Portfolio)是影响最大、研究也最为广泛的一种计算机辅助评价策略。在这种情况下，学生在教师的指导下自己单独或以小组为单位完成老师在英语教学所设计任务，学生们除了以传统的纸质的文本形式完成老师布置的任务，更重要的还可以借助多媒体、网络技术，如教师让学生在课后根据所学习的课文内容独自地或以小组的形式，在图书馆里、在网络上收集与所学课文相关的信息和资料，然后再让学生单独地或以每个小组派代表的方式用PPT或其他形式，在教室里向老师和同学展示并讲解;再如借助超文本系统Wiki，学生可以在该系统里进行“作品”(上述提到的老师所布置的任务)即文本的创作，亦可以对老师所布置的阅读任务进行阅读、思考以及就阅读材料评论并发表个人的观点，其他学生可以通过该网页浏览学生的“作品”，然后同学之间进行相互交流、讨论，学生之间进行相互评价并提出修改意见，老师也可以根据学生之间相互评价，对学生的“作品”提出比较客观全面的评价，这样有利于学生学习水平的提高和教师的教学效果改进。这样就逐渐形成多媒态环境下对学生的阅读、写作的形成性评价。

四 结语

由于关于多模态环境下的语言学习研究国内近年来才兴起，而有关在多模态环境下如何对学生的英语听、说、读、写四种语言技能的评价，还比较少。本文就多模态环境下如何对学生的英语四种语言技能进行形成性评价做了探讨，并提出一些评价方式，以便逐步构建起多模态环境下学生英语语言技能的评价体系，以便更好地促进学生的学习和教师的教学。

［1］顾曰国.多媒体、多模态学习剖析［J］.外语电化教学，2007(2):3－12.

［2］张德禄，王璐.多模态话语模态的协同及在外语教学中的体现［J］.外语学刊，2010(2):97－102.

［3］黄雪飞.多模态教学模式下新生多元识读能力的培养研究——以大学英语教学为例［J］.西南科技大学学报，2010(4):60－62.

［4］霍华德·加德纳.多元智能(修订版)［M］.北京:新华出版社，2004.

［5］Gibbon，Dafydd，IngeMertins＆RogerK. Moore.Handbook of Multimodal and Spoken Dialogue Systems［M］.Boston:Kluwer Academic Publishers，2000.

［6］朱永生.多模态话语分析的理论基础与研究方法［J］.外语学刊，2007(5):82 －86.

［7］杨家勤，刘金菊，金仁慧.浅议普通高中英语课程标准与多模态教学［J］.贵州教育学院学报，2009(4):78－81.

［8］蒋宇红，周红.大学英语采用形成性评价促进学生自主学习的实证研究［J］.北京第二外国语学院学报，2010(2):69－74.

［9］应建芬.多模态话语分析与大学英语词汇教学［J］.牡丹江大学学报，2011(6):136 －138.

［10］王立非，文艳.应用语言学研究的多模态分析方法［J］.外语电化教学，2008(5):8－12.

［11］教育部高等教育司.大学英语课程教学要求［Z］.上海:上海外语教育出版社，2007.

［12］马光仲，蔡旻君.计算机辅助评价发展的回顾与思考［J］.电化教育研究，2010(4):49－53.