多模态语篇在大学英语教学课堂中的应用

金政红

(苏州科技学院外国语学院，江苏苏州 215009)

1.多模态语篇产生的社会文化背景及多元识读能力的提出

多模态话语是指运用听觉、视觉、触觉等多种感觉,通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象。多模态性(Multimodality)是现代社会各式各样语篇的一大特色,在数字化时代,这些不同的模态在意义再现层面上在起着同样的作用(Kress&Van Leeuwen 2006)。

多模态语篇分析方法兴起于20世纪90年代,以克瑞斯和凡利文(Kress&Van Leeuwen 2006)为代表。在全球化的过程中，一方面，新的交际形式出现，另一方面，新的价值被赋予一些旧符号形式。因此，符号资源，如布局，色彩和动人的视觉图像，声音，动作，甚至排版都具有着进行视觉交流的意义。因此，意义是通过不同的符号学模式的组合，从而促进了多模态的形成（韦琴红2009）。

与此同时，随着信息技术的发展，如：Word，PowerPoint，flash，HTML等电子软件和电子设备已经成为重要的且有影响深远的符号工具。以文字处理器和计算机为基础的文本为话语产生及交流带来很多新的可能性。在一定程度上使包括图片和图形的的语言交际更容易，不管是一个出版社还是一个人在家里工作。尽管如此，却很少有人注意这些非语言的资源，因此，多模态理论在这样的背景下为学者所注意并因此得以发展。

在多模态语篇产生的基础上，“新伦敦小组”提出的“多元识读”能力令学术界不可忽视，对于多模态语篇与语言教学产生深远影响。所谓“多元识读”(Multiliteracy)是指具有阅读所能接触到的各种媒体和模态的信息,并能循此产生相应的材料,如阅读互联网或互动的多媒体。传统的以读写为主的识读能力在多媒体时代已不够用，不足以应付时代需求。其次,教育中的多模态化来自于教室中不断增加使用的多种媒体,如图像操作软件、电子音乐、科学模拟、存在于计算机上的虚拟剧场等。多模态化和多元符号学试图给这些信递形式理论化,鉴别各种图像、词语和动作的模态如何互相倚赖,以产生整体意义(胡壮麟2007)。重要的是有时一种模态需要倚赖其他模态来完成信递行为,如没有口述的词语说明,图表会一无意义;没有模型课件,教师用手做的节奏性动作也就没有意义,因而每一种模态,作为符号资源,对所做的表达都有贡献。学生的任务是将教师的各模式和符号资源转变为理解（胡壮麟2007）。

2.多模态语篇的理论框架

多模态话语分析的理论基础是Halliday的系统功能语言学理论,根据Halliday(2000),语言系统中有三个用来表示功能意义的纯理功能,分别为概念功能,人际功能和语篇功能。而Halliday也曾指出,他建构功能语法的目的是为语篇分析提供一个理论框架,这个框架可以用来分析英语中任何口头的或书面的语篇。功能语法的主要出发点是把语法看成是制造意义的资源,语言为我们对社会行动的经验和形成阐释编码。因此语法不再是决定对错的一套形式上的规则,而是宽泛地指一种特定模式中元素间的关系的结构或模式之间的关系结构。张德禄也指出,系统功能语言学是最适合用于研究多模态话语的理论模式,其主要原因有以下三个方面:(1)系统功能语言学不仅关心语言内部的运作机制,同时还研究语言外的环境和动因;(2)系统功能语言学把话语的意义和功能放在首要位置上;(3)意义的实现是以多模态形式进行的,语言只是这些形式中最有效的一种（刘晓琳 2009）。

多模态语篇分析方法以系统功能语言学理论为基础,尝试把系统功能语言学对于语言研究的方法应用到其他的一些符号资源(如面部表情、手势、图像、音乐等)研究上。多模态语篇分析研究者认为,其他的一些符号资源同样具有语言的系统性和功能性,它们与语言一样同属于社会符号资源。语篇的多模态性对人们从新的视角更好地理解语言起着非常重要的作用(Kress&Van Leeuwen 2006)。

3.多模态语篇在大学英语课堂教学中的应用

如上所述，多模态识读能力强调多元形式的读写能力、信息交流和多媒体技术等因素的相关性，同时强调多元化社会中各种文化识别能力的多样化;黄创（2009）在《基于多模态教学的商务英语综合实训》中提到，培养跨文化交际能力是英语专业实训的首要目标，因为学生要了解外国人感知世界的方式，同时建立恰当的商业文化图式才能进行有效的国际交流。因此我们可以认为，在大学英语的课堂综合实训中，教师可利用多媒体工具外加多模态教学模式，创设校内虚拟交际场景，给予学生多种模态的认知刺激，从而大大提高语言教学的效率，从而弥补校外实训的缺憾。

“多模态教学”概念产生于现代信息技术高度发达的国际化背景。人类已从口述和读写时代进入到超文本时代，可以通过互联网进行广泛的信息互动活动，例如，电子邮件、MSN、BBS、QQ聊天、视频交流、角色扮演游戏等各种媒介，均产生了各具特色的意义建构的语域。近年来，校园网已基本覆盖我国高等院校，多媒体进入了实训室和大学英语教学课堂，多模态教材（或软件）的开发和使用开始普及。借助这些资源，语言教师可以选择有声有色的语篇材料，并进行编辑处理，以多模态的方式向学生呈现教师的教学意图。

此外，教室中的黑板、计算机、扩音器、录音机、电视机、录像机、投影仪都是媒体，而粉笔板书、收发电子邮件、听歌、看录像等都是采用符号构建意义的模态形式。可见，媒体是表达信息的物理工具，而模态是用某种媒体表达信息的特殊方式，通过触觉、听觉、视觉等感官跟外部环境进行互动，用其中三个或以上感官进行的互动叫多模态，正常人之间的互动交际都是多模态的。所以，语言教学可以借助多模态，诸如听觉的、视觉的、触觉的多种体验和多感官刺激，为学生提供声、像、图、文环绕的交互式训练语境，使学生获得交际意识和语用能力。

此外，随着多媒体教学技术的迅速发展，现代语言教学课堂中，越来越多的教师选择使用PPT语篇。作为一种新的语类，PPT工具是我们用于制作幻灯片的PowerPoint软件，也就是说，要制作幻灯片的演示者需要借助于微软公司设计的PowerPoint软件。它是微软Office系列软件的一个组成部分，帮用户传递信息，其本身不能表达意义。但是我们课堂中用到的PPT语篇，则借助PPT工具创建的多种模态，包括图像、图表、音频、视频等。也就是我们说的多模态语篇（胡壮麟，董佳2006）。

将多模态语篇运用于外语教学还有着多模态自身的优势。多模态运用就是通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象。即在学习过程中将眼、耳、手、舌、鼻都调动起来,使抽象的、枯燥的学习内容转化成形象的、有趣的、可视的、可听的动感内容。如果在教授生词、短语及习语时配上形象的图片或者声音,记忆的速度会更快,印象更深刻。因为在某种程度上,声色刺激远比文字刺激强烈。朱慧玲（2010）在《多模态语境下英语教学的思考》中曾指出：“多模态运用于英语教学中可使学生在英语的学习过程中以多种感觉器官参与学习。多种媒体信息刺激学生的大脑皮层相应机能区,比单一媒体信息刺激所引起的反应要强得多,更有利于知识的理解和记忆,产生更好的学习效果。”从图文结合的彩页教材,到幻灯片、投影仪的出现,再到多媒体的使用,逐步运用多种模态优化英语教学。在大学英语教学中运用多媒体,可创设声、光、色、图俱佳的交互式学习环境,使学生们感到新鲜,产生兴趣和求知欲望。宽松、自主的学习氛围,可促进学习主观能动性的发挥和个性的发展。同时多媒体使用也可增加课堂语言信息量,提高语言教学效率。

比如在学习英美文学时,由于语言文化差异及文字单一、枯燥,读者很难集中精力将整篇小说或著作读完。而根据著作改编的电影,具有集文本字幕、语音、图像等多种信息传播介质于一体的特性,或以优美迷人的画面,或以至纯至深的情感,或以演员高超的演艺给观众留下深刻的印象,这样可以促使学生在感受情节的同时,自然、轻松地“读”懂了小说,并且在观看电影时不知不觉、自然地习得纯正的语音、语调和丰富地道的语言,轻松提高英语口语交际能力,达到大学英语教学的最终目标。

4.结束语

综上所述，在大学英语课堂中应用多模态语篇,教育信息化程度会越来越高。这就促使大学英语教师思考在社会文化呈现多元化和技术化的现在和未来，教什么和怎样教的问题,也就是思考现在和将来的多元识读教学问题。而对此，大学英语教师要在教学实践中积累经验,优化多模态语篇在不同语境下的运用。

Halliday,M.A.K.(2000).An Introduction to Functional Grammar[M].Beijing:Foreign Language Teaching and Research Press.

Kress,G.&Van Leeuwen,T.(2006).Reading Images:The Grammar of Visual Design[M].London:Routledge.

黄创(2009).基于多模态教学的商务英语综合实训.[J].商场现代化(5):247－249。

胡壮麟，董佳(2006).意义的多模态构建[J].外语电化教学(6)。

胡壮麟(2007).社会符号学研究中的多模态化[J].语言教学与研究(1)。

刘晓琳(2009).从多模态话语分析解读英语诗歌[J].齐齐哈尔大学学报(7)。

韦琴红(2009).视觉环境下的多模态化与多模态话语研究[M].北京:科学出版社。

朱慧玲(2010).多模态语境下英语教学的思考[J].长江工程职业技术学院学报(3)。