摘 要:以Kress和van Leeuwen的视觉语法及Martinec和Salway的图文关系理论为基础,对Alter Ego II(法语教材)进行多模态文本分析。研究表明,Alter Ego II蕴含丰富的多模态文本,文字仍占主要地位,但图片也发挥着独特作用。在此基础上对教师教学、教材编写提出了建议。
关键词:多模态文本分析;法语教材;Alter Ego II
1 引言
当今世界,科技的发展使人们可以通过多媒体扩散和接收广泛的信息。而书面语言也不再是传达信息的唯一模态。Gunther Kress(2010)认为,模态是“一种适应特定社会或文化的、用于创造意义的资源;图像(动画)、文字、排版和语音都是不同的模态”。在这些模态中,图像起着日益重要的作用(Kress,1996)。Boutin认为,多模态文本是图文结合的产物,根据传播媒介的不同,它可以采用线性方式阅读,如漫画;或非线性模态,如网站上包含图像的文本(Boutin,2012)。与此同时,教学材料中图片的使用也更加频繁:课上课下,教材或PPT中,图片都得到大量运用。分析教科书中的多模态资源,研究这些符号如何合作构建意义,有助于提高教材的资源使用率、课堂教学效率、和学生的学习效率。
2 研究背景
笔者观察到,在法语精读课堂上,当老师要求法语专业学生借助图像信息回答问题时,他们更喜欢直接阅读选项而不看图片,然而他们的教材Alter Ego II却包含了大量的图像。
因此,我们提出了以下问题:
(1)教材中的图像能促进学生学习外语的过程吗?如果是,是如何促进的?
(2)教材书中的图像是否可以根据特定的标准进行详尽分析?
(3)如果图像能够对外语教学产生积极影响,教师和教材编写者应如何充分发挥其作用?
笔者将以Alter Ego II作为研究对象,希望通过研究,就图片在法语教学中的使用,向法语教师和教材编写者提出有效的建议。
我们将简要介绍Kress和van Leeuwen的视觉语法及Matinec和Salway的图文关系理论。在此基础上,我们将着手分析Alter Ego II中的图像。
3 图像分析的理论框架
3.1 从视觉语法视角分析图像
Kress和van Leeuwen攥写的《阅读图像:视觉设计的语法》,提供了系统的图像研究体系:视觉语法,它从三个方面构建了图像分析的框架,即图像的再现意义、互动意义和构成意义(李,2003)。
3.1.1 再现意义
再现意义被区分为两大类:叙事的和概念的。
在叙事的再现中,我们要区分行动的过程和反应的过程。斜线形成的矢量,是叙事图像的标志。当参与者被矢量连接起来时,他们被再现为对对方做某件事。行动过程的动作发起者发出矢量,而目标就是矢量指向的对象。而当图中人物的目光构成了矢量,该过程被称为反应过程。
而在概念过程中,我们又可以分为分类过程、分析过程和象征过程。分类过程中,至少有一组图中要素作为“从属者”。分析过程表现的是图中要素的总体部分关系:要素的特征作为部分,要素本身作为总体。而象征关系中,我们能够通过图片的象征属性,明白图中要素意味着什么。
3.1.2 互动意义
图像在实现与看图者的互动时,主要有三个要素:目光接触、距离、视角。
图中人物与看图者有无目光接触,这决定了图片是“呼吁行动型”还是“提供信息”型。日常生活中人与人有不同的交往距离,相应地,图中人、物与看图者也有不同的距离,这是通过不同的取景大小来实现的。图中要素如果处于近景或特写,我们只看得见人物上半身或头部,与读者距离较近,会被认为与读者有亲密的关系。相反人物如果处于远景,读者会与之有距离感。处于中景,即我们可以看见人物全身,但图中几乎没有背景,这是一种适中的距离。不同的视角(平视、俯视、仰视)决定了读者和图中要素之间的权利地位关系。读者平视图中要素时,与之平等;反之,读者俯视或仰视图中人、物时,会处于支配或被支配地位。
3.1.3 构图意义
Kress和van Leeuwen提出了构图意义的三种资源:信息值、取景和显著性。实际上,这些资源不仅适用于构图,也适用于多模态文本的图文排版。由于Alter Ego II中图片类型及文章篇幅所限,笔者只简单介绍信息值这一要素。信息值是通过图片或文字元素的位置实现的。任何元素,放置在左边,会被认为是已知信息,而右边的是新信息;上面的信息一般是理想的,而下方的则偏向具体、实际。此外,中心的元素一般是核心信息,边缘的则与之相反。
3.2 图文关系理论
Martinec和Salway(2005)的图文关系理论揭示了图文地位和图文逻辑语义关系。他们认为,要全面考察图文关系,要同时考虑这两方面要素。
3.2.1 图文地位关系
图文地位关系可以分为平等或不平等的关系。如果整幅图片对应整段文字,则图文关系平等,此时或图文独立、或图文相互依赖。图文关系不对等时,即图片只对应文字的一部分,或文字只对应部分图片信息时,则一方从属于另一方。
图文独立时,图片和文字信息各自传递出独立、互不干扰的信息;如果图文中一方需要另一方来明确它传达的信息,图文结合才能完整地传递信息,那么图文相互依賴,或相互补充。
不平等关系包括图从属文、文从属图。如图片只对应部分文字信息,那么图片从属于文,反之亦然。
3.2.2 逻辑语义关系
除了图文地位关系外,还应考察它们的逻辑语义的关系,可以细分为扩展和投射,前者细分为阐述、例证、延伸和增强,后者包括语言投射或思想投射。
例证是图文一方对另一方的信息进行的进一步详细说明,阐述则是图文的抽象程度相同,只是用不同模态表达出了类似或同等的信息。
延伸则意味着图片或文字在另一方内容的基础上,进行了信息的延伸。
一般情况下,增强是图片将对应文中的地点、时间、或原因(结果)等要素以图片的形式表现了出来,起到了强调的作用。
与扩展不同,语言投射和思想投射一般出现在连环画中,语言投射指画中的语言气泡,思想气泡则形成了思想投射。
Alter Ego II 多模态文本分析
由Hachette Livre出版的Alter Ego II是许多法语学习者使用的原版法语教材。这本教材包含九大单元,每单元由三个不同主题的课程和一篇旅行日记(文化部分)组成。
书中包含大量不同类型的图像:照片,漫画,图表,海报,网页等。它们和所配文字形成多模态文本,能够传递给读者比纯文本更深入完整的意义。有效的图像可以促进学生对文本的理解,提高他们的学习效率。
我们统计了Alter Ego II中图像的总量和类型:153页的课本中,共182张图片,包括96幅照片,78幅图画和7幅图表。照片和图画是主要的图片类型。为了详细分析Alter Ego II中的多模态文本,从而检验其有效性,我们利用视觉语法,分析所有图片结果如下(装饰性图片未统计在内):
表1 Alter Ego II图片再现意义
数量 比例
叙事再现 行动过程 87 36.5%
反应过程 27 11.3%
概念再现 象征过程 112 47%
分类过程 5 2.1%
分析过程 7 2.9%
表2 Alter Ego II图片互动意义
视角 距离 目光接触
平视 俯视 仰视 特写 近景 中景 远景 无 有
数量 157 8 5 45 39 60 27 130 42
比例 92.3% 4.7% 2.9% 26.3% 22.8% 35% 15.8% 75.6% 24.4%
表3 Alter Ego II图片构图意义
左右构图 上下构图 中心-邊缘构图
左右(符合规则) 左右(不符规则) 上下(符合规则) 上下(不符规则) 中心-边缘(符合规则) 中心-边缘(不符规则)
数量 40 24 95 16 2 1
比例 22.5% 13.5% 53.4% 9% 1.1% 0.6%
如上表所示,Alter Ego II的图片,再现意义以行动、象征过程为主,说明大部分图片表现了生动的人物动作,并通过图片展示了与文字相关的深层含义。
互动意义中,图片视角绝大多数都是平视,这说明Alter Ego II中的图片大都与读者是平等的关系;从图片与读者的距离来看,图片要素大多处于中景或是特写取景,当图片处于中景时,读者可以完整地观察人、物的全貌,可以对其有整体的把握;当图片处于特写时,此时读者和图片距离被拉近,能够细致地观察图片,对图片产生代入感,这样的图片在学习中容易引起读者的阅读兴趣。最后,我们观察到大部分的图片人物与读者没有直接目光接触,仅是作为信息的提供者。这种情况下,读者能够客观地接收图片信息,有利于他们对文本的理解。
从构图来看,图文大部分情况下是符合构图原则的,但少数情况下,图文配置并不符合构图规则。对此情况,编写者在编写教材时应当更加重视图片,遵循读者的阅读习惯和期待,科学地进行图文配置,以充分发挥配图在教材中的作用。
而Alter Ego II中多模态文本的图文关系分析结果如下表:
表4 Alter Ego II图文地位
图文平等 图文互补 图从属文 文从属图
数量 45 64 58 3
比例 26.5% 37.6% 34.1% 1.8%
表5 Alter Ego II图文逻辑语义关系
阐述 例证(由图) 例证(由文) 延伸(由图) 延伸(由文) 增强(由图)
数量 24 15 103 1 57 19
比例 11% 6.8% 47% 0.5% 26% 8.7%
如上表所示,图文互补、图从属文和图文平等是出现频次最高的图文地位类型。首先,图文互补的多模态文本多出现于“旅行日记”,这是由于其中的图片大多为比较抽象的图画,读者需要借助文字的帮助理解图片内容;但另一方面,这类图片大多生动有趣,能够激发学习者的兴趣、帮助他们了解法国文化。其次,图从属文的多模态文本多出于阅读部分,这部分文字内容较为丰富,信息量较大,图片一般作为辅助性、补充性的信息媒介。再次,图文平等的多模态文本多在听力部分,这是由于听力材料(文字)和图片在书中不同时出现,因此这部分的图片内容必须清晰,有助于读者预先了解录音的主题、大致内容。
如表5所示,Alter Ego II中图文主要逻辑语义关系有:例证(由文)和延伸(由文),说明与配图相比,文字内容往往更具体、完整,这也从侧面说明了编写者对文字作为信息媒介的重视。另一方面,图片也发挥着它独特的作用:增强:阅读部分中,部分图片能够展示文字中的地点信息,达到强调、具现化的效果。
4 结论
综上所述,Alter Ego II中的图片作为文字信息的补充,发挥着它独特的作用。它能够通过象征过程和特写,充分展示与文字内容相关的信息细节。同时,大部分的图文配置符合视觉语法的构图原则,因此是有效的。
但文字依然处于主要的地位,图片的作用并没有得到充分发挥。部分多模态文本中,编写者过于强调文字信息,而忽视了图片的作用。因此,教材的编写者应当意识到多模态文本在教学中的重要性,通过优化内容、科学图文排版等方式,来充分发挥图片的积极作用。
同时,教材多模态文本的分析有助于教师认识课本中多模态资源的作用,为其合理优化使用教材、增强教学效果提供参考。在课堂中,教师可以引导学生,进行适当的图片内容分析,充分挖掘图片潜力。当课本中的图片信息过少或无效时,教师要借助网络,寻找更有效的图片资源,优化教学效果。
参考文献
[1] Boutin, Jean-Fran?ois. La multimodalité : mieux comprendre la communication actuelle [et à venir] [J]. Québec fran?ais, 2012, (166): 46–47.
[2] Kress, G. Multimodality: A Social Semiotic Approach to Contemporary Communication [M]. New York: Routledge, 2010.
[3] Kress, G. & Van Leeuween, T. Reading Images: The Grammar of Visual Design [M]. London: Rouledge, 1996.
[4] Martinec, R. & Salway A. A system for image text relation in new (or old) media [J]. Visual communication, 2005, (3): 337-371.
[5] 李战子. 多模式话语的社会符号学分析[J]. 外语研究, 2003, (05): 1-8+80.
作者简介
郑文迟(1993-),女,汉族,湖北石首,武汉理工大学外国语学院硕士,研究方向:法语教学法。