多模态政务微博语篇的意义建构*

马 莹　马 彪

(黑龙江大学, 哈尔滨 150080/吉林师范大学, 四平 136000；黑龙江大学, 哈尔滨 150080)

1　引言

传统话语分析中的主要理论和方法都是以语言为研究对象，只注意语言系统和语义结构本身及其与社会文化和心理认知之间的关系，忽视图像、声音、颜色等其他意义的表现形式。随着新媒体和交际技术的不断发展，多模态话语逐渐替代单模态，成为主流，其重要性引起人们的注意，20世纪90年代以后，话语分析领域出现多模态转向。(冯德正 2017：5)人们认识到仅仅从语言角度已经不能对话语进行有效地分析，因为很多时候交际是运用多种感官同时进行的，以多种感官进行交际而产生的话语是多模态话语。在功能语言学理论基础上发展起来的话语分析理论从社会符号学的角度来看待交际系统，认为每个模态来自一个符号系统，每个符号系统具有各自的系统和功能特征。Kress和van Leeuwen指出，“用多模态这个术语表示我们交际方式很少由一种，即语言，来进行，而是同时通过几个模态，即多模态，把视觉、声音、语言等结合起来进行”。张德禄结合以上二者观点提出，“多模态话语是通过多种手段和符号资源，综合运用听觉、视觉、触觉等多种感觉进行交际的现象”(张德禄 2009：24)。国内外学者在多模态话语理论和应用方面展开的研究涉及多模态外语教学、会议PPT文本、电影海报、广告语篇等方面(Kress,van Leeuwen 1996:149-187;李战子 2003:1-8；胡壮麟 2011:1-5;朱永生 2007:82-86;顾曰国 2007:3-12;张德禄 2009:24-30;马莹 2016:148-151)，但对新媒体话语形式之一的政务微博语篇的研究相对较少。根据《2016年度政务微博综合影响力报告》，全国除港澳台以外的省级及以下地方政府有80%以上已开通政务微博，其中仅以文字模态出现的单模态语篇占语篇总数的30%左右，而以多种模态组合形成的多模态语篇占语篇总数的70%左右，可见对语篇意义建构的研究成为理解多模态政务微博语篇的重要方面。本文尝试对2016年12月27日共青团中央发布的一条政务微博(如下图)进行多模态话语分析，探讨多模态政务微博语篇中模态间的关系及各模态间建构意义的方式。

2　理论框架

2.1 三大元功能理论

系统功能语言学认为，语言的性质决定人们对语言的要求，即语言所必须完成的功能。Halliday把语言无限可能的功能归纳为三大概括性的功能，即“三大元功能”——概念功能、人际功能和语篇功能。概念功能指语言是对存在于主客观世界的事物和过程的反映，是所说的内容在语言范畴中的表现。概念功能中的经验功能主要由及物性过程来体现，反映经验关系，及物性过程主要分为6种：物质过程、心理过程、关系过程、行为过程、言语过程和存在过程。人际功能指说话人和受话人之间的互动关系，说话人说话时所持的态度及说话人用语言表达对现实世界的看法，实现人际功能的手段主要包括语气、情态、人称和评价4个方面。语篇是实际使用中表达思想相对完整的单位，语篇功能是纯理功能的核心，语篇功能由主位结构、信息结构和衔接手段来体现。

2.2 视觉语法理论

Kress和van Leeuwen在系统功能语法理论基础上建立分析图像的视觉语法理论框架,对应功能语言学的三大元功能，视觉语法提出图像的3种意义：再现意义、互动意义和构图意义(Kress, van Leeuwen 1996:149-187)。再现意义指出任何符号模态都可以再现客观事物及其与外部世界的关系，根据矢量分为叙述再现和概念再现，其中叙述再现包括行动过程、言语过程、反应过程和心理过程；概念再现包括关系过程和存在过程。互动意义反映图像制作者、图像表征事物和观看者之间的特殊关系，并通过接触、距离和视角3个方面来体现。“接触”反映表征参与者与互动参与者之间的关系， “距离”表现在图像中运用的特写镜头、中镜头、长镜头都会反映表征参与者与互动参与者之间的亲密程度。“视角”即图像拍摄的视角，它也能体现对图像元素的态度。构图意义主要通过信息值和和显著性来实现。Kress和van Leeuwen阐述构图意义的信息分布,图像上位传递理想信息，图像下位传递现实信息，图像从左到右是已知信息到新信息的分布，从图像中间到图像边缘是信息重要性逐渐递减的体现。显著性通过背景位置、虚实、色调和对比度等方式表现。

3　多模态政务微博语篇的意义建构

我们按照多模态分解、单模态意义建构、模态间关系考察、多模态意义重构的思路对语料进行考察，首先对多模态语料进行模态分解，语料可分成图像、文字、表情3种模态，然后运用三大元理论和视觉语法理论分别对图像模态、文字模态、表情模态进行意义建构，最后考察各模态话语之间的关系，从而重构多模态政务微博语篇的整体意义。

3.1 政务微博单模态意义建构

3.11 文字模态意义建构：

概念意义主要由及物性表现，下面我们对语料全文进行及物性分析。

表1　及物性过程百分比

从表1可以看出，物质过程最多，占整个语篇的65%，心理过程、行为过程、关系过程各占10%，言语过程仅出现一次，占5%，整个语篇中没有出现存在过程。2个心理过程的感知者都是病重的爷爷，表明他希望见到奶奶的迫切心情，在19个过程中，爷爷、奶奶作为动作者、感知者和言语者的过程有15个，占过程总数的79%，说明在该新闻语篇中爷爷奶奶是报道重点和关键内容。

从人际意义看，语料通篇用陈述句给予读者信息，信息交流较大，除句型以外，“情态”也是表达人际意义的重要因素，语篇中出现表情态的词“奢望”“紧紧”，表明两位老人牵手不易，牵手后久久不愿分离的态度。

从语篇意义看，语篇是有意义的表述集合，经验意义和人际意义最终还要通过语篇来表现。经过分析，文字模态语料中主位都呈无标记性，这说明句子的主语是主位，是已知信息，主位后的述位部分是要传达的新信息，这符合新闻语篇中突出叙事功能的原则。

3.12 图像模态意义建构

再现意义是在视觉上建构图片中的事件、参与者及环境，一般分为叙事再现和概念再现，叙事再现通过动态实现，再现图像参与者相互做某事，概念再现通过静态实现，描述参与者的属性、意义和特征等(胡圣炜 2008:22)。矢量是区分二者的唯一标准，图像中的元素构成强烈地对角线形成矢量，这是叙事再现的典型特征。语料的图片中奶奶握着爷爷的手正在说话。图片有4个矢量，第一个矢量由奶奶握着爷爷的手构成，它是及物表示动作过程的叙事图像，动作的发出者是奶奶，目标人物是爷爷。第二个矢量由爷爷和奶奶之间的目光构成，它是及物表示心理过程的叙事图像，爷爷是再现参与者，奶奶是被感知的对象。第三个矢量由奶奶与爷爷之间的对话构成，它是表示言语过程的叙事图像，说话人是奶奶，受话人是爷爷。第四个矢量由站在床头的人与爷爷奶奶之间的目光构成。以上4个矢量都与爷爷奶奶相关，并从爷爷奶奶在构图中的大小、位置、显著度看出，爷爷奶奶是该图片中的核心对象，是最突显的再现参与者。

图片的互动意义中包含再现参与者与互动参与者两类，新闻报道中前者为图片中的人物，后者为报道者和读者，相应地互动关系可体现为：图片中对象之间的关系，报道者对报道对象的态度和报道目的，读者对报道对象的态度和图片在读者中产生的影响。Kress 和van Leeuwen指出，互动关系的实现要素为接触、社会距离、态度和情态。接触是图像中再现参与者视线直视互动参与者，与互动参与者形成想象中的接触，这类图像被称为“索取”类图像，表达某种明确的态度。图像中再现参与者视线与互动参与者无接触时，这就是“给予”类图像，给予报道信息，反映主观性程度(Kress,van Leeuwen 2006:47)。通过分析，语料图片中人物与读者没有目光接触，此图片为提供类图像，提供的信息是：病床上奶奶握着爷爷的手正在说话。社会距离指取景框架大小体现出图像中再现参与者与互动参与者的距离和关系，如果图片中出现特写镜头就拉近两种参与者的距离，也称为人际距离，表达亲近感。如果图片中能看到人物整体及周围环境，就体现社会距离。如果使用长镜头拍摄，图片人物距读者较远，场景很大，即为公众距离，表达陌生感。根据距离分析，在语料图片中仅能看到人物周围部分环境和场景，人物占整个框架三分之二，是亲密的人际距离，这增强图像中爷爷奶奶与读者的关系，让读者产生身临其境的感觉，对人物和事件印象深刻。态度指观看图片时采用的视角，这种视角体现再现参与者与互动参与者的关系，图片一般采用水平视角和垂直视角拍摄，平视表达参与权与平等权，仰视意味着表述权，俯视表达强势地位。语料中的图片采用水平拍摄视角，表达图片中人物与读者的平等关系，即：爷爷奶奶跟我们一样是普通人，事件发生在我们身边，同时又让互动参与者感同身受，联系自身，引起强烈共鸣。最后由图片色彩饱和度、深度、亮度、细节等方面构成的情态是语篇可信度与真实性的重要参照因素，语料中的图片为了还原再现“医院中病重的爷爷奶奶牵手，约定来生还要一起走”的情景，摄影师采用中饱和度的自然色彩，细节体现为：老人的白发、年老松弛的肌肤、正在说话的嘴型等，图片具有较高的真实度，符合新闻语篇的交际目的。

图片的构图意义相当于功能语法的语篇意义，是指图像的再现成分与互动成分整合成一个有意义的整体(韦琴红2009:42)。从构图的信息值看，爷爷奶奶牵手位于图像下位，是图像传递的现实信息，病重的爷爷位于图像左侧是已知信息，奶奶在图片右侧是新信息，从中间向边缘表示信息重要度递减，病床上的爷爷奶奶是图片中的重要信息。从构图的显著性看，爷爷奶奶被放置在镜头的中间，成为“前景”，其他人员和奶奶肩膀上的手都成为“背景”。与再现意义和互动意义相比，构图意义虽然没有直接传递出多模态语篇的交际意义，但在整体表现在线意义和互动意义和效果时是不可或缺的。可以看出图像模态中的构图意义表达整体性，再现意义表达个体性，而互动意义则是具体性的体现。

3.13 表情模态意义建构

3.2 多模态政务微博语篇中模态间关系考察

Kress和van Leeuwen(2001:20) 在多模态定义中提到模态之间的强化、补充和层次性关系。代树兰(2017：2-3)强调“图像的崛起”和“图像转向”。张德禄(2009:26)将模态间关系分为互补关系(强化与非强化)和非互补关系(交叠、内包和语境)两类。“牵了手的手，来生还要一起走”多模态政务微博语篇中出现3种模态：文字模态、图像模态、表情模态，所以我们从文字模态和表情模态、文字模态和图像模态、图像模态和表情模态3种关系进行考察。

其次是锚定和证实关系。语料中文字是对图片的锚定，仅出现爷爷奶奶病床上牵手的图片，我们不能确定图像中具体人物和事件，有了文字就能锚定图片中的信息，使信息更加清晰和具体。图像是对文字的证实，证实文字模态表意的真实性和可信度，爷爷奶奶病床牵手图片表明事件真相、增加新闻信度。文字中“冯爷爷器官衰竭，自知时日不多”，图片中看到瘦弱的冯爷爷躺在病床上、带着氧气罩，文字中“奶奶紧紧拉起丈夫的手”，图片中看到奶奶一只手紧紧拉住爷爷的手，另一只手拉着爷爷的臂弯，文字中“奶奶说:‘我会照顾好自己的，等我好了，我就去找你。’”图片中看到奶奶正在对着爷爷讲话，图片直观再现出文字所描述的情景，图片内容是对文字内容的证实。

第三是强化与补充关系。图像与表情互为强化与补充关系，前者展示客观事实，后者表明主观态度；前者具有新闻的严肃性，后者具有微博的娱乐性，二者互为补充。在本语料中，文字是主模态，提供最大信息，图像模态和表情模态为次要模态，二者与文字模态共同实现整体意义。多模态语篇中的言语具有动态性、持续性，在时间性上有优势，图像与表情具有极强的表现力，在空间性上有优势，3种模态同时出现，时间优势和空间优势相结合，各模态形成协调关系，相互协调中传达交际者的最终意图，所以3种模态整体关系为协调互补型关系。

3.3 多模态语篇意义重构

语料中文字模态侧重传达新闻事件基本叙事意义，表情模态渲染文字的表意气氛，图像模态更具体地证实文字的真实性，3种模态协调互补最终完成语篇整体意义的建构，把一个发生在病房里的“爱情故事”真实、自然地展现在我们面前。没有轰轰烈烈、海誓山盟，真实的场景、简单的牵手、平实的语言让每一个读者动容，我们都能感受到整个语篇传达出“陪伴是最好的告白、珍惜身边人”等正能量信息。在政务微博，特别是非名人新闻中，这条微博引起广泛关注及良好互动，3天内转发1536次，评论866次，点赞6305次。我们考察评论内容时发现，本条微博引起人们对往事的追忆，人们在感动的同时也对爱情的真谛有了重新理解。

4　结束语

本文运用三大元功能理论及视觉语法理论，对共青团中央发布的一条政务微博进行多模态话语分析，运用模态间的关系理论揭示各模态之间的互动关系以及各模态对语篇整体意义的重构。我们把语料中的多模态语篇分解为文字模态、图像模态和表情模态，从概念意义、人际意义和语篇意义方面建构文字模态意义，从再现意义、互动意义和构图意义方面建构图像模态意义，同时认为表情符号是传递信息的重要手段，表情模态发挥其在整体语篇中的娱乐功能和辅助交际功能。多模态政务微博“牵了手的手，来生还要一起走”以文字模态为主、图像模态和表情模态为辅，3种模态协调互补共同建构语篇整体意义，传达出政务微博中宣扬真爱的正能量意图。

代树兰. 多模态话语中各模态之间关系的研究[J]. 外语学刊, 2017(6).

冯德正. 多模态语篇分析的基本问题探讨[J]. 北京第二外国语学院学报, 2017(3).

顾曰国. 多媒体、多模态学习剖析[J].外语电化教学, 2007(4).

胡圣炜. 从社会符号学角度对征兵海报的视觉分析[J].外语研究, 2008(4).

胡壮麟. 多模态小品中的主体模态[J].外语教学, 2011(4).

李战子. 多模式语篇的社会符号学分析[J].外语研究, 2003(5).

马莹. 当代二人转的多模态话语分析[J].戏剧文学, 2016(2).

韦琴红. 视觉环境下的多模态化与多模态话语研究[M].北京：科学出版社, 2009.

张德禄. 多模态话语分析综合理论框架探索[J].中国外语, 2009(1).

朱永生. 多模态话语分析的理论基础与研究方法[J].外语学刊, 2007(5).

Halliday, M.A.K.AnIntroductiontoFunctionalGrammar[M]. London: Edward Arnold, 1994.

Kress, G., van Leeuwen, T.ReadingImages:TheGrammarofVisualDesign[M]. London: Routledge, 1996.

Kress, G., van Leeuwen, T.MultimodalDiscourse:TheModesandMediaofContemporaryCommunication[M]. London: Arnold, 2006.