虚拟现实技术推动下的阅读：基于具身认知的视角

朱咫渝 朱丹阳

（浙江传媒学院图书馆，浙江 杭州 310018）

一、引言

维基百科对传统阅读的定义是“阅读指大脑接受外界，包括文字、图表、公式等各种信息，并通过大脑进行吸收、加工以理解符号所代表的意思的心理过程”，强调的是心智与意义的融合，阅读过程是一种可以“离身”的认知活动，并不需要身体的参与。身体仅仅扮演者刺激的感受器及行为的效应器，阅读是“脖子以上”和“大脑以内”的活动。

随着第二代认知科学研究中具身认知理论的兴起，这种离身的阅读观受到了质疑。具身认知强调“具身性”与“情境化”，它认为“人的身体在认知过程中起到了非常关键的作用，认知是通过身体的体验及其行为活动方式而形成”。[1]作为人类的一种高级认知活动存在的阅读行为，在阅读过程中，人的心智不可避免地会受到身体及其环境的塑造、制约和调节，而近年来虚拟现实技术的发展，更使阅读成为一项统合视觉、听觉、触觉、味觉和嗅觉，主体身心融合的认知体验。

二、具身认知与虚拟现实技术

法国现象学哲学家梅洛·庞蒂在《知觉现象学》一书中，强调了身体对心智的塑造作用，传统哲学中的“意识主体”被“肉身化的主体”所替代，指出知觉的主体是身体，“由于客观身体的起源只不过是物体的构成中的一个因素，所以身体在退出客观世界时，拉动了把身体和它的周围环境联系在一起的意向之线，并最终将向我们揭示有感觉能力的主体和被感知的世界。”[2]在庞蒂看来，身体是知觉的中心，人能思维、有意识、能观察、可推理，是因为人就是一个能看、听、触、嗅和移动的身体，身体塑造了“我”对世界的知觉。[3]

具身认知科学认为认知不仅仅是大脑孤立的计算，而是大脑、身体和环境的相互作用。[4]它的内涵包括以下三个方面：

首先是认知的涉身性。认知是依赖于有机体的物理和生理的过程，没有特定的身体，认知就不可能存在。

其次是认知的体验性。当个体与外部环境中的事物相互作用时，身体的触觉、动觉、视觉、味觉、听觉的融合构成了最初的身体模式，身体状态的这种变化就是主体对外部世界的感知、体验和内化，主体的认知就是通过这种身心体验，将各种认知信息组成有意义的对象，然后进行组织和解释，并获得认知意义。

最后是认知的环境嵌入性。认知活动不是孤立于大脑、脱离情境的抽象性符号运算，环境/情境是确保认知的必不可少的条件，认知发生于一定文化环境中，并在环境的主导下由身体积极建构完成的，受制约于情境因素，因此认知的载体不只是个体，还与认知者所处的环境相关。

从具身认知的视角审视阅读发现，读者在阅读过程中获得的认知，是身体物理状态与周围环境的交互作用所产生的知觉、行动和自我反省的体验。如果一种阅读模式能够创造生动的阅读情境和逼真的阅读体验，那么这种“身心一体”的阅读认知机制将有助于更好地理解、领悟和鉴赏文本材料。

虚拟现实技术（Virtual Reality，VR）和增强现实技术（Augmented Reality，AR）的发展使这种身临其境的阅读成为了可能。虚拟现实技术作为一项尖端科技，利用计算机图形构成的三位数字模型生成一个虚拟世界，用户通过视觉、听觉、触觉等感官的模拟，沉浸到该环境中与之发生“交互”，观察、操作、触摸、检测周围环境及事物的内在变化，达到人和计算机“融为一体”的状态。增强现实技术（Augmented Reality，AR）是在虚拟现实的基础上加以延伸，通过模拟仿真把虚拟信息（物体、图片、视频、声音等）添加在现实环境中，将现实世界丰富起来，构建出一个更加全面、更加美好的世界呈递出来被用户感知，使用户的感官体验达到超越现实的目的。[5]

随着VR/AR技术植入图书出版，一个身体与想象共同参与的具身阅读环境逐步形成。在虚拟现实技术所打造的阅读世界，用户不再通过书或者电子屏幕阅读静态的文字和图片，虚拟现实技术利用全景穿越，制造出与现实世界质感相同的空间，让读者“走入”书中情境，以可视、可听、可触、可感等全方位的具身体验来获取信息。

三、虚拟现实阅读的具身认知特点

（一）虚拟现实阅读是身心、文本与情境的深度耦合

传统的纸质阅读中，通过文字或图像获取信息，从而理解、揣摩、体会作者所要表达的意境，这种借助于纸质载体获取对现实客体的认知方式是生硬、直白的，缺乏感性的丰富和生动。而随着VR/AR的临场化环境构建，身临其境的体验为阅读带来多感官的震撼与刺激。

具身认知理论认为认知是身体在环境的主导下主动去建构而成的，虚拟现实阅读通过虚拟技术对真实环境进行模拟与重现，在阅读过程中，文字、图片、声音、视频等使人们的视、听、触觉甚至是味觉等多重身体感官系统同时被激活，从而通过整体知觉全方位地获取虚拟客体的信息，阅读从与视觉有关的“看见”转换为与身体有关的“感知”，这种阅读方式是高度逼近于现实客体的认知体验。

以2016年1月北京出版集团推出的第一部结合虚拟现实技术的启智类科普读物——《大开眼界·恐龙世界大冒险》为例，读者只需戴上VR眼镜，就能置身于“恐龙世界”看到书中提到的各类恐龙。[6]阅读实现了从可看的“文本”到可亲身体验的沉浸式“场景”的转化。

除了虚拟现实儿童科普阅读，虚拟现实新闻阅读提供的实境具身认知方式使每个人都可以来到现场，真切地以“现场亲历者”的身份感受事件的进展。[7]在这种沉浸式的新闻阅读过程中，受众不再是置身事外的旁观者，而是来到现场的参与者。大多数人一生都不会经历战乱，也很少有人能真正体验地震的感觉，因此在文字报道或电视报道的过程中，观众其实很难从叙利亚战场、地震现场中找到共鸣，而VR沉浸式的呈现方式将使阅读成为置身其中的认知，受众在阅读过程中成为切身体验新闻中各种境况的参与者，从而可以与新闻里的故事、人产生深深的共鸣。

（二）虚拟现实阅读是身心、文本与情境的互动过程

传统的纸质阅读提供的是人与图像或文字之间的单向互动，读者只能通过个人的理解来获取相应的后续反馈。[8]随着以电脑、手机等为载体的数字阅读的发展，这一状况得以改观。与传统纸质阅读相比，读者有机会获得更多的互动方式。比如通过电脑的“键盘+鼠标”，手机和kindle的“手指触控+语音控制”方式，读者可以自由选择阅读的章节、点击查看附加的多媒体信息、接收附加在文字背后的视觉与听觉元素，虽然身体开始加入认知，但人的感官与肢体并不能更加有效、自然、灵活地参与到体验中来。[9]而虚拟现实技术的互动性，允许读者在虚拟世界通过操控自己的身体来变幻场景、切换角度，这与逐字逐句的传统阅读方式相比，故事的呈现方式出现了巨大的改变，读者由被动阅读转换为主动参与互动，从而实现自身的阅读需求。

美国波士顿学院的英语教授和他的学生们通过一个名为“Joycestick”的VR项目来阅读爱尔兰文学大师乔伊斯的巨作《尤利西斯》。[10]Joycestick项目通过VR游戏的形式让读者去探索小说中描述的各种关键环境（如都柏林近郊海边废弃的军事防卫塔和一间对小说主角影响深远的巴黎咖啡馆），接触小说描述的一些对象（如明亮的红色板球、一块柠檬香皂、一份带来悲伤消息的电报等），让他们能与小说中的情感和事件进行交互，从而带给用户更丰富的感染力。

这种身心、文本与情境的多维互动阅读，带读者重回文学经典中的场景，阅读同时变身成有趣的“虚拟游戏之旅”，而原本枯燥冗长、艰涩难懂的文学著作，也被发掘出了新乐趣。

四、虚拟现实阅读的具身学习应用

自数字时代以来，互联网和信息技术对传统纸质阅读的影响一直被诟病。通过鼠标和指尖即时可得的信息，跳跃式的超文本浏览式阅读，都会被认为是对沉浸式深度阅读的伤害。而随着虚拟现实技术开启的阅读的具身认知转向，在一定程度上可以说为沉浸式阅读体验的回归提供了可能。相对于纸质阅读意识范畴之内通过想象而得的沉浸，虚拟现实阅读是身体感官直接感知的、无须意识转化的沉浸式阅读体验。[11]

虚拟现实阅读最吸引人的是能够再造基于现实情景的虚拟环境，实现与古人“对话”，与自然“交流”。虚拟现实阅读过程中，身体是读者认知的中介，读者运用各类感官和身体动作去感受文本内容，产生主体体验，形成身体与大脑的记忆，这种具身阅读体验有助于将抽象性和概念化的知识转化为相对具体的感性认知，从而达到对文本内容的深度理解。虚拟现实阅读的发展，为教育模式的创新提供了新的契机，它可以改善学习环境，帮助学生建立起身体活动和学习材料之间的联系，从而支持较高水平的具身学习。

对于学生来说，许多教材类、科普类图书所涉及的一些知识点，如年代久远的历史、分子原子的结构、地球空间的变迁、机械运动的过程等，通常是枯燥乏味的。[12]学生一般通过文本案例的讲解进行学习，如果借助VR技术将静态课本内容变成360°的三维动态视景，学生们可以“潜入”深邃幽蓝的海底世界，“穿越”到浩瀚无边的外太空，或者身临其境地“围观”硝烟弥漫的古战场，那些书本里抽象的场景，瞬间呈现为栩栩如生的三维内容。

谷歌的“Expedition”远征计划就是通过使用AR技术连接教科书和数字内容的工具。[13]它把中小学生物、化学、物理、地理等教科书文字里晦涩难懂的原理和二维平面的模型放到虚拟现实里，借助Expeditions AR，学生们能在课堂上看到DNA双螺旋、火山，甚至是正在旋转的五级飓风，以此通过身体的感知提高对抽象知识的理解，快速消化难懂的知识点。

通过虚拟现实阅读，学习变得生动起来，不再拘泥于教科书上那一段段的概念描述，学生可以探索不同的世界，“可视化” “可感化”的学习是传统课堂无法实现的沉浸式、具身化的体验。

五、结语

阅读的最终目的是为了创造，即创造更加有用、更加有价值的信息，如何进行创造，这首先取决于解码信息的深度，重组信息的力度。美国认知神经学家玛丽安娜·沃尔夫在《普鲁斯特与乌贼：阅读如何改变我们的思维》一书中提到“阅读不仅反映了大脑超越原有设计结构的潜能，同时也反映了读者超越文本或作者所赋予内容的潜能”，阅读的目的在于超越书本上的文字，产生自主的升华的概念和思想。[14]通过虚拟现实技术构建的沉浸体验式的具身认知阅读，使阅读者的身体得以释放，并将身体各感官带入到认知过程中，激发阅读者各感官的感知能力，从而帮助阅读者更加具体、多元地获取外部信息，促进创新性思维的培养，相信不久的未来，虚拟现实阅读就会成为未来教育和体验式学习的新范式。