融媒体视域下沉浸式新闻的技术呈现与应用

周富强

（湖南省湘潭市广播电视台，湖南 湘潭 411104）

0 引言

随着信息技术的快速发展，新闻传播方式正在经历深刻变革。传统的平面媒体由于信息传播的“一对多”模式和信息源单一的特点，已无法满足受众对沉浸式、交互式新闻体验的需求。基于互联网和移动通信技术的数字化媒体，用户获取新闻信息的方式渐趋个性化，被动接收新闻信息已经成为过去。近年来，虚拟现实（Virtual Reality，VR）、增强现实（Augmented Reality，AR）等新兴技术的应用，人工智能等新兴技术的发展与普及，使得新闻传播呈现出“沉浸式”的全新特征，拉近了新闻事件与受众之间的距离，实现了新闻传播的“同在”效果[1]。沉浸式新闻不仅重塑了新闻传播和接收的形式，也带来了新的传媒商业模式，被认为是新闻业数字化转型的重要方向。

1 沉浸式新闻的概念

沉浸式新闻是基于VR、AR 等新兴技术的新闻表现形式，其核心概念是“身临其境”，即通过技术手段营造高度逼真的虚拟环境，实现新闻场景的沉浸式体验。有学者认为，沉浸式新闻可以看作是传统新闻报道环境向虚拟环境演化的产物。沉浸式新闻以VR 技术为基础，配合头戴显示器、动作捕捉和交互控制器等硬件设备，将用户“沉浸”在一个三维的虚拟新闻场景中。用户能够在场景内自由浏览和交互，就像身临其中一样。与此相比，AR 技术使虚拟元素“浮现”在真实世界中，为用户提供融合了虚拟和真实的沉浸体验。除视听沉浸外，沉浸式新闻强调情境交互，用户可以对新闻环境及内容进行操作与查询[2]。

2 沉浸式新闻创作的关键技术

2.1 VR 内容制作技术

VR 技术的应用是实现沉浸式新闻高仿真虚拟体验的关键。高质量的VR 新闻内容制作涉及多种技术。为构建沉浸式新闻所需的高质量VR 环境，一个完整的流程往往包括采集、建模、开发、渲染和优化等环节。首先是全景拍摄技术，通过多视角拍摄获得新闻场景的全部视野信息，使用全景图像拼接算法将不同视角图像精确对位，生成无缝的360°全景图或视频，作为构建虚拟空间的基础素材[3]。其次是三维空间重建技术，利用三维建模软件针对新闻现场进行虚拟环境重建，定制新闻场景的虚拟空间地形、虚拟对象模型等细节内容，补充全景摄像的不足。为实现VR 新闻场景的实时交互，需要运用六自由度定位跟踪技术动态获取用户视角，使用图像识别、环境敏感等感应技术捕捉新闻场景及虚拟对象的状态变化，借助逆向运动学算法计算机制实现实时渲染和交互响应，使虚拟场景与用户的视角和操作保持同步[4]。许多沉浸式新闻制作会运用Unity、Unreal 等游戏开发引擎中的丰富交互设计工具、物理模拟模块等功能来便捷实现VR 新闻场景的开发。

2.2 AR 内容制作技术

AR 技术实现了虚拟数字信息与真实环境的融合，为沉浸式新闻提供了将新闻要素实时叠加到现实中的能力。要制作出高质量的AR 新闻内容，完整的流程需要以下几方面技术的支持：一是准确的空间定位和跟踪，需要计算机视觉算法基于摄像头图像实时识别环境中的关键特征，计算设备自身在真实世界中的位置姿态，对虚拟要素快速定位、稳定锚定；二是建模与渲染技术，通过三维建模软件构建新闻事件需要的虚拟人物或物体模型，并设置材质、动画以增强真实性，然后基于光学或视频叠加显示技术，将三维虚拟模型精确渲染并叠加到实际镜头画面中，同时处理好虚拟物体与实物的遮挡关系；三是环境映射技术，即捕捉真实场景的几何形状、表面属性及光照信息等数据，以制定虚拟要素的光照效果，保证虚拟物体在场景中的影调和照度与实景环境一致。

2.3 人工智能技术

人工智能（Artificial Intelligence，AI）技术为沉浸式新闻提供了强大的智能化支持，成为实现新闻内容自动化生成、组织和智能交互的关键。在内容生产方面，自然语言处理技术中的预训练语言模型可自动生成逻辑清晰、语法正确的新闻文本，辅助新闻撰写工作；语音合成技术可以自动将文本转化为真人语音音频，赋予沉浸式新闻环境中的虚拟角色智能对话能力，实现人机语音交互；知识图谱和深度语义理解技术可以分析用户请求的语义和意图，利用知识网络推理出最匹配的新闻响应；计算机视觉技术可对新闻画面中的场景、人物及物体等内容进行智能分析，实现图像检索和主题识别功能；大数据挖掘技术提供海量新闻内容的采集、关联分析和组织能力，以构建丰富的新闻知识库；多模态信息融合算法可以实现文本、音频、视频等不同模态新闻内容之间的交叉关联，推荐相关联的沉浸式素材[5]。

3 融媒体视域下沉浸式新闻的呈现形式与应用

3.1 VR 新闻

基于VR 技术的沉浸式新闻，极大地丰富了传统新闻的表现手段，为用户提供了革命性的身临其境新闻体验，可以分为场景还原型和角色扮演型两种。场景还原型VR 新闻运用三维建模和虚拟场景技术还原新闻发生的环境，通过精细化处理每个细节，重构事件的原始场景，让用户得以沉浸式地浏览新闻现场，360°浏览场景，近距离观察细节，更直观深入地理解新闻事件。角色扮演型VR 新闻通过构建第一人称视角，增加用户的代入感和现场感，配合立体环绕音频的运用，身临其境地重现事件经过。如2016 年法国记者Arnaud Colinart 导演推出的《失明笔记》（Notes on Blindness），就是根据一位失明作家的日记改编，让用户身临其境地感受他的视觉世界消失，以及他如何重新发现生活的意义。英国《卫报》社推出的《6×9》VR 新闻作品，探索了独居牢房对囚犯心理和生理的影响，用户可以通过VR 头盔沉浸式体验约5 m^2大小的牢房，感受囚犯的生活。除上述沉浸式新闻外，VR 技术也可以用来展示传统的二维图片或视频新闻，通过浮动的三维环幕效果呈现，同样提供更加开阔的视角。

3.2 AR 新闻

基于AR 技术的沉浸式新闻，实现了虚拟数字信息与真实环境的无缝结合，为新闻传播开拓了独特的可能性，可以分为现场增强型和交互式AR 新闻两个类别。现场增强型AR 新闻使用空间定位和图像识别算法，在真实的新闻现场中叠加各类虚拟要素，如行为标签、三维模型、地图导览等数字元素。如2018 年11 月《纽约时报》推出的《火星探索》（Mars In Sight），用户可以通过移动设备在身边环境中查看火星探测器的三维模型，深入了解其功能。这些虚拟要素呈现了难以摄制的场景细节，帮助受众更好理解案发地点环境和事件经过。交互式AR新闻通过识别语音指令或手势操作，实现了虚拟要素的自主控制，用户可以调整新闻浏览的顺序和视角，获得身临其境的沉浸体验。如2022 年北京冬奥会报道中，央视网搭建的AR 虚拟演播室在实景中添加各类虚拟元素，利用VR 技术打造沉浸式视听效果，让观众有身临其境的体验。央视网还推出创意视频《当天鹅湖遇上北京冬奥》，融入元宇宙概念和CG 动画等技术手段，在连续18 天的《环球体育》特别直播节目过程中，“雪如意”“冰立方”“雪游龙”等冬奥比赛场馆被“搬运”进演播室内，以微缩、立体的方式呈现在观众面前，向世界传递科技冬奥理念[6]。总体而言，AR 技术为新闻提供了虚拟数字内容的无缝叠加、主观视角的代入以及交互操作等创新功能。相较传统视频新闻，AR 新闻具备双向交互性和开放性的沉浸式新闻体验。

3.3 智能语音新闻

基于自然语言处理技术的智能语音新闻，实现了新闻的“自言自语”，为用户提供便捷自然的语音交互服务。语音播报型智能语音新闻运用语音合成技术，自动将文字新闻转换成逼真的语音，用户可以随时随地通过语音方式获得新闻听觉体验；个性化推荐型智能语音新闻根据用户兴趣画像，主动推荐个性化的新闻内容，并用语音方式播报给用户；语音问答型智能语音新闻可以解析用户的语音提问，利用自然语言理解技术分析提问含义，在知识库中检索到相关新闻，并用语音方式回答用户的查询，实现人机语音对话；语音交互型智能语音新闻设计了包含不同虚拟角色的语音交互剧情，用户可以通过语音方式与虚拟角色对话互动，改变故事走向，获得身临其境的沉浸式体验。智能语音新闻实现了基于语音交互的新闻传播新方式，为用户提供了更便捷自然的新闻获取体验，正成为新闻传播的重要发展方向。

4 结语

在融媒体视域下，沉浸式新闻应运而生。这种新闻形式代表了新闻传播形式的重大革新，其应用VR、AR 等前沿技术，打破了新闻传播的时间和空间限制，实现了高度仿真的沉浸体验。沉浸式的新闻表达方式不仅丰富了新闻传播的语言，也更好地满足了公众对身临其境、互动性新闻体验的需求，成为新闻业数字化转型的重要方向之一。未来，还需要新闻媒体、技术企业等各方面力量的不断探索与实践，以期实现沉浸式新闻传播的更广泛应用，让这项新兴的新闻形式在数字时代扮演更重要的角色。