VR（虚拟现实）电影声音制作流程探析

罗兴

（江西财经大学软件与通信工程学院，江西 南昌 330032）

VR（虚拟现实）电影声音制作流程探析

罗兴

（江西财经大学软件与通信工程学院，江西 南昌 330032）

VR电影作为一种新型的观影模式，越来越被大众所熟知。要想实现最佳的观影效果，电影制作过程中对于声音的加工至关重要。VR电影的声音加工和传统的声音编辑既有相同点又有不同点，简单来说，VR电影的声音加工要更加复杂，因为要采用3D环绕声的形式，同时观影方式一般是采用穿戴式设备播放，这就要求声音播放的时候需要配合观影人员的动作、视角等进行调整，从而使观影者如身临其境。本文对VR电影声音制作的整个流程进行梳理，并且对常见的一些工具和适用范围等做简要介绍。

VR电影；VR声音制作流程；拾音；声音编辑混录；声音导出

VR电影通过各种特效，让观影者如身临其境。为了让受众有这种感受，一般采用的声音制作方式为三维环绕声格式，这能带给观影者最大程度接近现实生活的视听感受。其中，最为基础的是耳机还放技术，采用两声道的虚拟环绕声的形式进行播放，通过结合头部相关传输函数编码，配合头部跟踪数据，实现不论观众头部如何转动，声音仍旧保持在原来的方位上，使观众产生声音是独立于耳机存在的幻觉。VR电影的声音制作先要进行前期录音再进行后期制作，然后将输出的声音母带和画面合成，才能获得最终用来发行的电影母版。不同于传统电影的是，在制作的过程中要考虑如何收录三维声场里的声音，以及如何能够确保实现耳机还放技术，如何使声画同步以及如何进行声音母带输出、选用哪种合适的输出模式等。

1 拾音环节

拾音环节就是在电影声音制作过程中，用于素材收集的环节。常见的包括同期声录音中对于对白的录音、单独对音响效果或环境声的录音，以及后期制作时的模拟音等。在VR电影中，声音录制主要采用以下三种形式：双耳拾音技术中的人工头或类人工头拾音，声场合成技术的原场传声器拾音，以及记录水平和高度信息的环绕传声器进行拾音。这三种方式各有各的特点。

首先，双耳拾音技术中的人工头或类人工头拾音，主要是采用模拟人耳听觉的外部模型的方式进行声音素材的采集。其特点是便于操作，简单便携且清晰明了［1］。这种技术比较适合于用耳机收听，如果是用扬声器收听声音的话，会因为其技术局限性导致电影声音HRTF信息不能完全匹配，导致声音信息重现，从而出现误差。

其次，声场合成技术的原场传声器拾音，本质上是一种球形三维环绕声拾音技术。它的优点是对于不同格式的扬声器设置都有很高的适应性。这种技术分为一阶原场系统和高阶系统，一般情况下，阶数越高代表通道数越多，可以输出的数据量也就大大增加。因为能够对声音进行全方位记录，可以支持任何方向的视角转换。相较于前种拾音方式，该方式的三维空间有更好的表现力。

最后，记录水平和高度信息的环绕传声器进行拾音，相较于前两种拾音方式，声场的整体性和连贯性有所欠缺，但是获得的声音声道分离度较好，便于声音后期加工制作。

2 声音编辑与混录环节

VR电影在声音编辑和混录环节和传统电影存在很大不同，主要体现在以下三个方面。

2.1 3D视频还放

为实现声音编辑效果，要求3D视频还放最好是可以实现球形视频在电脑屏幕上的还放，并且可以使用鼠标来调整观看的角度，这就需要一些专业软件的支持，传统的头戴式设备是不能实现的。

这里不得不提的是以下两个软件：Kolor Eyes软件，可以支持上述还放模式；SpookSyncVR软件，可以实现音视频视听角度同步，从而可以让声音编辑师在编辑过程中实时掌握编辑情况，简化编辑过程，使编辑工作更加直观、高效。

2.2 音频工作站及空间处理插件

在完成声音素材的收集后就需要对声音素材进行编辑，VR电影中的声音编辑工具主要是能够实现多路母线输出的音频工作站和可以完成空间声音处理的插件。原则上来说，只要是可以实现多路母线输出的音频工作站都可以用来制作VR视频，如常见的Nuendo、ProTools HD、Reaper，三者支持的母线输出数量不同，分别为12路母线输出、8路母线输出、64路母线输出。不同的VR电影需要的母线输出数量也有所不同，所以具体声音编辑的音频工作站的选择最后还是需要根据电影的实际情况进行判定。

而VR声音在三维空间感处理和三维空间内声音定位的操作，就需要用专门的全景声制作软件来完成。比如，用于VR的杜比全景声软件就包含四个工具，即用于实现3D声像定位和元数据生成的Dolby Atmos Panner Plugin for Pro Tools，将音频和输出的元数据加工成可应用于杜比的格式的VR Renderer，对所有声音对象的空间定位等进行监看的Monitor Application和用于视频还放的Video Player，每个环节都不可或缺。这些工具保证监听时可以实现实时双耳监听，输出的母版格式多样，这样就确保了文件的高适配性［2］。

2.3 监听

VR电影一般采用的监听方式为耳机监听，这就需要对工作站的监听信号进行处理，实现双耳实时渲染并同时输出给耳机。这项技术的实现主要是依靠现有的用于VR声音制作的插件，这些插件实现双耳的渲染输出，一般采用的方法是通过对元数据加入现有的HRTF函数从而达到一种仿真效果。这样，呈现在耳机中的声音就可以重现声音在三维空间的位置，从而实现虚拟全景声监听和头部跟踪。

3 声音导出环节

在对声音素材完成编辑混录等加工过程后，需要将声音母版导出，再和视频进行合并，得到的文件再送往各个播放平台，这才是最终能够进行播放的电影。

随着科技的进步，观影体验要求的提升，相应的VR电影声音制作技术也会持续发展。市场上能够用于VR电影声音制作的各种工具也会不断被开发出来，原有的工具也会进一步完善。专家也在不断努力寻找从前期素材收集的拾音阶段到后期的编辑混录、母版输出、监听和播放一体化的解决方案。发展较早且相对成熟的游戏声音制作工具和方式也为VR声音的制作提供了很多思路和参考。未来的VR声音制作较现在一定会更加进步，在保证观影者有良好体验的同时，也能实现操作加工过程的便捷性，这对于VR电影的推广、发行也极为重要。

［1］李芳瑜.VR（虚拟）技术在电影制作中的实际应用及影响研究［J］.艺术科技，2016（9）：45-46.

［2］姜荷.VR虚拟现实技术下影像表现形式的可行性分析及对电影产业格局的冲击与挑战［J］.当代电影，2016（5）：134-137.

Analysis on the Production Process of VR Movie Sound

Luo Xing
（School of Software and Communication Engineering,Jiangxi University of Finance and Economics，Nanchang Jiangxi 330032）

VR film as a new mode of viewing,more and more known by the public.In order to achieve the best viewing effect,the film production process for the sound processing is also essential.VR film sound processing and traditional sound editing both have the same point and different points,simply VR film sound processing to be more complex,because to use the form of 3D surround sound,while viewing mode is generally used to wear Equipment playback,which requires the sound when playing the need to be able to achieve with the viewing staff of the action, perspective and so on to adjust,so as to maximize the viewers to achieve immersive perception.This paper summarized the whole process of VR film production,and give a brief introduction to some common tools and scope of application.

VR movie；VR soundproduction process；pickup sound；edit sound mixing

J933

A

1003-5168（2017）07-0017-02

2017-06-03

罗兴（1995-），男，本科在读，研究方向：软件工程。