互动媒体京剧《真假美猴王》实验短片的艺术表现研究

摘要：互动媒体京剧《真假美猴王》实验短片集合了沉浸式虚拟场景、增强现实特效、同虚拟人物实时交互表演等综合技术运用场景，为了解、欣赏、体验戏曲提供了更多的可能。基于此，本文探索传统艺术与现代科技结合以增强艺术生命力的意义及其未来价值。

关键词：互动媒体技术;AR技术;京剧;《真假美猴王》

互动媒体技术最早被应用于游戏、军事、医学等实用领域，涉及演艺领域时，受人追捧的影视、歌舞类大型表演首先受到影响，但这仅是一个开始。近年来，互动媒体技术更是在话剧、戏曲等传统表演艺术形式中不断拓展。然而，传统表演形式极高的程式化、规范化的特點，反而成了与这些科技结合的限制，因此结合显得尤为困难，甚至牵强，所以局部或小范围的尝试很有必要，而京剧《真假美猴王》实验短片正是基于这样的思考产生的一部实验作品。

1 京剧《真假美猴王》实验短片的设计主旨

2020年可以说是互动媒体技术在舞台演艺领域的应用和尝试最为广泛的一年，并且在2021年的央视春节晚会上得到了集中的体现。例如，首次采用8K超高清视频进行演播，首次运用AR（增强现实）、XR（扩展现实）技术直播。千变万化的全景虚拟场景让演员可以根据屏幕画面与身边的虚拟元素互动。有专业人士表示，2021年春晚是有史以来最重视科技的一届，可称为“科技春晚”。正如艺术家谭盾所说，“今天已经是一个科技的时代，涉及科技美学的问题，这就是艺术甚至听觉和视觉（领域）要关注的问题”[1]。

基于互动媒体技术在舞台艺术方面的全面展开，我们将焦点聚集在如何将其应用于传统戏曲表演上，经过调研和前期设计，最终决定制作京剧《真假美猴王》实验短片，以真假美猴王的对打为核心，呈现一段基于互动媒体技术的京剧表演。这段表演集合了沉浸式虚拟场景、增强现实特效以及同虚拟人物实时交互表演等综合技术运用场景。最终，通过戏曲艺术与互动媒体技术的结合，拓展传统舞台表现的维度，进而探索现代科技助力传统艺术的新方式，增强传统演艺形式的表现力，使其更加符合时代审美，焕发新的光彩。同时，为戏曲艺术的普及与推广提供更加多元和便捷的平台，为更多的受众了解戏曲、体验和欣赏戏曲、热爱戏曲提供更多新的可能。

2 京剧《真假美猴王》实验短片中互动媒体技术的设计应用

《真假美猴王》的故事在我国家喻户晓，我国各传统戏曲剧种都曾表演过这个故事。不同的是，我们并不满足于传统戏曲中对于两个猴王的同度刻画，而是在短剧中赋予了假猴王更加丰富的含义，他不仅是取经路上的一个妖魔，还是对于取经人意志的考验，他的样貌与真猴王无二，与其说他是妖魔，不如说他就是孙悟空的镜像，是他心中的心魔，在取经路上不仅仅有“打怪升级”，更为艰难的是对信心的考验，悟空最终战胜心魔，坚定了取经的决心。有了这个理由，我们就为此段亦真亦假、魔幻的AR特效表现找到了恰当的立足点。

2.1 AR表现概念设计

此次研究的目标不仅仅是要在舞台上呈现沉浸的虚拟场景、增强现实特效，重要的是体现剧中真假两个猴王对打和斗法的即时互动感。基于此，我们最终决定通过诺亦腾动作捕捉技术达到这个目的，即用3D软件制作一个虚拟的美猴王，覆盖贴图和绑定骨骼之后，一位穿戴动作捕捉无限传感器的京剧演员在表演场地外控制3D虚拟猴王（图1），捕捉场外演员的动作信息，其身体的运动和姿态数据可以实时传输到Notch渲染引擎中，数据再从Notch传输到disguise服务器，最终再由disguise将数据信息输到LED屏幕，此时舞台上便会出现活动的虚拟美猴王。该模型所有的动作信息与场外京剧演员的表演动作完全匹配，虚拟美猴王实时呈现在舞台上，真猴王与虚拟假猴王就能实现实时互动了。

2.2 AR特效路线设计

这出戏的核心是AR技术的表现。传统京剧表演的动作程式比较严谨规范，舞台效果较为单一，当融入了AR特效后，如美猴王在翻腾或者舞动金箍棒时，会伴有各种炫酷夺目的特效，从而增强现场的美感和激烈程度。

我们现在看到的多数戏曲类视觉特效以“传统录制+后期特效”的技术为主。例如，录制好表演视频后，用Adobe公司的After Effects和Premiere等软件进行后期剪辑和处理。这种方法虽能方便地将现场录制和特效设计准确结合，但无法呈现表演的临场互动感，并且大量使用特效极易导致人们的审美疲劳，这与AR技术所营造的现场实时的直观感受相差甚远。

我们的目标是力求达到现场与虚拟人物表演和AR特效实时呈现的舞台效果，这就一定要避免“录制+特效”的方式。因此，实验采用Notch实时渲染引擎来制作完成AR部分的特效。Notch制作舞台效果优势突出，具有实时渲染能力和复杂的粒子生成、高度的场域、程序化、灯光及材质的设置和操控功能，并能将所有的AR效果向Disguise GX2播控设备进行无障碍数据传输，最终达到现场表演时在摄像机前端实时叠加AR特效的目的，观众就能够通过摄像机和输出屏幕实时观看有AR特效的京剧表演了。

2.3 实时动作捕捉技术路线设计

动作捕捉也是本实验剧的重要一环，如演员②配合演员①表演剧中的互动情节（图1）。虽然两位演员仍依据传统京剧动作程式表演，但两人的空间位置关系发生了根本上的改变。演员①扮演的真猴王在舞台中表演，观众可见;演员②则身着动作捕捉装备在舞台一侧表演，通过对他动作的跟踪采集，操控虚拟猴王模型在舞台上表演。这最大限度地呈现了真猴王的现场表现力，同时增强了虚拟猴王的虚幻感，从而产生了不同于传统京剧的表现形式（传统京剧中真假猴王都由真实的演员直接装扮表演），让人立刻感受到戏中“真与假”的表演暗示和意想不到的视觉效果（见图1）。

在动作捕捉技术操控方面，目前较多使用光线追踪技术实施，这要求在设有若干摄像机或布满摄像头的实体场域中进行，摄像头数量决定动作捕捉的精确度，比较典型的设备是OptiTrack，现场需搭起脚手架支撑摄像机，演员需穿着专门的动作捕捉服装表演。这种做法成本较高，并且特制的动作捕捉服限制了演员的临场表现和发挥，所以我们选择了采用无线数据传输模式的诺亦腾动作捕捉设备。这个设备的好处是比较轻便、易于携带，且不受场地和服装的限制，完全可以适应大多数应用场景[2]。在实验彩排时，采用了代级较低的Perception Neuron2.0系列，所以只能捕捉到演员大的肢体动作，细微的手势动作就无法捕捉了，因此就出现了虚拟猴王手型僵直、无法弯曲的情况，这有违人体动态规律，是预演中暴露出来的问题。接下来我们拟采用代级更高的诺亦腾设备解决这一问题，力图达到精确捕捉人物动态的目的。

相较而言，在预演阶段采用的动作捕捉设备是一款入门级有线动作捕捉系统，虽轻便易操作，但由于没有装载无线传输信号感应器，现场操作时常常会出现对演员动作捕捉不精确的问题。这就要求我们必须采用具有全身无线数据传输、低延迟高精度、高电磁耐受性等特性的高端设备。而诺亦腾专业级动作捕捉设备Perception Neuron Studio系列凭借其专有的嵌入式数据融合系统和人体动力学系统以及物理引擎算法，不仅可以使骨骼信息被精确捕捉到，也能为使用者提供平滑而准确的动作捕捉数据，完全满足以上的需求。

3 京剧《真假美猴王》实验短片的最终呈现

最终，在2021年3月6日的汇报演出中使用了诺亦腾专业级动作捕捉设备Perception Neuron Studio系列。此设备是诺亦腾公司的最新产品，比前几代设备更加精准，其在硬件、软件、算法、易用性及环境适应性等方面均有多项提升，并且增强了手部动作捕捉能力，解决了预演时虚拟模型无法识别真人手部弯曲动作的难题，这样在表演时就可以捕捉更多的细微动作，增强虚拟猴王的生动性了。

在预演过程中，由于惯性动作捕捉设备的特点，假猴王被真猴王棒击后，总是出现卡顿、无法消失的问题。因此我们在更新动作捕捉设备的基础上，最后又增加了一个AR粒子消散的特效，以表现虚拟猴王的“幻灭”效果，加强真猴王驱除心魔的寓意。

3.1 最终呈现中的VR特效设计

VR（虚拟现实）部分重点体现的是美猴王的内心活动及其跟场景、佛像的互动，此环节的特效更加多元，比如真猴王对佛像下跪时，伴随钟声佛像显灵，显现佛光效果，暗示佛祖对真猴王的内心的感应和指引。

再比如真假美猴王打斗环节的VR特效，在第一次棒擊假猴王时，假猴王变化出了一个“光盾”进行抵挡，这实际上是做了一个VR多排圆圈特效，从视觉上看上去很像一个“光盾”，同时也是为了与最终棒击假猴王湮灭的特效形成对比，特意区分两次棒击的效果，形成视觉反差，使打斗场面显得更加激烈和精彩，同时调节观众的情绪。

3.2 最终呈现中的AR特效设计

真猴王在开场时有一个翻跟斗的亮相动作，在此特意设计了翻滚的AR前景粒子特效，以强化演员翻滚的方向感和动势，增强了高难度动作表演的视觉效果。

为了体现美猴王高强的本领和调皮的性格，专门设计了多处跳跃和舞动金箍棒的动作，我们在此叠加了两层AR特效，一层是用Notch设计的旋转的黄色粒子特效，一层是用AE设计的带有通道的紫色电流特效。两层AR特效叠加丰富了魔法的既视感，将打斗场面和视觉效果推向了高潮。

3.3 最终呈现中的MR特效设计

打斗场面是整部短片的高潮，我们使用了VR和AR结合的MR（混合现实）特效，即背景LED屏实时渲染的红色旋涡粒子VR特效，混合叠加在前景层围绕假猴王旋转的AR利剑动画特效。两种不同的视觉特效穿插在一起，给打斗场面增加了更多的即时互动感和强烈的视觉感受（见图2）。

可以说，最终整部短剧的排演克服了预演中出现的大多问题，最终达到了各种互动媒体技术的一个极优的呈现，这对于全体课题组成员来说是最好的激励。当然，作为一部实验作品，其中还存在很多不足和缺点，比如视觉场景的优化不够、石头和地面缺乏材质和肌理感，虚拟美猴王造型的制作还显粗糙，骨骼绑定和UV贴图的真实性与精细度也有待提高，以及各种特效的进一步优化和处理，我们将会在接下来的工作中逐步解决和完善此类问题。

4 互动媒体技术与戏曲艺术融合的展望

今天，随着新媒体时代的来临，现代舞台迎来了大的变革和机遇，这给予了新科技与传统艺术融合无限的发展前景。我们已经可以看到，VR、AR、MR，乃至XR等技术在很多的现代舞台艺术中被频繁应用，从其中优秀者中不难看出它在未来的应用价值。因此，我们应该在传统舞台艺术中大胆地进行此类技术的尝试与创新，用符合时代审美的新技术达到弘扬传统文化的目的，为传统戏曲注入新的活力。

当然，我们在热情尝试的同时还要时刻保持一种理智而冷静的研究态度，避免在创作中对新科技的刻意而生硬的应用，这样只会破坏传统艺术本来的美感，从而适得其反。正如京剧大师梅兰芳曾提过的“移步而不换形”[3]，要使戏曲艺术随着时代发展而不断进步，发扬和升华其精神内涵与意象之美。这就要求我们艺术科研人员要不断地加深自己在传统文化方面的底蕴和修养，同时积极主动地了解和学习当代新的演艺科学技术，掌握这些新技术的应用模式和表现特点，使其有效地融合于传统文化。

5 结语

互动媒体京剧《真假美猴王》实验短剧从开始的创意、剧目的选择与策划，到前期排练、中期合练与修改，再到最终短剧演示摄录完成历时一年多，是创作团队共同努力的成果。期间，问题不断地出现和被解决，最终团队取得了较为理想的呈现结果。

这次小小的尝试让大家深刻地感受到了新的互动媒体技术带给传统戏曲艺术不同于以往的观看感受和体验。它极大地拓展了传统舞台的呈现形式，利用数字互动媒体技术的数字化表现，构建了炫酷的舞台效果，强化了舞台艺术形象，烘托了现场氛围，使观众在观演时获得了更具有时代感的审美体验。因此，小到创作小品，大到创作剧目，与互动媒体技术的结合都值得积极尝试和探索，这非常有利于戏曲艺术在当代的推广和发展，也势必会推动一种全新的戏曲表现形式的发展。

参考文献：

[1] 刘彤.春晚不好看了？牛年春晚借力科技焕发新机[J].人民邮电，2021（02）：1.

[2] 从动作捕捉到虚拟现实——诺亦腾的成长之路[J].互联网经济，2016（12）：42-43.

[3] 程从梅.戏曲文化传播中公共交互媒体艺术的设计研究[D].北京：中国戏曲学院，2018：1.

作者简介：张晓华（1978—），男，山西大同人，硕士，助理研究员，研究方向：数字艺术与设计。