陶 婧
近年来,5G、AI、XR 等技术有了迅猛的发展,国家的“十四五”规划和2035 年远景目标纲要中也号召“加强关键数字技术创新应用,打造一批有影响力、代表性的文化品牌”。
创新技术的合理应用能够扩展文艺的表现形式,增强文艺的感染力。艺术和科学的结合可以把想象中的画面变为现实,用富有冲击力和穿透力的视觉语言带来新的视觉盛宴。融合创新技术手段,可以实现对传统节目的创造性转化和呈现,可以为大家打造出富含传统文化底蕴,但又极具科技感和沉浸式氛围的文艺作品。本文将主要介绍目前发展比较迅速的两项技术——XR 和360 自由视角技术在江苏卫视2022 年春晚中的应用。
从2020 年开始,在舞美和节目制作领域,XR成为比较热门的一项技术。比如,中央广播电视总台2021 年春节联欢晚会首次对XR 技术的应用进行尝试,通过“云舞台”的方式让无法到场的周杰伦、刘德华“出现”在现场。2021 年3 月26、27 日晚,爱奇艺THE9“虚实之城”沉浸式虚拟演唱会作为全球首个XR 直播演唱会,全程表演应用XR 技术呈现。2021 年的全新季播综艺《国家宝藏·展演季》的舞美视效采用XR 技术将节目的舞台表现力推向极致,带给了观众一段星汉灿烂、一眼千年的空间旅程。
XR(Extended Reality,扩展现实)是AR、VR、MR 等多种形式的统称,是指通过计算机技术产生的一个真实与虚拟组合、可人机交互的环境,实现虚拟世界与现实世界之间无缝转换的沉浸感体验。其中在节目中应用比较多的是AR 和MR。AR(Augmented Reality,增强现实), 把难以体验到的虚拟信息生成3D 内容叠加到真实环境中,被人类感官所感知,从而达到超越现实的感官体验。比如被大家熟知的曾出现在2017 年江苏卫视跨年演唱会中的“大鲸鱼”就是一个典型的AR 作品。而MR(Mixed Reality,混合现实),将相机追踪以及实时内容渲染技术进行结合,创造了一个沉浸式的虚拟环境,将人置身于虚拟和现实的混合世界中,产生一个新的可视化环境,环境中同时包含了物理实体与虚拟信息。
相比于原先运用较多的绿幕拍摄+ 后期抠像制作,XR 工作流程可以加强演员在表演时的沉浸感,还可以实时与虚拟内容互动,能够提高在场景中物体表面光线的真实感。它的实时呈现让“所见为所得”。
从执行操作层面来说,现在的XR 是一套完整的工作流程,需要许多懂XR 工作流程的团队共同配合来完成,包括导演、导播、摄像、内容制作、灯光、演员的共同努力。在拍摄方面,实时LED 背景可以让摄像和灯光师不再只是根据经验和想象来推测画面和光照,演员也不会出现晕绿的情况。而且拍摄时,通过强大的引擎和服务器进行渲染,实现了对实时信号进行实时切换,XR 舞台可以灵活调整、转换场景。导演对画面也有了更大的控制权,在整体制作流程上是一个质的飞跃。
360 自由视角技术,最早为大家熟知是在科幻电影大片中,比如,应用360 度自由视角技术实现“时间凝结”的“子弹时间”。它是指运用环绕机位拍摄手段及多画面智能合成技术,便捷地实现时间凝结、旋转视角等一系列影像特效。
英国节目《立方体》比较早地应用了该项技术。节目是在一个透明立方体中玩各种游戏,用360 自由视角技术定格精彩游戏瞬间。后来加拿大的舞蹈节目《舞蹈革命》中,用环绕舞台的摄像机捕捉舞者动作,呈现给现场观众,评委们以此决定参赛者的成绩。
在发展过程中,拍摄的器材也由一开始的单反升级成4K 甚至更高清的摄像机。环绕机位由原来的圆形发展成圆形、蝶形等多种造型。
江苏卫视2022 年春晚中综合运用了XR、360 自由视角等多种创新技术,在内容创意、技术研发、拍摄录制、后期制作、宣传推广等各个环节发力,让科技元素为节目内容赋能,以更有创意、更有层次的节目内容和形式,让观众更直观、更沉浸式地感受节目的魅力。
在江苏卫视2022 年春晚舞台上,XR 技术不仅突破了舞台物理空间的限制,还设计了更有层次、更有沉浸感的场景,虚实结合,实现跨空间的奇妙互动,带给观众新鲜饱满的视听享受。
在硬件上,XR 舞台对屏幕的材质、像素,对舞台的形状都有要求,需要有专门的XR 录制区域。为此,节目组在主舞台之外,还特别搭建了一个XR 舞台。这个XR 舞台和传统实景舞台通过一块地屏有机结合到一起,不仅实现了功能性的分区,而且有些节目特意设计了在XR 舞台和实景舞台的转换,视觉上也实现了两种舞台一次全新的融合尝试。比如,《骁》的节目形式是歌曲演唱《骁》和钢琴演奏《黄河》的结合,演唱由歌手在春晚的实景舞台呈现,当从演唱切换到演奏的时候,镜头先是由实景舞台切换到了演奏家张浩天的特写,再切换镜头的时候,已经切换成了XR 背景的磅礴山河,无限延伸的虚拟和LED 实景结合的XR 混合背景呈现出广袤无垠的空间感,让人觉得张浩天好像在崇山峻岭间演奏,这和大气的钢琴曲结合在一起,顿时给人一种浩瀚壮阔的氛围。再比如《妈妈的吻》这首歌曲,为了体现“妈妈的少女时代”这个主题,XR 主体造型选取了“梳妆台”这个元素,体现了每个母亲都曾经是少女,都曾经爱美、追梦,都曾经有过风华正茂的青春年华。同时将很多妈妈年轻时的照片环绕在梳妆台周围,结合XR 呈现出的深邃空间感,营造出一种时光倒流、青春回响的意境。
对于制作团队来说,除了内容创意之外,技术细节的把控也很关键。因此节目组配备了XR 素材制作、XR 导播摄像团队、灯光团队、后期制作等多个技术工种来保证高水准的视觉呈现。比如,由于XR 技术的特性,它对舞台灯光提出了更高的要求,当表演者非常靠近大屏的时候,照亮表演者的灯光很容易照到背景LED 屏上,导致背景屏上出现光斑,从而影响整个XR 效果。因此春晚灯光团队通过多次彩排,设计、调整灯光,来规避这种问题的发生,保证XR 整体效果的呈现。
2022 江苏卫视春晚将360 自由视角技术运用到舞蹈节目《鎏光》中,带来了令人耳目一新的舞蹈视觉。舞蹈《鎏光》,以世界非物质文化遗产“南京云锦”为主题,展现云锦的织造技艺。舞者演绎云锦绣线,展现绣线旋转、缠绕、经纬交织到云锦作品成型的过程。在舞蹈呈现过程中,结合XR、360 自由视角等技术创新,通过艺术和科技的结合,营造一种古典又不乏时尚气息的舞台表现力,带给观众一段灵动华美的空间旅程。
为此,节目组特别定制了一个直径为16 米的圆形框架,架设在XR 舞台上。为了不影响XR 舞台上其他节目的演出,节目组创造性地将圆形框架设计成可升降的。演出其他节目时,将圆形框架升到演播厅上方接近灯架的地方。调试设备和正式拍摄的时候,再把圆形框架降到地面上。360 自由视角技术团队在圆形框架上架设了130 台摄像机,以便能够从任意方向进行旋转拍摄并呈现丝滑的视觉效果。
舞蹈编导和两位领舞设计了一些技术含量较高的双人动作,也设计了扔抛绸缎的动作,通过这些动作意象地表现云锦织造过程中经纬线交织的过程。舞蹈演员的高难度动作和舞动的绸缎,带给了观众或柔美或动感的视觉美感,而360 度自由视角正好可以将这一时刻进行“冻结”和延长,捕捉并延展舞蹈动作最优美或者最有爆发力的瞬间,并且以丝滑的镜头旋转,体现舞蹈动作的张力和穿透力。
此次360 度自由视角的技术呈现是由江苏省广播电视总台自主研发,整个研发组共10 人左右,覆盖设备部署、软硬件调试、节目录制、后期制作等多个环节。为了优化最佳的流程和呈现最完美的效果,据制作团队的工作人员介绍,“正式拍摄中,在舞蹈演员腾空之际,拍摄表现‘时间凝结’的动作,并对这一刻的360 度画面进行反复观看确认,展现出最佳的艺术效果” 。
技术是一把双刃剑,我们对创新技术的应用不是为了让新技术突兀地存在,而是为了让技术完美地融合在作品中。正如导演李永明所说:“我们还是希望观众‘看不到’技术,看到的是我们的作品。”这就需要节目导演去更深入地钻研技术,了解这种技术呈现的优势和弱点,在节目创意阶段就取长补短,放大技术的优势,规避技术的弱点,让技术和内容完美融合,真正地为节目赋能,实现艺术和科学的珠联璧合。