赵 敬 梁 瑛
数字虚拟人一般被认为是拥有全新人物特性且与真实人类相似的3D 模型,或者是克隆真人创造的虚拟分身(Avatar),类似于数字孪生人类(Digital Twin Human)。受元宇宙热潮的影响,作为元宇宙数字原住民的数字虚拟人近年来受到广泛关注,全球新冠疫情导致非面对面接触需求的增加,更加速了虚拟形象被应用于各领域。日本和韩国作为文化内容强国,不仅长期积极跟进各类新兴信息技术,更是对于技术应用于内容有成熟有效的探索思路及成果。在数字虚拟人方面,日韩走出了根植于本国特色内容产业的发展之路。
日本引导数字虚拟人发展的政策可放置于“Society 5.0”和“Web3.0”的两个战略中来理解。Society 5.0 战略是日本2016 年提出的,旨在构建一个网络空间和现实社会、虚拟空间和物理空间高度交织的体系。现实世界中的所有数据都将被聚合成大数据,在虚拟世界中通过人工智能进行分析并返回现实世界,从而解决各种经济发展和社会问题。[1]2022 年,日本经济产业省在大臣秘书处开设了Web 3.0 政策办公室,旨在通过各界合作开发Web 3.0 的商业环境。随着虚拟世界成为新的个人用户界面,尤其是在Z 世代等年轻一代中,数字空间和资产变得更加重要,商业价值也将大幅增加。[2]建设虚拟空间是日本未来发展的重要一步,保障数字空间和资产极为重要,作为数字虚拟空间一员的数字虚拟人,在不断创造商业价值的背后,也需要保障交易安全。
韩国政府将数字虚拟人作为元宇宙发展的重要核心技术之一,在政策体系中通过人工智能建设、虚拟融合经济发展、元宇宙建设等各方面为虚拟人的发展创造条件。2019 年韩国提出《数据与人工智能经济振兴计划》与《人工智能国家战略》,打造人工智能创新生态系统,促进数据与人工智能的融合。人工智能技术是数字虚拟人得以发展的重要支撑技术,能够帮助数字虚拟人达到更为逼真、自然的效果。2020年韩国提出《虚拟融合经济发展战略》,推广XR 扩展现实技术的使用,扩大XR 基础设施和改进系统。XR 技术能够为数字虚拟人创建人机交互的虚拟环境,为数字虚拟人的生存提供虚拟空间。韩国在元宇宙领域的发展意图十分明确且积极,2021 年韩国提出“韩版新政2.0 推广计划”,宣布将推进元宇宙等新型超连接产业作为核心任务。[3]数字虚拟人由此确立了更为明确和宏大的发展空间。2022 年发布的《元宇宙新产业引领战略》提出要在2026 年前实现元宇宙的全球市场占有率第五位,支持约220 个元宇宙企业发展,发掘元宇宙典型应用案例50 个,衍生五项核心技术以确保技术竞争力,这五项核心元宇宙技术包括广域元空间、数字人、超现实媒体、实时UI/UX 以及分布式开放平台。数字虚拟人作为五大核心技术之一,将获得财政投资与人才培养方面的政策倾斜。
从核心技术层来看,除了韩国三星集团、日本索尼集团在显示设备、芯片等方面具有一定优势以外,在软件层面例如建模软件、渲染引擎、动作捕捉等,基本是国际先进厂商占据优势地位。日韩的数字虚拟人发展基本要依托于国际先进厂商。
从平台和制作层来看,主要包括视觉特效厂商和人工智能技术厂商,为数字虚拟人提供制作技术支持。韩国数字虚拟人产业比较集中的优势体现在视觉特效和人工智能领域。日本数字虚拟人产业以众多XR 设备、AI 技术厂商为主导,此外数字人类研究所等科研机构也会公布日本男性女性平均身高等数据帮助制作符合日本人外貌体型特征的数字虚拟人。
应用层主要是数字虚拟人如何结合实际应用场景。韩国应用场景主要分为品牌代言、偶像产业和游戏。日本数字虚拟人大多作为品牌代言人、虚拟网红、虚拟歌手或虚拟偶像,参与到泛娱乐活动中,包括产品代言、广告合作、拍摄宣传片、发布歌曲等。
日本拥有高度发达的动漫产业,在数字文化和虚拟产业上有深厚沉淀。日本的发展之路是与其发达的动漫产业相结合,开发动漫类数字虚拟人,扩大IP价值。从1982 年的虚拟歌姬“林明美”到1996 年的首位虚拟偶像“伊达杏子”乃至其女儿“伊达绫野”,日本在数字虚拟人的探索首先起源于2D 形象,里程碑是2007 年Crypton Future Media 利用Yamaha 的“VOCALOID”语音合成技术制作的虚拟歌手“初音未来”。她是第一个举办全息投影演唱会的虚拟歌手,获得了全世界的关注,是日本数字虚拟人发展历程中知名度最高的案例。
表1 日韩虚拟数字人产业链及典型企业
随着3D 建模技术、CG 渲染技术、人工智能技术的发展,出现了更为逼真的3D 数字虚拟人,例如日本首位3D 数字虚拟人“imma”。“imma”是由Aww 公司制作并在2018 年公开的数字虚拟人。作为虚拟网红,“imma”凭借强大的影响力与保时捷、宜家、迪奥等商业品牌进行合作,出现在时尚杂志、商业广告、商业发布会中[4],还发布了名为“Kanjo”的NFT,售价为5.1ETH(约15291.48 美元)。除了“imma”,Aww 公司还制作了“Ria”和“Zinn”等多位数字虚拟人。“Ria”的首次亮相就受到了日本国内外时尚杂志的追捧。“Zinn”是“Ria”的男朋友,同时也是“imma”的兄弟。目前,“Zinn”已经与各大品牌建立合作,并曾在2020 年东京乐天时装周上亮相。[5]2019 年虚拟现实技术公司1sec 推出日本首位男性虚拟网红“Liam Nikuro”,在设定中他出生于美国洛杉矶,是日裔,职业是音乐制作人和时尚模特,并与Supreme、Vans、NBA 华盛顿奇才队建立合作。 “Liam”还将计划通过Instagram直播直接与人互动。
日本在服务型数字虚拟人的应用和商业模式上进行了探索,如虚拟销售、虚拟陪伴、虚拟医疗助手等,其中尤以虚拟陪伴为特色,探索了全新的数字虚拟人应用。
虚拟销售员工的主要任务是为用户提供基本服务,例如与用户交谈、解决用户的疑问、指导用户购物、完成销售目标等,能够24 小时工作并出现在任何场景。Gatebox 公司开发了虚拟员工“Azuma Hikari”。Sompo Japan 公司利用该设备,自定义熊猫形象“Japanda”,将其布置在羽田机场和中部国际机场进行公关活动,吸引游客与虚拟角色进行互动,促进旅游保险销售,引起游客的共鸣。[6]2018 年科技公司Gatebox 开发“逢妻光”,是一个家用智能化全息机器人的形象。这意味着数字虚拟人可以朝着“虚拟陪伴”的方向不断升级语义识别、情绪识别等功能,在未来能够提供心情关怀、情感陪伴等新体验。
韩国紧密结合发达的偶像娱乐工业体系,推出了虚拟歌手、虚拟偶像团体、虚拟偶像选秀节目等独具韩国特色的偶像工业产品。在虚拟偶像应用领域,韩国数字虚拟人的发展独树一帜。
2020 年韩国出现首位数字虚拟人“Rozy”,设定为22 岁的年轻韩国女孩且永远不会变老,目标受众为“MZ 世代”。截至2022 年10 月24 日,“Rozy”的Instagram 粉丝量已达14.8 万。“Rozy”与Tiffany&Co、Calvin Klein 等品牌达成合作,代言金融、汽车、时尚等多领域品牌。2022 年2 月,“Rozy”公布了首支单曲Who Am I,拓展歌手业务。
2021 年亮相的“Han YuA”,是由全球娱乐公司Smilegate 和实时内容解决方案公司Giant Step 共同开发的虚拟歌手。“Han YuA”在2022 年2 月与YG K Plus 签约成为艺人,之后还成为广东玉米须茶和眼镜品牌Lapis Sensible 的广告模特。2022 年4 月12 日“Han YuA”正式公开自己的首张单曲I Like That,在MV 中与真实人类组成的舞团一起跳舞,动作神态都仿若真人一般自然。
除了开发单人虚拟偶像之外,韩国还开发虚拟偶像团体。例如Pulse9 公司开发的“Eternity”是一个11 人AI 偶像组合,每个成员都有不同的面孔以及独特的角色性格。SM 娱乐公司在2020 年公开4 人女团“aespa”,量身定做了各自的虚拟偶像形象,8 位成员共同参演歌曲概念短片和MV,一同进行舞台现场表演。2022 年Kakao Entertainment 公司打造虚拟偶像生存节目,尝试虚拟偶像新应用。
韩国在发展数字虚拟人时注意更接近真人感受,将动作捕捉技术等应用到改善主观感受,消除机械感数字感。Pony Games 公司推出了“Sunrian”——首个以“与过去年轻的我共存”概念制作的数字虚拟人。利用虚拟人脸与过去的“我”的图像进行合成,对面部进行去老化处理,从而实现过去的“我”与现在的“我”共存。同时利用35mm 胶片等工具,在3D人脸中营造出一种亲切感,来消除“恐怖谷”效应。[7]“Sunrian”目前有着稳定的社交媒体粉丝增长量。韩国数字虚拟人能够进行极为真实的舞蹈动作表演,完成复杂的舞蹈动作,肉眼几乎看不出与真实舞者的差别。技术已经能够支持数字虚拟人完成吃饭、参加采访等复杂动作。“Rui”是由D.O.B Studio 公司打造的女性数字虚拟人,她参与了一档YouTube 的访谈节目,在节目上她能够自然地吃泡面、与主持人对话,神态、动作、对话都已十分自然。
目前国内对于数字虚拟人的发展,中央和地方都出台了相应政策,其中具备顶层设计和宏观引导的政策如《关于推进实施国家文化数字化战略的意见》《虚拟现实与行业应用融合发展行动计划(2022-2026年)》等,都为数字虚拟人的发展创造了良好的政策环境。2022 年北京市明确出台《北京市促进数字人产业创新发展行动计划(2022-2022 年)》,是国内出台的首个专项支持数字人产业落地的政策。本文通过对日韩两国数字虚拟人产业的研究,对我国数字虚拟人的发展也具有一定启示和借鉴作用。
第一,在什么框架和角度下发展数字虚拟人,决定了其定位和发展潜力。日韩两国数字虚拟人产业有不同的发展定位以及发展框架,也具有不同的发展特色。日本是从虚拟现实的角度推进,韩国则以元宇宙战略带动发展,从发展后劲来看韩国更为积极主动。数字人产业不是孤立发展的,它需要在信息技术、经济、社会、文化等发展趋势当中,为其找到合适的定位。
第二,加强制作技术,突破核心关键技术。对日韩两国产业链的研究可以看出,在基础层的核心关键技术基本依赖于国际厂商,核心技术并不掌握在本国手中。国内数字虚拟人的发展仍要不断提高技术水平,突破核心关键技术,争取将技术话语权掌握在自己手中。不断扩展应用领域,加强平台建设,进一步扩大数字虚拟人的产业规模。
第三,依托强势优势产业发展数字虚拟人的应用方向。日本数字虚拟人最突出的发展特色是结合其发达的动漫产业,开发动漫类型数字虚拟人,通过制作漫画或游戏、吸引二次创作等途径扩大IP 价值,后期以虚拟网红和服务型数字人作为主要探索方向。韩国更注重依托于偶像娱乐产业,直接实现商业化。数字虚拟人是一项突出应用场景的技术,从国内发展来看影视、短视频与直播、网红、服务业,甚至国际传播都有数字虚拟人的应用空间。