科技
业界 互联网 行业 通信 科学 创业

登上2022江苏卫视跨年演唱会的「虚拟邓丽君」究竟是怎么实现的

来源:壹点网 2022-01-01 11:38:27
A+ A-
2022江苏卫视跨年演唱会落下帷幕。虚拟邓丽君(「Virtual Teresa」)惊喜现身,与周深同台演绎《漫步人生路》、《小城故事》和《大鱼》——这一跨越时空的震撼联唱,成为当夜引爆话题的核心所在。

据了解,虚拟邓丽君由好莱坞视效大厂数字王国通过虚拟人技术打造而成。融合机器学加持下的高阶渲染系统「Mystique Live」,该项曾经在《复仇者联盟》系列中赋予「灭霸」灵魂的技术逐渐向实时捕捉、实时渲染和实时驱动倾斜;运用单一消费级摄像头即可同步追踪细的面部表情,以塑造逼真且具备情感表现力的全实时化数字角色,虚拟邓丽君便是这一前沿应用的成果之一。

数字王国是感官体验虚拟化先锋,其代表成果包含斩获奥斯卡金像奖「最佳视觉效果」的《泰坦尼克号》、《美梦成真》和《返老还童》,以及缔造影史票房神话的《复仇者联盟》系列等。

虚拟人是伴随视效领域迅猛发展而催生的创作手段

搭载实时面部捕捉与实时面部渲染、机器学与高解析度三维模型创建、动画处理与视效强化,虚拟人技术多被用以创造逼真的数字角色和生物。

以数字王国对此15年的研发和应用为例——

2008年,《返老还童》中,饰演本杰明·巴顿的布拉德·皮特和他自身的外貌特征必须全程在线,这是导演大卫·芬奇的期待,他认为更换演员去诠释不同年龄的本杰明·巴顿,容易破坏观众对角色的情绪累积。这无疑给视效制作带来了极大挑战,数字王国负责提供可执行的解决方案来规避「逆生长」产生的违和感,例如光线明暗和面部的互动、呼吸时的面部起伏等一切反映角色状态的细节。艺术家根据布拉德·皮特的外貌设计了三种头部形象,采集了约 120 个真人表情,创造出了数以千计的外貌模型;随后一帧一帧地比较真人表演和表情数据的异同进行调整,比如眼角变化和嘴角扯动等…与虚拟人有关的技术由此诞生,并被应用于《创:战纪》(杰夫·布里吉斯分饰年届六十的凯文·弗林和不老恶棍克鲁)、《X战警:逆转未来》(魔形女)以及《美女与野兽》(野兽)等多部大热电影。

自2009年起,不甘把虚拟人局限在银幕的数字王国将此延伸至更为广阔的场景,构建了前所未有的沉浸式与实验型体验,这也是数字王国首创的商业模式。例如,Supreme选择联动的虚拟人Tupac Shakur——正式推出Spring/Summer 2020系列之前,这个动态不断的潮牌在自己的社交台上曝光了一支预告。穿着Supreme的Tupac Shakur以虚拟影像登场,成为短片的致敬主角。这段虚拟影像的原始版本出自2012年的科切拉音乐节,数字王国通过虚拟人技术把Tupac Shakur带回现实,献唱了《Hail Mary》和《2 of Amerikaz Most Wanted》,打破YouTube单日最高点击率纪录,成为彼时横跨娱乐、科技和金融等领域的现象级事件。

容量巨大且亟待释放的虚拟偶像赛道少不了技术牵引力

艾媒咨询发布的《2021中国虚拟偶像行业发展及网民调查研究报告》显示:截至2021年,虚拟偶像在中国本土的核心市场规模约为62.2亿元,同比增长79.6%;这一数字预计将于2023年突破200亿元,2021年至2023年年复合增长率则高达48.78%。

面对容量巨大且亟待释放的虚拟偶像赛道技术牵引力成为高位圈玩家占据「话语权」的关键。在起草关乎虚拟偶像的蓝图时,低成本、高时效的打造流程是其争相追逐的目标。

2018年以来,数字王国相继发布了自主研发的面部捕捉系统 Masquerade和高阶渲染系统Mystique Live。前者已推出赋能于剧集、商业广告、游戏影像、沉浸式和实验型体验等维度的2.0版本;标志着基于该系统的面部捕捉技术足以协助创作者将照片写实级的虚拟人引入次世代消费内容中,数字角色的表演深度和情绪传达由此可呈现在任意小屏幕上。后者的诞生更加速了虚拟人的实时输出。

及至目前,融合机器学加持下的高阶渲染系统Mystique Live,曾经在《复仇者联盟》系列中赋予「灭霸」灵魂的虚拟人技术逐渐向实时捕捉、实时渲染和实时驱动倾斜;运用单一消费级摄像头即可同步追踪细的面部表情,以塑造逼真且具备情感表现力的全实时化数字角色,虚拟邓丽君便是这一前沿应用的成果之一。

数字王国强调,预制作到实时输出的升级是一场针对虚拟人的巨大变革,这不但改变了数字资产的使用方式,技术的准确和自动化甚至让艺术家免去了纠正错误的步骤,促使其既能确保虚拟人达到前所未有的逼真效果,更大大简化了制作环节、缩短了制作周期(时间成本从需要超过一年交付压缩到短短几个月,甚至几周)。

如何打破虚拟世界的人人交互壁垒仍然是亟待攻克的挑战

如何打破虚拟世界的人人交互壁垒仍然是当下亟待攻克的挑战之一。正如刚刚提到的,深度学的引入促使虚拟人技术逐渐向全实时化倾斜。消费者借助单一消费级摄像头便可为自身定制适应虚拟面孔或角色。而虚拟人和虚拟现实的结合,则在一定程度上打破了开创了虚拟时代的人人交互壁垒,为其揭晓了全新的沟通方式,消费者因此能够凭借其虚拟形象在同一世界中「面对面」交流。

距离虚拟人登陆影视银幕已经过去了13年。虚拟人所呈现的形态或大或小,从机器感到拟人化,由情感探究至伦理审视…创作者围绕虚拟人的想象经历了如同现实世界的转变,唯一保留的或许只有人类和虚拟人之间的复杂关系。当仅具有妙个的非人类角色被赋予灵魂,甚至超越人类的感知,虚拟人会为人类带来什么?答案尚未揭晓,但有一件事是肯定的:它注定充满无限可能。

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

责任编辑:kj005
文章投诉热线:156 0057 2229  投诉邮箱:29132 36@qq.com

相关新闻

精彩推荐