
虚幻引擎的实时渲染与3Lateral的Meta Human Framework©体积捕捉、重构和压缩技术相结合,实现了这一突破性的数字人物表演。体积数据是通过在受控光照条件下多角度捕获一系列Andy Serkis的高质量HFR影像而生成的。3Lateral的流程包括各种捕获方案,其中有的着重于几何结构,有的着重于外观,还有的着重于动作。所有这些输入数据都被用于生成Andy Serkis的数字形象,以及用于提取表现肌肉收缩的通用表情语言,使得表演如此逼真。
观看视频
观看视频 在由此产生的实时电影中,栩栩如生的数字版Andy Serkis背诵了《麦克白》中的台词,其影像和表演质量与真人表演几乎别无二致。这段《麦克白》的表演数据还被用于驱动3Lateral的虚拟数字生物Osiris Black,以演示同样的捕获流程可以如何驱动两个迥然相异的角色。自愿参与演出的Serkis是这个概念验证演示最理想的主角,因为他不仅具有出色的表演天赋,而且对于数字表演流程和技术有着深刻的认识和丰富的经验。
观看视频
为了展示这些庞大的数据集,3Lateral使用语义压缩技术在保留数据完整性的同时缩小了数据集,从而能够将表演重定向到另一个数字角色上,同时轻松地调整目光和细微的表演差异。这种令人难以置信的高保真捕捉数据经过离线预处理后形成数据集,就可以加载到虚幻引擎中以实现实时体积表演了。
虽然这个令人惊叹的概念验证成就目前仅限于专业视觉效果领域,但是有朝一日,照片般逼真的数字化人物也可以与机器、人工智能和混合现实应用一样出现在互动娱乐、仿真、研究、非口头沟通等领域。
观看视频