什么是虚拟制片?

由Framestore提供
过去几年,在整个媒体和娱乐行业,从真人影视作品,到动画内容,再到广播和实况活动,在一系列新型制片工具和工作流程的推动下,故事创作手法不断呈现出了崭新的面貌。

传统技术与利用实时游戏引擎的数字创新融合在了一起,这种现象被称为“虚拟制片”,无论是制片人和导演,还是特技协调员和机械操作员,每个人都深受其影响。

但虚拟制片究竟是什么?它和摄像机内视效是一回事吗?预演、创意预演、特技预演、技术预演和后期预演又是什么?你要理解的东西有很多!

在这篇实时技术简要介绍中,我们希望揭开所有这些术语以及其他一些概念的神秘面纱,并探究在不断发展的虚拟制片领域,虚幻引擎正发挥着怎样的作用。我们还会探讨这套新型电影制作技术所带来的优势。
 

什么是虚拟制片?

虚拟制片能够利用技术将数字世界与物理世界实时结合在一起。它是传统电影制作技巧与现代技术的融合,有助于创作者实现其愿景。

多年来,广播行业一直通过虚拟制片这种方式,为体育节目和选举报道等现场直播制作实时画面,这类节目的传入数据会不断变化,画面必须动态更新。

如今,围绕虚幻引擎等实时游戏引擎产生的技术进步意味着,除了为实况广播和活动创建最终像素外,在动画内容的创作过程中,以及在贯穿了片场主要拍摄工作前期、中期和后期的实景电影制片过程中,写实或风格化的高保真实时图形都已成为至关重要的一部分。
 

不同类型的虚拟制片

虚拟制片包括预演、创意预演、技术预演、特技预演(也被称为动作设计)、后期预演和现场合成(也被称为协同摄影),还包括虚拟勘景、VR外景勘景和摄像机内视效(也被称为现场虚拟制片)。稍后,我们将在本文中逐一对它们进行探讨。
 

虚拟制片与传统的电影制片有何不同?

传统的电影制片从前期制作(提出概念和规划),到制作(拍摄),再到最终的后期制作(剪辑、调色和添加视效),是一个线性的流程。由于要到流程的最后阶段才能看到一切整合而成的结果,所以做出修改非常耗时费钱,有时候,你甚至不得不从头开始。这在很大程度上限制了电影制作者灵活做出创意决定的能力。
相比之下,虚拟制片模糊了前期制作和最终结果之间的界限,使导演、摄影师和制片人能够在制作中途更早地看到成片画面,从而减少了迭代的时间和成本。如此一来,他们可以仔细雕琢叙事手法,展现他们的创作意图,最终省时省钱地讲出更好的故事。

使用虚拟制片实现可视化

无论是实拍元素,还是视觉效果或动画内容,通过虚拟制片,电影制作者能够在制作前、制作中和制作后以可视化方式查看其影片的方方面面。这些可视化过程包括:
  • 预演
  • 创意预演
  • 技术预演
  • 特技预演(也被称为动作设计)
  • 后期预演
  • 现场合成(也被称为协同摄影)
 

预演

预演即“预先排演”的简称,实际上,它已经以某种形式存在很长时间了,甚至早于现代虚拟制片。3D预演是紧跟在手绘故事板后面的一个步骤。

简而言之,它是指在开始拍摄前,使用计算机生成的图像(CGI)粗略地演示主要视效和动作,以便确定剧本的视觉呈现方式,并对不同情节做出尝试。缺少对话的动作场景也可以通过预演详细列出推动叙事向前发展的故事元素。

预演为需要现场拍摄的内容提供了参考。当工作室为部分镜头或全部镜头的制作合约而相互竞争时,预演也可以充当这种视效竞标的依据。
由The Third Floor提供
最初,低分辨率角色和资产在被剪辑到一起之前,会经过离线渲染软件包的快速渲染。如今,像虚幻引擎这样的游戏引擎能够实时渲染全分辨率的逼真资产,电影制作者可以看到他们的构想更加生动地呈现在自己眼前,并即时迭代,从而做出更好的决定。

你可以在下面了解到,Zoic Studios如何在虚幻引擎中借助预演的力量,在电视剧的制作周期内以电影级质量为华纳兄弟公司的连续剧《超人与露易丝》制作精彩纷呈的视觉效果序列。
  

虚拟摄像机在可视化中的作用

预演以及虚拟制片的许多其他阶段都可能涉及到虚拟摄像机(VCam)的使用。这项技术允许电影制作者通过外部设备(通常是iPad)操控虚幻引擎中的摄像机,并记录摄像机的运镜。最终得到的摄像机运镜可以用于安排走位,作为手动调整的起点;也可以提供景深预览,帮助人们确定实景拍摄时的摄像机设置;甚至还可以作为最终镜头,直接进入后期制作阶段。

许多电影制作者发现,比起通过软件用户界面进行交互,他们更加喜欢和熟悉能够触碰得到的物理设备,而这种方式也将在数字世界中产生更真实的摄像机运镜。
 

创意预演

创意预演是一种通常在项目获批之前展开的预演形式。其目标是在利益相关方承诺做出重要投资之前,通过展示项目的预期外观和感觉赢得他们的认同。

通过使用虚幻引擎,许多项目顺利地完成了推销,例如克里斯托弗·桑德斯的2020年版《野性的呼唤》(虚幻引擎帮助这个险些被腰斩的项目起死回生),以及独立电影制作者HaZ Dulull的系列动画《Battlesuit》。你可以在下方看到HaZ阐述他的想法。

技术预演

技术预演用于事先为实际拍摄和数字拍摄确定精确的技术需求,以便在制作当天投入相应的人员和设备(包括摄像机、吊臂和运动控制装置)。技术预演可以用来探究镜头设计在特定位置范围内的可行性(例如吊臂升起到哪个位置,甚至它是否适合这片布景)以及相关虚拟元素的调度。它还可以用来确定实体布景需要在多大程度上与数字布景的延伸相融合。

比起预演,技术预演通常会更多地使用基础资产,因为它的目标不是用来做出创意决定——理想情况下,创意决定应该在这个阶段之前做出。它真正的价值在于为工作人员提供可以信赖的实用信息,使拍摄更有效率。
 
由PROXi Virtual Production提供

特技预演/动作设计

特技预演,也被称为动作设计,是指通过将预演和技术预演结合在一起,设计真人特技动作和动作序列。为了让动作设计师可以准确地编排镜头,获得创意方面的认同,并充分保障特技人员和表演者的安全,特技预演对精确度的要求很高。

虚幻引擎支持模拟真实世界的物理法则,使特技人员能够排演和表演尽可能充分符合现实的模拟镜头。这大幅提高了制作期间的效率,从而减少了拍摄的天数。

请聆听PROXi Virtual Production创始人Guy和Harrison Norris的陈述,了解他们如何使用虚幻引擎的尖端技术在《自杀小队》等电影中进行动作设计和技术预演。

后期预演

后期预演在实际拍摄结束后才开始。当需要为实拍镜头添加视觉效果,但这些镜头尚未完成(在某些情况下,可能甚至尚未开始拍摄)时,后期预演就有了用武之地。这些镜头通常包含一个绿幕元素,它在成片中会被CGI取代。后期预演通常会复用对视效元素的原始预演,将其与现实镜头结合起来。

后期预演可以向视觉效果团队展示电影制作者的构想,也可以为具有密集视效的未完成镜头提供更精确的版本,供剪辑师在组装剪辑时参考。它能够为电影制作者提供视觉参考,让他们在最终视效远未完成时对剪辑做出评估,并为获得所有利益相关方的认同提供保障。它甚至有助于确保早期试映片更加充分地体现最终成片的拍摄意图。
 
左:后期预演;右:成片。由SOKRISPYMEDIA提供。

现场合成/协同摄影

还有一种可视化类型需要讨论。现场合成是指将实拍镜头与作为参考的CGI表示符号结合在一起,从本质上讲,它与后期预演类似;然而,不同的地方在于,它发生在拍摄过程中。很遗憾,它的名称不叫作“中途预演”!

詹姆斯·卡梅隆在拍摄《阿凡达》时,最早在片场使用现场合成技术,他为此创造了“协同摄影”这一术语。通过这种技术,电影制作者能够在拍摄期间看到CG元素的表示符号被合成到了实拍镜头中,这便于他们对拍摄的内容产生更清楚的了解。

它通常用于以可视化方式展示由表演捕捉数据驱动的CG角色,这些数据可以是现场捕捉的,也可以是预先录制的,甚至是二者的结合。表演捕捉是动作捕捉的一种形式,演员的表演(包括微妙的面部表情和手指动作)会被专门的系统捕捉,然后转移到CG角色上。许多虚拟制片过程都涉及表演捕捉的使用,Netflix的节目《Dance Monsters》就是一个将表演捕捉与现场合成结合使用的案例。在罗伯特·泽米吉斯的《欢迎来到马文镇》中,它也取得了很好的效果。

虚拟勘景

虚拟勘景是虚拟制片的另一个组成部分。这是一种允许导演、摄影师和制片设计师等关键创意人员在虚拟现实(VR)中审查虚拟地点的强大手段,让他们可以沉浸在布景中,真实感受其规模。

它能够帮助团队设计极具挑战性的布景并编排复杂的场景,你可以在下面的《疾速追杀3》视频中看到它在这方面的使用案例。
虚拟勘景也常用于布景:团队能够在以人类尺度体验环境的同时,移动周围的数字资产。

虚拟勘景通常是一种协作完成的任务,多个相关方将同时参与审查。他们可以一起考察布景,确定并不时地标记出他们特别关注的区域,供拍摄一些特定场景使用。他们还可以指明哪些地方应该建造实体道具,哪些道具可以是虚拟的。

VR外景勘景

VR外景勘景是虚拟勘景的一种延伸。它适用于选用了真实布景场所的情况。团队会事先派一名成员使用RealityCapture等摄影测量工具捕捉场景,然后其他团队成员就可以在虚幻引擎中使用虚拟勘景技术进行远程审查。这样可以节省大量出差时间和费用,在需要从多个位置中做出选择的情况下,它尤其有用。

什么是摄像机内视效(ICVFX)?

摄像机内视效,有时也被称为现场虚拟制片或OSVP,它是虚拟制片的一种形式,在《曼达洛人》等知名节目中得到了充分运用,近年来引起了媒体的广泛关注。通过这种技术,人们可以使用巨型LED舞台或摄影棚拍摄实景,舞台或摄影棚的墙壁和天花板上将显示由实时引擎生成的环境。完全包围了舞台的半球形穹顶是最精巧复杂的LED摄影棚,而相对简单的舞台可能仅包含半个立方体,甚至只有一面墙。

它不仅仅是替换背景,实时场景具有实况性和互动性,能够保持与摄像机的相对运动,从而创造出逼真的视差效果,让一切都能以正确的视角显现。LED显示屏还会在演员身上投下逼真的光照和反射,使他们看起来完全融入到了场景中。
由Alter Ego、Pixomondo、William F. White、Virtual Production Academy和Caledon FC提供

摄像机内视效能够带来哪些好处?

在传统制片中,演员在绿幕背景下进行拍摄,实拍镜头将在最后阶段与计算机生成的图像(CGI)相结合。这种绿幕背景可以在后期制作中被替换为数字元素。演员和导演必须凭空“想象”最终环境。相比之下,通过现场虚拟制片,演员和工作人员可以在环境中工作,这让提供真实可信的表演和做出更好的创意决定变得更容易了。

在某些情况下,对于简单的视效镜头,摄像机内视效可以直接生成最终像素:实拍镜头将与CGI相结合,通过摄像机的拍摄产出成片画面。这省去了后期制作步骤,节约了时间和金钱。这些画面被称为摄像机内成片。

在其他情况下,通过摄像机内视效,原本中等难度的镜头如今只需要少量的后期处理工作;即使是要在后期阶段完成困难镜头,所耗费的时间也比以往少很多。

在LED舞台上工作的另一项巨大好处是,人们可以轻松控制光照和当日时间,无需等待黄金时刻或理想的天气。实现连贯性也变得更容易了:无需花费几小时,只要几分钟,就能够以完全相同的状态重新调用场景。

虚幻引擎内置了一套完整的工具,为摄像机内视效提供了支持。你可以在下方看到一些站在最前沿的电影制作者对它做出的测试。

虚拟制片资源

我们短暂地游览了虚拟制片和摄像机内视效的精彩世界,希望这趟旅程让你感到愉快,并有助于你更容易地理解这一切。还想进一步了解虚拟制片吗?请查看下面列出的一些便利资源。

虚拟制片实践指南

《虚拟制片实践指南》是一套免费资源,包含两卷,它深刻地探讨了这项技术将如何彻底改变影视制作的艺术和技巧,也针对如何在你自己的制片中使用这项技术提出了一些实用建议。

Epic开发者社区

如果你想提出疑问或回答难题,展示作品并从他人那里汲取灵感,Epic开发者社区将是你的首选之地,它还提供了100多个小时的免费学习内容。对于有兴趣了解虚拟制片的创作者,以下资源尤其有用:  
 

虚拟制片中心

我们的虚拟制片中心展示了来自全球各地的新闻和案例研究。请在那里了解关于虚拟制片的最新信息、深刻见解和灵感。

虚拟制片术语表

虚拟制片术语表是美国视觉效果协会、美国电影摄影师协会、Epic Games和Netflix投入资源建立的,在你探索这一领域时,它可以很好地帮助你理解可能遇到的术语。

更多实时技术简要介绍


实时技术简要介绍

广播动画是什么?

实时技术简要介绍

实时光线追踪是什么?

实时技术简要介绍

增强现实是什么?