Unite 2019:《头号玩家》背后的虚拟拍摄技术

Xsens动作捕捉 2023-04-18 4628

5月10日,Unity一年一度的开发者盛会Unite 2019正式开幕。在结合VR/AR等新兴技术的同时,不断更新迭代且具有高灵活、实时、可扩展以及丰富的互动性的Unity,已于无形之中打破了常规的工业设计并为不同的领域带来了与众不同的沉浸式体验。Unite 2019超过百场的技术分享也向各行业展示了一年以来Unity经历的蜕变。

在其中比较受到关注的就是来自Unity的创意技术总监Ron Matin,他分享了2018年最火《头号玩家》、《银翼杀手2049》等科幻电影是如何使用并完成虚拟拍摄的。


Unite 2019:《头号玩家》背后的虚拟拍摄技术  第1张


在《头号玩家》、《奇幻森林》、《银翼杀手》、《灰猎犬号》乃至《阿凡达》背后都有一个公司的身影——DMM。Unity于2017年与这家仅有11人,但能力却非常强大的公司达成了合作。


Unite 2019:《头号玩家》背后的虚拟拍摄技术  第2张


“在整个合作过程当中,我们可以实现实时制作。我希望能够借此机会和大家分享一下他们的工具,而且现在的工具是前所未有的,可以帮助大家把自己的想法能够落地、变为现实,讲述自己的故事。”Ron说。

通过VR达成CG镜头实时渲染编辑

在电影制作早期,一旦将音频、视频、视觉特效等元素整合在一起之后,后期再做变化就比较困难。

“这是从2010年开始的,在微软做一些实验,用虚拟制作来做电影。大概是9年以前,可以看照片的质量。当时,他们用非常强大的电脑和大量的显卡一起进行实时渲染、光线追踪等。”Ron介绍到。


Unite 2019:《头号玩家》背后的虚拟拍摄技术  第3张


在电影《奇幻森林》中,就用到了动作捕捉技术和协同工作摄影机。这样可以实现CG实时混合,人们可以直接看到效果。也就是说,一些场景和创意确定之后,再捕捉演员在绿幕房间里表演。这些过程的后期处理非常庞大、复杂而且耗财耗力。

而在《头号玩家》的制作花絮中,我们可以看到,斯皮尔伯格能够直接带上VR头显,实时的进入电影中的场景。基于Unity强大的工具和后期团队的合作,可以实现对电影拍摄场景的即时调整。


Unite 2019:《头号玩家》背后的虚拟拍摄技术  第4张


“比如,这里有两个角色,本来是要在白天进行拍摄的,结果导演说今天晚上就想做调整,这也是可以实现的。还有,如果导演对这一镜头不是很满意,对于镜头走位不是特别满意,在Unity里面用DMM工具重新规划了镜头走向,这是场景的规模大小,导演觉得不合适,然后进行修改。能够找到电影里面的具体场景、具体时间点,然后进行一些修改。”Ron表示。

DMM到底能做什么?

DMM的解决方案包括:EXPOZURE虚拟电影制作、视觉预览、动作捕捉。而相对的工具有:Logos(节点图)、Hermes(通信网络)、Prometheus等。这些工具都可以在任何场景组合使用——无论是单独的个人电脑还是大型的动捕工作台。

Hermes是在各个工具之间传输数据的通信网络。

Logos是一个模块结合,每个模块都可以进行协同工作,在某个地方加入一个控制器或者说操作者,同时就可以把整个网络进行改变,来控制动作捕捉摄像机,当用户在摄影棚里面移动摄像机的时候,还可以对它进行精确控制。

Prometheus是云服务,当用户在一个区域进行工作的时候,还可以把资产上传到另外一个站点,所以说在不同地方的人可以看到这个站点的工作流程或者进度。

SCAN模块可以跟踪现实世界当中的摄像机,并且融入虚拟元素,使导演可以实时看到作品。在这当中,导演可以在整个区域里面进行移动,这样就可以说进行虚拟编码。


Unite 2019:《头号玩家》背后的虚拟拍摄技术  第5张


SimulCam模块是一个扫描模块,同时也可以和CG环境进行融合。在Unity当中也可以使用插件或者说支持模块。SimulCam和动作捕捉器可以进行协同合作,通过利用摄像机追踪演员动作,把虚拟和现实进行重叠。

LED Walls(LED 墙),比如说在摄影棚当中有一个很大的LED墙,我们可以把场景投射到LED墙上,当我们移动摄像机的时候,摄像机可以拍摄到演员的动作和背景。LED墙可以作为绿幕很好的替代品,因为它不需要进行大量的后期工作。

Ron依旧以《头号玩家》为例,说明其中一些工具的特点:

“在我们拍摄《头号玩家》的时候我们使用了HERMES网络,我们有一个虚拟摄像机和移动的AR、VR,以及动作设计、道具等等,所有的都是进行实时工作的,如果他们要对其中一个元素来进行修改,可以对单独的部分来进行修改。”

“他们要做的就是预览,移除或者做相应的改变,然后再进入另外一步。在动作捕捉摄影棚当中,我们可以利用这种新改变或者已经做出改变的设置来进行拍摄,这种实时拍摄是非常流畅的,同时也能够帮助创作人员节约大量的人力物力和时间。”

此外Ron还在现场利用Expozure制作了一小段影片。

87870原创文章,转载须注明来源及链接,否则将追究其法律责任!

The End