苹果ARKit 30惊艳!借《Minecraft Earth》完美展示自动隐藏+动作捕捉沉浸效果

Xsens动作捕捉 2022-11-28 15220

在最新的产品与服务升级中,苹果AR平台的新版本——ARKit 3.0的推出,是一个值得探讨的亮点。

昨日的WWDC大会上,苹果通过《我的世界》开发者带来的AR游戏《Minecraft Earth》演示,来力证了这一切。这是一款堆方块、不断冒险的游戏,iPhone用户可以将自己的身体添加到Minecraft场景的3D空间中。融入增强现实之后趣味性十足,还可以多人互动游戏。

苹果ARKit 30惊艳!借《Minecraft Earth》完美展示自动隐藏+动作捕捉沉浸效果

ARKit 3具有自动隐藏功能(苹果称之为People Occlusion),它可以将人和虚拟对象放置在空间中,使它们看起来共存,真实的人似乎站在虚拟对象的前面。这就像一个实时的“绿屏”效果。在现场你会看到上前展示的观众无缝融合在了虚拟的Minecraft游戏之中,沉浸感非常强烈。

它还具有动作捕捉功能(Motion Capture),可以分析身体位置和关节,还可以让假的虚拟物体运动起来。

ARKit 3.0还可以同时使用前置和后置摄像头,可以在使用TrueDepth摄像头扫描面部运动或眼动追踪时使用虚拟头像。面向正面的TrueDepth相机一次最多可以跟踪三张脸。

需要指出的是,ARKit 3虽然强大,但你需要一台顶级的iPhone XS,iPhone XR,XS Max或带有A12处理器或更高版本的iPad Pro才能充分发挥其最大的“本事”。

现在,构建交互式AR体验已经变得更加容易,您可以使用内置的AR内容库。ARKit 3首先增添了被称为“RealityKit”的新花样——允许用户在XCode内进行开发,同时也支持在iOS设备上查看,而且支持调用更多API接口。另一项新特性“Reality Composer”则让AR内图像渲染更加真实,而且在相机效果和环境光影方面更自然。在这一特性支持下,真人将能够直接出现在AR场景中。不仅如此,Reality Composer还可以让开发者在开发过程中进行AR角色的动作捕捉。

AR已成为热门科技趋势之一,受到谷歌、Facebook以及苹果等公司的青睐。但它仍然是一个颇为小众的领域,对于主流用户来说更是一种新奇和噱头,开发者仍在试图找出杀手级的应用——苹果自然希望自己能够抢先分得一杯羹。

“对苹果的AR功能来说,这是关键的一年。”苹果软件业务主管Craig Federighi表示。

事实上,苹果一直在AR领域力耕不辍。去年,苹果公司展示了一款名为Swift Shot的游戏作为免费赠品,供开发人员演示在ARKit 2.0上运行的应用程序。而现在苹果ARKit 3.0又新增了全新升级的功能,这意味着它可以在真实人物的3D场景中插入动画。如果这些动画出现在一个人面前,手机就会实时隐藏人的一部分。

苹果称,其AR动画现在将通过照片级渲染、环境和相机效果、动画、真实世界、音频和Swift API集成得到增强。

在AR游戏《Minecraft Earth》的演示中,通过摄像头,玩家可以使用工具打造出AR城堡或者AR庄园。另外由于有动作捕捉技术,当你在现实中挥手时,游戏中自己的角色也会挥手致意,非常有趣。People Occlusion功能下,真人出现在AR场景中总是能够贴合正确的位置关系,互动沉浸感强烈。

AR已成为热门科技趋势之一,受到谷歌、Facebook以及苹果等公司的青睐。但它仍然是一个颇为小众的领域,对于主流用户来说更是一种新奇和噱头,开发者仍在试图找出杀手级的应用——苹果自然希望自己能够抢先分得一杯羹。AR游戏在今年大有将迎来爆发之势,毫无疑问——这次发布会正是一次契机。

此前美国专利局批准苹果一项AR专利申请时,许多人一度认为苹果会在WWDC推出AR硬件,如今ARKit 3.0的诞生,则更显苹果眼光之犀利。有分析认为,随着5G技术的应用,AR将迎来成熟期,ARKit无疑也将会有更精彩的表现。

The End