HoloLen被用来实时预览动捕表演
——创始人微信——
ovalplus
(YiViAn 2016年9月14日)动捕技术的使用在VFX(视觉特效)领域非常普遍,而动捕技术专家及开发者Jasper Brekelmans希望通过一个新项目带来动作捕捉表演的实时AR预览,让用户对叠加在现实场景中的舞蹈进行实时预览。
电影和电视节目中的视觉特效都会使用到动捕技术,对人类演员动作进行数字化处理,整个行业都已经对此习以为常。但开发者Jasper Brekelmans正在使用微软HoloLens进行实验,希望让导演和演员们实时预览到叠加在现实中的数字影像。
在上一篇YiViAn的报道中,我们提及Brekelmans正通过Autodesk的三维动作软件MotionBuilder来在HoloLens上打造一个AR集成功能。
而现在Brekelmans正与一个名为The WholoDance project的组织合作。这个组织致力于通过数字技术来捕捉舞蹈的艺术,以作为文化和研究用途。Motek Entertainment则提供了动捕技术和具体设备, 让Brekelmans成功打造出一个可实时将动捕数据传输到HoloLens头显上的方法,并将舞蹈演员的数字化角色叠加在现实场景中,所有这一切都是在3D空间中实现。
对Brekelmans来说,这是他之前工作的自然发展过程。他曾使用这个技术将桌面端Autodesk MotionBuilder的数据传输到微软HoloLens头显中,在动捕舞台上将一个真人大小的3D角色可视化出来。
“将HoloLens头显递给舞蹈演员时,我们注意到的第一件事情是她们立即就被迷住了。”Brekelmans,如是说,“在那之后,她们就像专业运动员一样马上开始分析自己的表现。她们可通过真人大小的3D影像来观察到在保持平衡过程中臀部移动和步法的细微差别,这比2D屏幕更为清晰和明显。”
Xbox控制器为用户提供了各种控制,如补偿物理空间中的3D角色、切换各种不同的可视化效果、以及调整视觉参数。由于需要大量的变量控制,所以他们选择了一个熟悉的设备(Xbox控制器),而不是通过注视操作、轻触虚拟屏、和语音控制这些HoloLens常用的操作方式。
Brekelmans说:“尽管HoloLens是专为投射出与用户保持一定距离的全息影像而设计,但我们仍然让演员佩戴设备进行实验。因为这可以让她们在表演的过程中观看到叠加在手部和腿部的图形。对这个目的来说这并不是理想的显示技术,但这个实验可为将来提供一个新的思路。”
那么这个试验性技术在未来可能会应用在哪些领域呢?YiViAn愿意看到应用到其他设备上,包括连接到桌面电脑并可利用其高端GPU的设备。还有视觉特效场景、可视化3D角色、设置画面拓展、以及工作室内,甚至是外景拍摄。