无需标记还实时!面部捕捉动画跟踪平台Faceware Studio

Xsens动作捕捉 2023-05-10 3120

今天想给大家介绍一款实时面部动画/跟踪平台Faceware Studio。

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第1张

无标记3D面部动作捕捉解决方案的领先开发商Faceware Technologies最近发布了一种用于创建高质量面部动画的新平台Faceware Studio,其利用创建即时面部动画的方式重新定义了实时工作流程,通过机器学习和最新的神经网络技术实时跟踪人脸并创建面部动画。


Faceware Studio目前与构建在Faceware Analyzer和ReTargeter上的非实时Faceware流程并驾齐驱,可直接用于实时应用程序,将来这项技术会得到扩展,与传统流程工具结合到一起使用。

主要功能

Tracking Any Face(面部跟踪)

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第2张

Faceware Studio只需单击校准就可以跟踪面部,并为面部表情设置动画,其中用到的神经网络技术可以通过实时摄像头或预先录制好的视频轻松识别角色面部。Faceware Studio可实现交互、虚拟制作和大规模的内容创建。

Advanced Tuning(强大的调整功能)

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第3张

艺术家可利用“Animation Tuning”(动画调整)功能对角色特定配置文件进行可视化调整,还能提供所需的反馈和工具,根据演员的独特表演定制动画。

Motion Effects(动态效果)

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第4张

Motion Effects是一个功能强大的系统,可在实时数据流中构建其他逻辑,效果可用于处理数据,使过程完全按照用户的想法执行,从而尽可能地直接控制最终动画。

Animate Any Character(为角色制作动画)

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第5张

Faceware Studio可以自由设置任何角色绑定的动画,将Studio标准控件映射到定制角色上,就可以将面部动画数据流导入到虚拟引擎、Unity和MotionBuilder受Faceware支持的插件中,这一功能不久之后在Maya中也可以实现。

工作流程

Realtime Setup(实时设置)

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第6张

使用“实时设置”面板来选择要跟踪的摄像机、图像序列或预先录制的视频。然后使用面板中的控件调整各种选项,例如帧速率、分辨率和旋转。根据输入内容选择Stationary或Professional Headcam模型,Pathfinder功能会提醒用户实时设置是否为最佳设置。

Calibration&Tracking(校准&跟踪)

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第7张

完成实时设置后,Tracking视窗开始显示画面。为了校准跟踪,角色需要在合适的构图位置,对焦且保持中立姿势。如果使用的是预先录制的媒体,需要找到最合适位置的图像,然后使用“ Calibrate Neutral Pose”按钮开始跟踪。

Tune Your Animation(调整动画)

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第8张

Animation Tuning面板包括面部跟踪时的每个表情及其对应值的列表,用户可通过彩色条获取有关每种表情的即时反馈,单击并拖动滑块以增加或减少每种表情的效果。还可以在“ Motion Effects”面板中使用随带的效果来增强数据,或使用Python在每个空间基础上创建自己的自定义效果。

Stream to Engine(导入到引擎中)

无需标记还实时!面部捕捉动画跟踪平台Faceware Studio  第9张

“Streaming”面板为用户提供了众多选项来启用和自定义数据流,要从Faceware Studio传输动画数据,需要在引擎中配置受Faceware 支持的插件,单击“Stream to Client”以查看角色动画。

最后我们再来说下这款工具的定价吧。Faceware Studio每月价格为$195(不到¥1400),当然小伙伴们也可以到官网申请免费试用机会。申请通道是这里了。

https://facewaretech.odoo.com/web/signup?redirect=https%3A%2F%2Ffacewaretech.odoo.com%2Fdownloads

Faceware官方表示,他们的愿景是使创建面部动画的过程快速而又有趣,而Studio仅仅是个开始。如果感兴趣的话,可以详细了解一下!

https://facewaretech.com/software/studio

-END-

The End