大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!

Xsens动作捕捉 2023-05-09 32710

wuhu专题

大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第1张


近一年,在元宇宙概念大爆发的这一时期

陆续踊跃出来的虚拟偶像

正逐渐从二次元卡通、美形

往超写实形态延展

应用场景也逐渐多元化!


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第2张

炫舞系列首位虚拟代言人“V-life星瞳”,引发网友的热烈讨论。

大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第3张

在时尚社交平台具有代表性的4位时尚流虚拟人,从左至右依次为,日本的IMMA、国内的AYAYI、国内的LING翎、美国的Miquela Sousa。

大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第4张

虚拟人「柳夜熙」,今年11月在抖音凭借一条视频吸粉破百万,创造#美妆遇到元宇宙#相关话题在短视频热搜榜上居高不下。


然而面部表情捕捉技术

一直是动画、影视、游戏等领域最难解决的问题


尤其是写实类数字人领域

高精度的实时表情捕捉一直没有理想的算法

导致多数写实类虚拟偶像IP内容生产面临困难

想呈现完美的动态内容

需要花费大量的资金和人力工作

这一系列的问题让很多优质内容运营团队

在寻找技术链路上一再受阻


如何拓宽更多的场景?

如何有更好的技术支撑?


今年大家的目光也都注视到了一些技术公司

比如国内的

面部捕捉技术独角兽

「FACEGOOD」

大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第5张


国产研发团队--FACEGOOD,多年沉淀,斩获口碑


先介绍下FACEGOOD,相信在动画、游戏等领域已经耳熟能详了,这个多年都致力于面部技术的团队,耗时五年的技术沉淀,于今年5月正式推出面部表情动画全流程产品——Avatary软件及配套硬件,于7月国际版也接踵而来。


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第6张


短短半年时间,国内外400多个企业团队开始将Avatary用到自己的动画生产流程中,在国际上也触达到38个国家,在国内外的口碑一路攀升。


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第7张

Avatary用户案例合辑

大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第8张


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第9张


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第10张

硬件展示图D2/P1


团队内容生产全流程软件上线后,在行业领域逐渐占据头部位置,FACEGOOD完美地解决了高精度数字人离线面部表情捕捉的问题。


高精度数字人的实时面部捕捉才是“硬菜”,Seattle pro来啦!


在面部捕捉领域深耕多年的FACEGOOD团队在实现完美离线流程产品化后,这一国内极客团队像开了挂一样接着又宣布另一喜讯——他们把数字人高精度实时面捕捕捉技术搞定了,并于2021.11.19在海外期刊发表了一篇名为“High-Quality Real Time Facial Capture Based on Single Camera”的论文,引起了业内关注。


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第11张


在传统的离线表情捕捉流程中,例如Faceware、Dyanmixyz,视频跟踪的工作量非常大,通常需要人工干预,每天每人只能处理三五分钟视频,在大型项目中需要投入十几号人跟踪视频,产能低成本高。


FACEGOOD论文中提出的实时面捕算法只需要一个普通的摄像头就可以达到跟离线一样的精度,这样一来,面捕就跟动捕一样实时产生数据后直接进入后续的精修阶段,大幅提升了动画产能。


目前FACEGOOD这套实时算法预备在行业内开始普及,命名为Seattle Pro,未来将会作为FACEGOOD标准化产品Avatary的标配功能,任何人任何企业都可以自由使用,也就是“把一辆法拉利交给用户开着上下班通勤”,工业级精度不再是少数企业的专属品,未来让个人创作者,小型团队也可以去使用。


Avatary中的Seattle Lite也是用的这个技术,出于易用性考虑目前仅提供了52个bs版本。但高配版本的Seattle Pro将没有任何绑定限制,创作者可以任意发挥,Seattle Pro实时面捕的这段demo视频是直接驱动的Metahuman完整绑定,绑定精度是苹果arkit的10倍之多。


近期Seattle pro beta版已正式对全球开放测试。测试申请通道目前接受邮件申请形式 support@facegood.cc


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第12张

实时面部捕捉展示

大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第13张


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第14张

实时面部捕捉细节展示


未来将“软硬”并施,为虚拟偶像领域拓宽更多场景做最好的技术支撑


虚拟偶像风口,又迎着元宇宙概念的浪潮,虚拟偶像IP的内容呈现形态也逐步拓宽,离线内容制作单一的使用场景已经远不满足IP运营方的需求,很多虚拟偶像IP已经开始探索实时场景的技术路线,为虚拟IP更多商业场景做准备。


FACEGOOD这一重磅突破,将完美地拓宽了当下超写实数字人、虚拟偶像的更多应用场景,可实现虚拟直播、虚拟制片、虚拟演唱会等场景的技术突破。


目前FACEGOOD已将这一解决方案免费为众多虚拟偶像IP开放测试,已助力多家IP运营方实现新场景的商业化布局,其中也包含超写实IP的直播、演出、交互等场景。


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第15张

Avatary软件界面


未来FACEGOOD

在软件和硬件上会有什么新的技术突破吗?

有哪些可以期待的?


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第16张


FACEGOOD创始人王全伟说:

我们专精一个技术点,就是软体。怎么把软体运动跟变形做到自然可信这是一个技术问题,围绕这个方向我们有一些不错的成果,目前产品化的方向主要是为用户提供一个工业级的高精度动画软件Avatary,个人版本的方向是完全免费,创作者可以使用任何摄像头即可获得高精的面捕动画效果,接下来还会有更多新技术上线,例如肌肉仿真、跟4D面捕,为3A、高精数字人、电影等领域的专业创作者提供面捕能力。


硬件上,我们正在筹备4D面捕设备上线,以及研发下一代面捕硬件,下一代硬件像是过去功能机到智能机的跨越,计划明年上线,大家可以期待一下。


大招藏不住啦!FACEGOOD公布最新突破:数字人高精度实时面部捕捉新成果!  第17张

4D面捕硬件设备之一 双目P0


结语


“蹿红”的元宇宙,到底离我们有多远,如何去构建“与真实世界在体验上没有差别”的虚拟世界,如何在虚拟的世界去构建自然的人类形象,这将是一条持续而艰难的探索之路。相信未来我们都会越来越接近我们想象的那个将虚拟与现实边界逐渐模糊的世界,每个人都能进入那个梦想的“绿洲”。


如同FACEGOOD的愿景:MAKE A WORLD OF AVATARS。相信FACEGOOD这群技术狂热份子会不断地带给这个世界一些惊喜。


FACEGOOD针对高精度实时面部捕捉Seattle pro这一研发成果,现面向影视、动画、游戏等领域免费开放测试合作,愿与未来的元宇宙构建者们进行深度的交流及合作,联系邮箱support@facegood.cc



—END—

The End