制作难、硬件昂贵、环境复杂?都不用了,太平洋未来科技利用AI实现超低成本动作捕捉

Xsens动作捕捉 2023-05-08 4949

多年来,动辄数百万元的设备,让动作捕捉成为了只有影视、游戏、动画领域这些土豪玩家才能玩得起的技术,如今,随着太平洋未来科技自主研发的3D人体姿态捕捉SDK上线,正式宣告,平民玩家可以上线了!

众所周知,传统动作捕捉技术的问题是,其需要依靠大量昂贵和笨重的硬件,同时需要经验丰富的专业人员操作多摄像机设置,演播室环境,以及演员身穿特制的传感器套装,这种技术通常用于电影中。

制作难、硬件昂贵、环境复杂?都不用了,太平洋未来科技利用AI实现超低成本动作捕捉  第1张

动作捕捉片场,设备复杂,成本高昂

制作难、硬件昂贵、环境复杂?都不用了,太平洋未来科技利用AI实现超低成本动作捕捉  第2张

《指环王》将动作捕捉从摄影棚带到了拍摄片场,让动作捕捉演员的先驱Andy Serkis可以作为咕噜和其他演员互动。

传统动捕的优点是精度高,但缺点却有很多:

1. 价格昂贵,基本上支持大空间定位的产品每平方米的价格为1万元人民币起,土豪才玩得起;

2. 设备复杂,需要架设一定数量的光塔或摄像机,人身上还需要布置繁复的marker;

3. 易遮挡,在做动作的时候部分mark点会被身体遮挡导致定位丢失(解决这个问题的方法就是砸钱多装摄像机...);

4. 受环境影响大,对于部分可见光定位技术而言,工作环境对环境光的要求很高;

5. 数据处理量大,由于mark点数量多,处理起来比较耗时。

6. 如果出现问题,就必须重新拍摄场景,而不是稍后尝试修复数据,并且无法使用它来复制对象或人员无法做到的动作(即不遵循物理定律的动作)。

也因此,一直以来人们对动作捕捉技术望而却。但是近期,太平洋未来科技正式上线自主研发的3D人体姿态捕捉SDK,只需一个2D摄像头,便可完成动作捕捉,为用户提供便捷易用、无需昂贵硬件成本的人姿捕捉及渲染深度算法。

让动捕走出制作难、硬件昂贵、环境复杂的困境

放眼全球市场,当大家还在使用2D人体姿态算法的时候,太平洋未来科技近期已经完成了由2D向3D人体骨骼算法的升级,实现了2D人体姿态捕捉算法无法达到的人体轨迹、角度、速度及加速度4个维度的提升。

用2D摄像头捕捉3D动作,其中骨骼姿势是其中的一大难题,大多数只能稳定捕获局部3D动作,而不是全身。

太平洋未来科技基于自身图像识别算法中的AMreal 光场算法,整合特定人的常规形态和三维空间动作,通过深度神经网络,捕捉现实环境中人的头部、臂膀、手等身体各个像素点,将其输送到网络,并扫描其参数让其固定在一个维度中,从而完全控制目标对象。即使在有障碍物、有遮挡、光线不明朗的情况下,也能高效而准确地识别人体姿态动作。

制作难、硬件昂贵、环境复杂?都不用了,太平洋未来科技利用AI实现超低成本动作捕捉  第3张

此套算法,通过解析人体基本形态运动轨迹,将肢体语言进行扫描、追踪、组合、传导人体的动作姿态,上传云端算法库,生成SDK数据包,供研发者直接使用。从而解决调整时间慢、生成时间长、硬件昂贵、环境要求高的困境。

制作难、硬件昂贵、环境复杂?都不用了,太平洋未来科技利用AI实现超低成本动作捕捉  第4张

?脸姿态捕捉尚且?撑了国内新兴AI巨头的产?,可以想象,Ai3D?体姿态捕捉必将产?更?的市场价值。

运动训练

获取精准大数据,使运动摆脱依靠经验的状态

对运动训练来说,个性化的训练方案难度不大,难的是动作评测,但人工智能最擅长的事,恰恰是处理数据,做出评估。

太平洋未来科技通过Ai3D?体姿态捕捉算法,精准捕捉单个或群体的动作,?成BVH数据包,结合?体?理学、物理学原理,直接担当私?教练??,让运动训练摆脱纯粹的依靠经验的状态,让运动训练更加精准可靠。

制作难、硬件昂贵、环境复杂?都不用了,太平洋未来科技利用AI实现超低成本动作捕捉  第5张

通过数据收集,让运动训练摆脱纯粹依靠经验的状态

应?场景:健身康复、个?锻炼、体育集训、?体?程学研究、模拟训练、?物?学等

动画制作

提?动画制作?平,使动画制作更为直观且?动

我们看到3D卡通动画/武打动作?的制作,三维动画设计师得去学习?体动态课,深度了解?体动态,?后建?多个?体?骼,根据剧情所需分别对应调整?骼点,再去建?肤,建?发,最后才能?成3D动画?物;发展到后来,需要让武打演员穿戴上传感器?服及帽?,捕捉其动作及表情?可呈现群众眼前。

制作难、硬件昂贵、环境复杂?都不用了,太平洋未来科技利用AI实现超低成本动作捕捉  第6张

AR+Ai3D人体姿态捕捉变革三维设计复杂的工作形态

太平洋未来科技通过AI3D?体姿态捕捉,能实现整个3D创建,解决光线复杂、成本?、耗时?、普及?低的?业弊端,真正意义上让设计师从繁杂的设计中解脱出来,变?其?作?式,化繁为简。

应?场景:三维设计?业、3D动画、社交娱乐、影视、游戏等

在国内,做算法的公司少之又少,而作为一家由一群技术狂热者组成的团队,太平洋未来科技一直专注于人工智能底层算法的研发,到如今已经发展成为一家集光场、图像识别、运动追踪等算法于一体的基础夯实,精确而完整的全球化计算机科学算法研发科技公司。未来,太平洋未来科技将继续在技术研发上一路狂奔,期待它爆发出的能量。

The End