AR说丨整天看好莱坞大片,你一定不知道它是用惯性动作捕捉技术完成的!
作为一门新兴的动作捕捉技术,惯性动捕的出现,打破了光学动捕占据市场绝对主导的行业格局,被视为动作捕捉界的新生力量。但随着它在各行业中的使用,其卓越的性能很快就显示出来了。
目前动作捕捉系统有惯性式和光学式两大主流技术路线,惯性式虽然后于光学式出现,但以其超低廉成本和简便成熟的处理流程,以及完全实时的数据计算和回传机制,成为了更加炙手可热的技术。
今天ARinChina就来和诺亦腾的品牌运营经理檀煜鑫先生为大家解析一下惯性式动作捕捉系统。
公司全称 | 北京诺亦腾科技有限公司 |
创始人&CEO | 刘昊扬博士,戴若犁博士 |
融资现状 | C+轮 |
公司规模 | 300人 |
成立时间 | 2012年 |
业务&产品方向 | 动作捕捉、虚拟现实技术以及教育、体育训练、展览展示等细分垂直领域 |
注:受访人承诺文中数据无误,为内容真实性负责。ARC作客观真实记录,已备份原始记录
ARC: 诺亦腾的惯性动捕系统在市场上已经有非常高的知名度,首先您先来给我们普及一下惯性动作捕捉到底是个什么样的系统?目前它有怎样的应用前景?
檀煜鑫:目前动作捕捉技术已经被广泛运用到影视、动画、游戏等领域中。动作捕捉系统将演员的动作数字化,从而通过计算机系统创造出活灵活现的虚拟角色。传统来说,常见于以上领域的动作捕捉技术是光学动捕,通过摄像头以及穿戴在演员身上的光学反光点来实现动作的数字化。但是光学动捕价格不菲,成本甚至数以百万计;体积庞大,可能一套光学动捕系统需要一辆卡车才能装下;定位校准过程冗长,需要专业人士配合;更关键的是,它对于光学环境、场地等等都有限制,是不能为普通人所用的。惯性动作捕捉技术没有场地、光照环境的限制,产品价格非常平易近人使用过程便捷,让动作捕捉成为了人人都能用的技术。
2012年底,刘昊扬博士带领团队实现了惯性动作捕捉核心技术突破,正式成立公司,2013年自主研发出全身惯性动作捕捉系统。通过在被追踪目标(比如人体)的关键节点上,部署多个集成加速度计、陀螺仪、磁力计等惯性测量单元的传感器,通过惯性测量单元采集到的运动学信息,从而得到目标运动的轨迹,再通过自主研发的底层算法对信息进行处理,完成对运动目标的动作捕捉。
惯性动作捕捉技术不仅能用于影视、游戏这样的传统领域,也能用于舞台表演、医疗、体育训练、工业自动化等领域。而目前,惯性动作捕捉技术最受人关注的应用领域之一是虚拟现实。
ARC: 将原来的动捕产品降价以及众筹低价动捕设备,你们是打算加速“基于 MEMS 惯性传感器的动作捕捉技术”民用化吗?一款动捕产品,如何做到开箱即用?
檀煜鑫:目前我们拥有面向影视专业制作的动捕系统Perception Legacy,以及面向普通开发者的动捕系统Perception Neuron。低成本,高性能是动捕产品的特点,目前从普通爱好者到专业影视团队,我们的动捕产品已经被广泛使用。在包括Youtube、Bilibili等许多国内外视频网站上,都能找到来自全球的创意艺术家利用我们的产品创作的各种作品。
对于动捕产品来说,实现开箱即用的关键在于穿戴方便便捷以及校准简单,几分钟穿戴,3个校准动作,就能够在电脑屏幕上看到穿戴者的数字化身。
ARC: 从实际体验来说,惯性动作捕捉技术目前还存在哪些技术劣势是有待解决的?
檀煜鑫:目前来说,惯性动作捕捉技术的精确度可以与光学动作捕捉相媲美,但由于传感器特性的原因,惯性动捕对于环境中的磁场敏感、具有累积误差等原因。这些技术上的不足可以随着硬件选型、底层算法以及校准程序的升级而逐步改善。
ARC: 惯性式动作捕捉系统在VR行业发挥着怎样的作用?它到底能够为我们带来什么?
檀煜鑫:前不久的电影《头号玩家》轰动一时,其中主角将自己的身体运动带入到虚拟世界之中,经历各种体验。在银幕之外,我们如果想要在虚拟空间中看到自己的身体,用身体去与虚拟环境交互,就必须要用到动作捕捉技术。
目前我们开发的Perception Neuron惯性动作捕捉系统,已经被行业内许多企业、开发者应用于虚拟现实交互之中。而另一款产品——Hi5 VR手套,可以让穿戴者在虚拟现实环境中用自己的双手与虚拟物体进行精确的互动,获得更加沉浸的感受。
ARC: 有人说,惯性动作捕捉势在未来必会取代光学动作捕捉技术,对于这一说法您是怎么看的?
檀煜鑫:惯性动作捕捉和光学动作捕捉技术各有其优缺点,因此针对不同的行业、不同的应用,可以选择不同类型的动作捕捉技术来应用。
而更好的做法,是将这二者结合使用,优势互补,实现更加精确的人体动作捕捉以及空间追踪定位。目前我们开发的多人大空间商用VR解决方案Project Alice以及混合现实制作系统传神Trance均采用了光学、惯性混合的空间定位技术,将二者进行结合,实现更加精确的tracking效果。
ARC: 2018年,你们的重点会放在哪一方面?对于公司的发展有怎样的愿景?
檀煜鑫:经过5年时间的发展,我们已经成为动作捕捉领域全球用户量最大的企业,通过接触用户,从用户那里获得反馈,深入了解他们的创作过程与创意,积累了丰富的经验,能够更加深入地雕琢技术,在技术领域取得进步与提升。
经历2017苦练内功,夯实基础的一年之后,我们已经从一家研发驱动的公司逐渐转为技术与市场双轮驱动的公司,公司发展进入了不断加速的过程,而这一加速的过程会越来越快。诺亦腾的名字「Noitom」来自于英文「动作」(Moition)一词的反写,这也是我们的愿景:重塑动作捕捉行业格局,用我们的技术创造不一样的未来。
【精】目前商用的全息投影技术都是伪全息?
【热】影创AR眼镜新品可能长这样,你会喜欢吗?
【精】干货!互动投影系统的技术及原理
精·选·服·务