VR发展至今,三大动作捕捉系统都做了什么?

Xsens动作捕捉 2022-10-10 14359

随着VR游戏和VR电影的出现,经常运用在普通游戏和电影中的动作捕捉技术似乎有了更大的用武之地。

部分来源:虎嗅网

对于一款高质量的VR游戏来说,动作捕捉技术是必不可少的它能够令角色的动作更加自然,同时减少人工设计所耗费的精力和时间

据17173网站报道,最近科技公司Noitom研发了一款可用于VR游戏开发的动作捕捉传感器装置“Perception Neuron”,它令VR游戏中的动作捕捉技术变成了可能,而动作捕捉技术往往是VR产业发展的催化剂。


VR发展至今,三大动作捕捉系统都做了什么?  第1张

为什么说VR中的动作捕捉,是加速VR产业发展的催化器?

首先,你要明白虚拟现实头戴是一种显示器,头戴型的显示器,它本身并不是能够独立运行某种系统的便携电脑


VR发展至今,三大动作捕捉系统都做了什么?  第2张


一个典型的例子便是微软的增强现实眼镜HoloLens,很多朋友会把它与头戴显示器混淆;但实际上,它不是显示器,而是一个完整的计算机硬件,内置处理器、RAM、显卡,可独立运行应用程序,Oculus Rift们却不行(备注:Oculus Rift可不行!)

 

大部分虚拟现实头戴显示器的主要购置其实都很相似,首先需要两块镜片、镜片后设置OLED屏幕,两者配合来实现沉浸式的3D画面感


其中,桌面级产品(Oculus Rift、HTC Vive和索尼Playstation VR)都内置了屏幕,需要通过HDMI连接主机(PC、PS4);而三星Gear VR等手机端的产品则仅有镜片,需要将手机作为屏幕和主机实现显示、运行应用


头显明白了,那为什么动作捕捉能够推动VR产业的发展?

目前动作捕捉系统惯性式和光学式两大主流技术路线,而光学式又分为标定和非标定两种。

那么我们可以将动作捕捉系统分为以下三大主类:基于计算机视觉的动作捕捉系统(光学式非标定)、基于马克点的光学动作捕捉系统(光学式标定)和基于惯性传感器的动作捕捉系统(惯性式)。接下来我们对这三种形式的动作捕捉系统进行简单的解析。

  • 计算机视觉的动作捕捉系统

该类动捕系统比较有代表性的产品分别有捕捉身体动作的Kinect,捕捉手势的Leap Motion和识别表情及手势的RealSense

VR发展至今,三大动作捕捉系统都做了什么?  第3张

该类动捕系统基于计算机视觉原理,由多个高速相机从不同角度对目标特征点的监视和跟踪来进行动作捕捉的技术。


理论上对于空间中的任意一个点,只要它能同时为两部相机所见,就可以确定这一时刻该点在空间中的位置。当相机以足够高的速率连续拍摄时,从图像序列中就可以得到该点的运动轨迹

这类系统采集传感器通常都是光学相机,基于二维图像特征或三维形状特征提取的关节信息作为探测目标。

基于计算机视觉的动作捕捉系统进行人体动作捕捉和识别,可以利用少量的摄像机对监测区域的多目标进行监控,精度较高;同时,被监测对象不需要穿戴任何设备,约束性小。

然而,采用视觉进行人体姿态捕捉会受到外界环境很大的影响,比如光照条件、背景、遮挡物和摄像机质量等,在火灾现场、矿井内等非可视环境中该方法则完全失效。

另外,由于视觉域的限制,使用者的运动空间被限制在摄像机的视觉范围内,降低了实用性。

  • 基于马克点的光学动作捕捉系统:

具有代表性的是美国的MotionAnalysis

VR发展至今,三大动作捕捉系统都做了什么?  第4张

该类系统的原理是在运动物体关键部位(如人体的关节处等)粘贴Marker点,多个动作捕捉相机从不同角度实时探测Marker点,数据实时传输至数据处理工作站。

根据三角测量原理精确额计算Marker点的空间坐标,再从生物运动学原理出发解算出骨骼的6自由度运动。根据标记点发光技术不同还分为主动式和被动式光学动作捕捉系统。

基于马克点的光学动作捕捉系统采集的信号量大,空间解算算法复杂,其实时性与数据处理单元的运算速度和解算算法的复杂度有关

且该系统在捕捉对象运动时,肢体会遮挡标记点,另外对光学装置的标定工作程序复杂,这些因素都导致精度变低,价格也相对昂贵。

基于马克点的光学动作捕捉系统可以实现同时捕捉多目标。但在捕捉多目标时,目标间若产生遮挡,将影响捕捉系统精度甚至会丢失捕捉目标。

  • 基于惯性传感器的动作捕捉系统:

代表性的产品有

VR发展至今,三大动作捕捉系统都做了什么?  第5张

诺亦腾开发的Perception Neuron,

VR发展至今,三大动作捕捉系统都做了什么?  第6张
国承万通开发的StepVR。

基于惯性传感器的动捕系统需要在身体的重要节点佩戴集成加速度计,陀螺仪和磁力计等惯性传感器设备,然后通过算法实现动作的捕捉

该系统由惯性器件和数据处理单元组成,数据处理单元利用惯性器件采集到的运动学信息,通过惯性导航原理即可完成运动目标的姿态角度测量。

基于惯性传感器的动捕系统采集到的信号量少,便于实时完成姿态跟踪任务,解算得到的姿态信息范围大、灵敏度高、动态性能好,且惯性传感器体积小、便于佩戴、价格低廉

相比于上面提到的两种动作捕捉系统,基于惯性传感器的动作捕捉系统不会受到光照、背景等外界环境的干扰,又克服了摄像机监测区域受限的缺点,并可以实现多目标捕捉。

但是由于测量噪声和游走误差等因素的影响,惯性传感器无法长时间地对人体姿态进行精确的跟踪。

VR发展至今,三大动作捕捉系统都做了什么?  第7张

最后,我们可以通过下面的表格对这几种动作捕捉系统进行简单的对比:

VR发展至今,三大动作捕捉系统都做了什么?  第8张

除了惯性式和光学式这两条主线外,还有机械电动式、声学式、电磁式等形式的动作捕捉系统,读者可通过网络等方式了解更多详细内容,此外,动作捕捉系统还需要配合头部追踪、眼动追踪才能发挥出最大的功效。

VR发展至今,三大动作捕捉系统都做了什么?  第9张VR库 (ID:VRco_ol)


一个专注于VR、AR、人工智能领域的垂直网络媒体,致力于为VR从业者、投资人、爱好者们提供最专业、及时的咨询,并为创业者提供有价值的服务。


VR发展至今,三大动作捕捉系统都做了什么?  第10张

VR发展至今,三大动作捕捉系统都做了什么?  第11张


The End