技术研发进展—无需标定内外参

Xsens动作捕捉 2023-05-10 2393

技术研发进展—无需标定内外参  第1张

结果描述

本周算法研发实现的成果是:RGB动作捕捉不需要标定内外参,即——用户使用普通手机摄像头、各种型号网络摄像头、视频输入,均可实现和标定内外参相似的捕捉结果,无需再进行标定环节。

需求背景

传统的计算机视觉识别环节一般都需要先对相机进行内参标定,如使用棋盘格等方法。

技术研发进展—无需标定内外参  第2张
棋盘格

然而,让用户使用棋盘格进行标定,在用户体验上不够好,因此我们一直在研究针对动捕这一场景下,可以不用棋盘格进行标定,也能实现计算内参结果的方法。

技术研发进展—无需标定内外参  第3张
内参和内参标定(《视觉SLAM十四讲》)

我们的解决方法

  1. 通过神经网络模型识别画面中的平面,并求解出平面方程;
  2. 识别几个特定的人体关键点,并给出三维坐标估计;
  3. 根据平面方程和三维坐标信息输入一个预先训练好的能量函数,进行计算,计算出该相机对应的内参。

这样,即可实现任意带有RGB相机的设备(如手机)的输入,可以方便的实现动作捕捉。

关于我们

我们由一群来自清华大学校园的计算机视觉和图形学技术爱好者创立,研发团队由清华、北航、英特尔、字节等高校和机构的研发人员组成,专注于用最前沿的计算机技术解决3D人物动画生产过程中的问题。目前的核心技术包括【无穿戴AI动作捕捉技术】和【动捕数据智能修复技术】两项,算法已申请相关专利。

其中,【动捕数据智能修复技术】可为动画师工作量较大的动画公司、特效公司、动捕公司、游戏公司提高效率;【无穿戴AI动作捕捉技术】可以用于电影虚拟预演、智能舞蹈/健身培训等几个方向。产品和解决方案已获得多家行业客户的认可。

联系我们

业务合作请联系:contact@graphorigin.com

研发合作请联系:ceo@graphorigin.com

The End