南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报

Xsens动作捕捉 2023-05-09 3653

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第1张

近日,在浙江卫视的音乐励志节目《天赐的声音》收官一期中,“首位数字化宋韵推广人”——谷小雨作为惊喜嘉宾,正式登场,她身着宋韵服饰,于西湖山水影像间翩翩起舞,跨越次元,穿越古今。她游走于虚幻与真实之间,与浙派古琴传承人徐君越以及音乐合伙人张韶涵,共同演绎了由宋词改编而来的经典歌曲《但愿人长久》,广受观众好评。

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第2张

作为由浙江省委宣传部指导、浙江广电集团浙江卫视与腾讯互娱知几联合打造的数字人,谷小雨是国内首个使用虚幻引擎在广电AR实时舞台实现实时渲染的超过200万面数的高精度写实虚拟人。而她虚实相生,惊艳四座的舞台表演则是基于在腾讯动捕基地收集到的动捕数据。

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第3张

腾讯动作捕捉基地成立于2020年,总动捕面积高达600平方米,还配有12m*6m双轨数控维亚,200+门类齐全的动捕道具库,2W+的演员库。依托腾讯互娱人工智能和大数据能力,以研运一体的理念,打通了动捕美术资产生产与落地全流程。整个基地采用世界顶级的Vicon光学动作捕捉系统,硬件设施为专业的Vicon Vantage V16光学摄像机VUE参考摄像机、音视频直播设备,软件使用的是Vicon配套的Shōgun软件

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第4张

腾讯动捕基地功能区划分

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第5张

腾讯将动捕技术在影视/游戏制作中的应用及工作流程

要将动捕技术应用到影视或游戏项目制作中,首先要对项目的有初步的概念设想,然后将这个概念转化为虚拟的三维模型,之后将骨骼分配给模型,让骨骼来驱动模型,完成骨骼绑定,再根据故事板,进行镜头或游戏机制的拆分和预演。完成了这些,就可以进行动作捕捉,得到的动捕数据给到虚拟角色,就可以让它动起来了。最后在引擎中进行动画艺术处理、灯光渲染、特效、合成、后期处理等就可以输出最终的影视或游戏动画效果。

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第6张

动捕现场工作流程

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第7张

腾讯如何利用Vicon动捕进行虚拟拍摄

虚拟拍摄的工作原理更多用的还是追踪的问题,Vicon可以通过追踪摄影机的运动轨迹来匹配虚拟拍摄在现实拍摄中的位置,从实现演员与虚拟场景的实时互动。腾讯动捕基地利用Vicon动捕系统对摄影机精准追踪的能力,配合调整摄影机的畸变、帧率,色相等参数,广泛地进行影视拍摄、动画电影和游戏制作。

值得一提的是,使用动捕技术进行虚拟拍摄,还有制作成本低、效率高,素材可永久保留和重复使用等突出优势

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第8张

腾讯动捕基地的发展计划

腾讯一直在尝试将动捕运用到更多科技性产品中,比如将动捕数据给到Robotics机器狗等机器人身上,让它的动作更加流畅自然。此外,腾讯动捕基地也在尝试捕捉舞龙舞狮等非物质文化保护的内容以及捕捉大熊猫等保护动物,让动捕更多地服务社会,给社会带来更多的实用价值,给民众更多了解动捕等前沿科技应用领域和方向的机会。

南宋才女破圈而来,挖一挖“谷小雨”背后的腾讯动捕情报  第9张

腾讯动捕基地让我们看到国内动捕产业发展发展未来可期,迪生数字,致力于提供专业、灵活、全面的动捕产品和全流程的动捕技术解决方案,让动捕技术赋能更多产业和项目。关注迪生,了解更多动捕行业动态和服务。

The End