动作捕捉+SaaS “一键开启”虚拟直播、演播室的时代,触手可及

Xsens动作捕捉 2023-05-08 3903

动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第1张

相信细心的元宇宙er们已然发现,2023年,以虚拟数字人为代表的元宇宙更火了。

中央、部委/省、市纷纷出台各项元宇宙及虚拟数字人相关的具体策略及规划,展示了国家对于坚持创新驱动,全面建设互联网3.0产业生态发展体系,打造数字经济新高地的信心与决心。

据公开数据显示,2022年虚拟数字人赛道的企业注册数新增27.8万家,投融资事件也持续增加,全年国内虚拟数字人领域融资数量超百起,金额超百亿元,整体呈现逆势上升态势。

至此,自带“新媒介”特性,担任元宇宙入场券角色,肩负元宇宙中信息制造与传递、“人-物-场”链接重任的虚拟数字人,成为元宇宙领域内较早落地的商业场景,行业正式进入爆发期。


动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第2张

图源于:《2021中国虚拟数字人影响力指数报告》


01

做个虚拟数字人

100万够吗?

洛天依、柳夜熙的首次上线,均直冲各大平台热搜榜首,热度数天不退。2023年央视及各大地方台春晚,纷纷邀请虚拟数字人助阵,容貌姣好、技能满分,却又“真假难辨”的虚拟数字人们一举火遍大江南北,为老百姓所熟知。

你是否也想过拥有自己的数字分身,在虚拟世界中畅享多维人生?或是打造一个永不塌房,且100年都不需要续签合同的品牌专属代言人?

但你是否曾听闻,关于柳夜熙的“花100万造人,花800万运营 ”的“小道消息”?对于身为普通人的我们,或是艰难挺过三年疫情的中小企业来说,花极少的成本制作并运营属于自己的虚拟数字人,现实吗?



动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第3张

深锶科技工作人员穿戴诺亦腾动捕设备

十余年间,诺亦腾服务过全球五十余个国家、横跨影视、游戏、教育、科研、医疗、康复等十余个行业的客户,参与了数百个虚拟数字人、虚实交互项目的定制及运营。其中,有精益求精、力求完美复刻每一根头发丝的大型企业客户,有DIY数字分身,只为在新媒体平台上替代自己出镜的普通人,也有靠自学获取前沿科技应用技能及职场新助力的大学生等。

面对不同需求,诺亦腾的职责是不断提升动作捕捉技术与设备水准,高效率、高标准、低门槛地实现大家的需求,帮助其更快、更好、更省心地畅游元宇宙。



动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第4张

深锶科技虚拟人IP 安若菡


今天小诺要为大家介绍的新朋友,是诺亦腾合作多年的伙伴——深锶科技,我们在这个核心目标上不谋而合。深锶科技以自研XR引擎为基座,面向行业、全场景的SaaS化服务,旨在将实时3D互动内容制作能力像美图秀秀之于图片处理功能一样,以更低的门槛提供给客户。



02

如果

数字人可以“一键生成”


自成立以来,深锶科技(www.psyai.com)连获三轮、总额超千万美元的融资,合作企业近百家,已制作及参与200+虚拟IP的运营。那么,深锶科技是缘何获得资本与市场如此青睐的呢?

小诺了解到,在深锶科技引以为傲的作品中,以虚拟主播/偶像/明星等身份型虚拟人居多,客户及大众对其外形的要求是高度拟人化,甚至能从视觉上替代真人。


动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第5张

安若菡直播中


他们投入了大量的时间和精力,基于5G、人工智能、三维交互、动作捕捉等元宇宙底层技术及核心算法上逐层突破,在人体的三维重建、动作的实时追踪与复现,真实感图形渲染和云原生SaaS服务等多个关键技术领域取得重大进展。

尤其是动作捕捉方面,深锶科技借助诺亦腾 Perception Neuron 系列惯性动作捕捉设备、动捕后处理技术,融合其自研单目摄像头动捕技术,共同构建多视角人体标准数据集,用以训练和测试神经网络算法,赋予虚拟数字人真实、科学、合理的实时动作反应,让其一举一动宛若真人,给予观众灵活逼真的沉浸式感受。



动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第6张

工作人员驱动数字人


而客户甚至不需要了解原画设计、3D建模、角色绑定、模拟解算、灯光渲染等专业名词,便可以轻松获取极具生命力的专属数字分身。


03

虚拟直播

建立与用户“短平快”的交流


在各类数字虚拟人与大众“面对面”交互的渠道中,虚拟直播可谓是高效至极。在诺亦腾动作捕捉技术与设备的支持下,深锶科技不仅完成了近百位风格各异的数字人的虚拟直播驱动,还实现了自有品牌虚拟人IP“安若菡”在抖音平台的高频次直播营业。


动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第7张

虚拟直播 多设备适配


商业化合作项目中,比较有代表性的是优酷知名动漫人物“秋月华”的虚拟直播首秀项目,深锶科技参与对“秋月华”角色进行二次建模及实时驱动工作。

直播中,数字人“秋月华”基于诺亦腾惯性动作捕捉设备,精准复现角色标志性动作,举手投足间都展示出角色的气质与魅力。“秋月华”对动漫人物与内容、剧情走向的个人独到见解,让用户难以忘怀。本次新颖的直播活动在各圈层内达到破圈传播效应,在线观看直播人数达3.7万,获得同时段排行榜第一的成绩。

而深锶科技自主孵化的虚拟人安若菡,则是企业从0到1打造品牌个性化数字代言人的典型案例。

深锶科技完全按照电影工业级标准完成对安若菡的打造,后续其传播效果也十分有代表性,在B站的冷启动试播阶段,就凭借其高度接近真人的展示效果给观众留下了深刻印象,并在网络上引起广泛讨论。在这一年多的时间里,安若菡几乎以每周一次的高频与用户直接沟通,镜头中的她活泼灵动,对于建立大众对深锶科技的品牌与技术实力认知,堪称“现身说法”。


04

XR虚拟演播室

让相见不打折扣


在出行需要“健康码”的三年里,有太多次演唱会、音乐节、话剧演出等一再推迟,这在无意间催化了虚拟演播应用的急速发展。


动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第8张

褚乔虚拟演唱会


XR虚拟演播室的功能是基于观众对于“相见”的迫切诉求,而产生的将线下表演在元宇宙场景内复刻的高标准、定制化需求,所以很多客户对此唯一的要求便是极致的沉浸感。这对深锶的实时计算功能,以及诺亦腾动作捕捉技术,都提出了更高标准。

深锶科技基于自研的全身单目动作捕捉技术、诺亦腾Perception Neuron系列动作捕捉设备、高品质图形渲染等技术,为表演者量身打造、低成本、高效构建极具沉浸感的实时虚拟演播与交互体验。



动作捕捉+SaaS  “一键开启”虚拟直播、演播室的时代,触手可及  第9张

虚拟形象

在诸多落地项目中的典型代表是,以全新的数字孪生技术将艺人形象进行高精度复刻的好声音歌手-褚乔虚拟演唱会。

此类艺人或涉足游戏领域相关人物的元宇宙分身,都为粉丝带来惊喜连连,让久别后的重逢兼具面对面的沉浸感与顶尖科技的神秘感,同时也为各大企业提供了IP深度打造的又一新兴模式案例。


05

写在最后


元宇宙领域内,以深锶科技为代表的新型SaaS平台的异军突起,代表的不仅仅是前沿技术的创新性应用,更是一种在技术不断革新、市场格局日新月异的当下,中国急需的新型商业模式。

数以万计中小企业对于元宇宙化转型具备迫切需求,大家急需标准化、可复用、高效高质且低成本的虚拟IP定制与运营模式。

诺亦腾很荣幸,能以动捕技术提供商的角色,与深锶科技共同为企业提供元宇宙价值,帮助其形成新的品牌营销抓手、业务增长点,进而带动生产力的变革。

未来,我们将以打造更高效、普适、性价比更高的动作捕捉设备为目标,与深锶科技共同完成动捕技术革新,助力其挖掘元宇宙与 SaaS 结合带来的无限可能。


The End