虚拟主播也网红,六大技术驱动形体动作

Xsens动作捕捉 2022-11-29 9455

问:到今年年底,中科深智设计的虚拟主播形象有多少可以提供给客户?在虚拟主播的形体驱动上又用了哪些技术手段?

答:中科深智有自己的专业的技术和美术团队在设计、制作虚拟主播。目前我们有200个已做好的虚拟主播形象,正在陆续添加到云端资产库,目前可以提供给用户免费使用的虚拟人已经有50多个。这批资产预计12月底可以全部提供给创梦易用户免费使用。我们还在加大投入,设计更多的虚拟人形象。

虚拟主播也网红,六大技术驱动形体动作  第1张

虚拟主播也网红,六大技术驱动形体动作  第2张

中科深智的创梦易支持6种控制虚拟人的技术:

1、用摄像头捕捉动作来驱动虚拟主播。它不需要高端相机,只需要普通的几十元的USB摄像头即可。这种驱动方式可以跟第二、第三种驱动方式配合使用,比如真人主播坐在椅子上直播,用摄像头控制虚拟人的脸跟头部,虚拟人下半身的动作通过点键盘实现。这种方式还能用播放视频的方式驱动虚拟人,原理同摄像头一样,不同之处在于用虚拟相机软件播放人的动作视频,实现跟用摄像头捕捉真人动作一样的效果。

2、用节目编排的方式,循环播放预录动作进行表演。这些动作有的是请职业演员来录制的,表现力很强;有的动作是用动画方式制作的。为了增加表现力,人类做不出来的动作虚拟人可以做出来,比如一蹦一人高。

3、用键盘触发动作,点一个按键,就能让虚拟人做出某个动作,动作同样是预先做好的。

4、用麦克风声音驱动虚拟人。声音驱动有两种方式,一是真人通过麦克风说话实时驱动虚拟人,二是用录制好的音频文件智能驱动虚拟人。两种声音驱动方式分别适用于虚拟直播和挂机带货。

5,中科深智另外还有国家高级的驱动虚拟人的技术,它是用光学动作捕捉技术来驱动虚拟人,真人主播需要全身佩戴设备,结合IK算法来精准驱动虚拟人,甚至可以做动画片。

6,另一种是更智能的语义驱动,即识别出弹幕的内容,虚拟主播智能回答,同时生成与语义相符的动作。第5第6两种技术分别用于另外两个产品,即创梦达和云小七全智能AI直播系统。

The End