教你如何在元宇宙做虚拟主播(四):动捕软件

Xsens动作捕捉 2023-05-10 5639

前面介绍了相关设备和虚拟皮肤的内容,那么这部分将如何将动作映射到我们的电脑上,在前面介绍的TVmini倒是集成捏皮和动捕软件两个部分了,还有直接购买虚拟皮肤只需要摄像头的facerig,想要操作简单可以直接参考上文,这里再多介绍两个笔者尝试觉得还不错的动捕软件方案~

一、Virtual Motion Control虚拟主播方案:

Virtual Motion Capture是一个应用程序,可以控制VR 设备(HTC Vive / Oculus Rift / WinMR)VRM的3D模型的所谓的Vtuber。 与普通VR设备操作的应用程序不同,它可以与VR游戏同时启动,甚至在VR游戏过程中也可以控制模型。例如可以在展示自己的动作的同时播放 VR 游戏的实时播放视频。甚至可以在没有任何额外动作捕捉的情况下以动态方式显示它,即使不在 VR 游戏中也可以使用。它还支持用于 MR 合成的 externalcamera.cfg。VMC可以像在 VR 游戏中一样进行拍摄,可以自由分配用于跟踪的控制器和跟踪器;可以自由设置头部、双手、臀部和双脚的头显、控制器和跟踪器。借助微调的校准功能,可以强烈校正实际体格和模型尺寸之间的差异,并按预期进行操作。由于操作面板显示在单独的屏幕上,因此可以在录制或分发屏幕上不显示操作屏幕的情况下操作摄像机。

1、软件下载:https://sh-akira.booth.pm/items/999760 (需要注册P站的账号)

2、选择一个喜欢的皮肤,在nicovideo或者其他网站上面可以挑选VRM文件,注意作者商用的授权权限(也需要注册账号) https://3d.nicovideo.jp/

3、导入到VMC软件当中,在小窗口有导入VRM,点击打开即可看到模型人

4、控制器匹配模型

教你如何在元宇宙做虚拟主播(四):动捕软件  第1张
设置界面

分别晃动手里的追踪器,是能够自动匹配上的,手柄的持有姿势如下 :

教你如何在元宇宙做虚拟主播(四):动捕软件  第2张
官方教程推荐姿势

启动后,找到控制面板,可加载任何 VRM 模型,可以从前文捏皮软件导出该文件格式,也可以从内部商店找现有的模型,调用模型的时候会将显示模型的许可证明,如果没有问题,请单击我同意。然后关闭模型加载窗口并按下校准按钮。按照屏幕上的说明操作。默认按键设置是针对 Oculus 的,所以如果使用的是 HTC VIVE,可打开快捷键设置并将预设更改为 Vive 的预设。可以通过用鼠标操作显示模型的屏幕来控制相机。默认为前置摄像头,从正面捕捉头像;自由走动可从“相机”选项卡中选择“自由相机”。滚轮:缩放、右键单击 + 拖动:旋转相机、Alt + 左键单击 + 拖动:围绕模型旋转相机、单击 + 拖动:移动相机、左键单击 + 拖动:移动窗口。

2、VSeeFace 虚拟方案:

VSeeFace 是一个免费的、高度可配置的面部和手部跟踪 VRM 和VSFAvatar虚拟人像操纵程序。官网:

VSeeFace 提供类似于 Luppet、3tene、Wakaru 和类似程序的功能。VSeeFace 在 Windows 8 及更高版本(仅限 64 位)上运行。通过 iFacialMocap/FaceMotion3D 支持完美同步。上手非常快,操作也很简单明了,适合低成本选手尝试~它的面部跟踪,包括眼睛注视、眨眼、眉毛和嘴巴跟踪,是通过常规网络摄像头完成的。对于可选的手部跟踪,需要 Leap Motion 设备。但是不支持 Live2D 模型。

下载链接:

官方教程

接下来会介绍不同的直播平台选择和直播推流的流程,敬请期待~

The End