详解XR虚拟演播厅技术及厂家
详解XR虚拟演播厅技术及厂家
XR用到的技术简化来说主要包括:摄影机追踪系统、虚拟演播室软件平台、媒体服务器、实时渲染引擎、LED显示屏等。
从1998年的电影《罗拉快跑》开始,游戏行业就潜移默化地影响渗透着影视、新媒体行业,甚至改变着观众的审美习惯,使现代人习惯于游戏式的快节奏和更具带入感的主观运动镜头。主流游戏引擎(Unity 3D、Unreal)的开发者也野心勃勃地进军游戏行业之外的领域,例如动画电影、演出等。专门为舞台演出服务的实时渲染引擎也开始出现(例如Notch)。
虚拟场景一般都是在虚幻引擎(Unreal Engine)或Notch引擎中预制的。之前,需要在例如C4D、maya等DCC软件中建模,导入引擎,添加灯光和纹理,设置动画并提前做好交互测试。
从引擎的偏好上看,Notch能提供更好的动态粒子实时表现,适合VJ等高动态抽象视觉项目,或单独用于XR的前景AR特效的制作。而Unreal更偏向于制作具象复杂的场景,拥有更多封装好的工具及插件进行辅助,能够快捷地打造逼真的效果。
由于虚拟演播技术日趋多样和复杂,三维实时预览、立体投影(3D Mapping)、实时交互特效、多媒体文件的播控等功能开始通过服务器进行整合,不同功能的硬件设备可以和服务器进行无缝衔接。
在XR的虚拟项目上,国内外主要用到的是Disguise服务器及平台,其媒体服务器相当于真实世界与虚拟世界的桥梁,将虚拟摄影机与真实摄影机运动信息进行匹配并将图像信息映射到LED屏幕上,并在范围外进行拓展。其功能还包括摄影机及镜头校正、空间映射、颜色校正,并支持Unreal、Unity、Notch等渲染引擎。
在追踪设备的选择上,与绿幕虚拟制作类似,设备及服务供应商包括: Mo-sys、 Stype、 BlackTrax、 Optitrack、 Xsens 等,分为主动式和被动式红外光学捕捉,其追踪数据和定位调整都可以整合到媒体服务器上。
除了Disguise提供的虚拟演播软件,团队也可以采用其他品牌的虚拟演播室软件平台方案,比如Pixotope、Zero Density、Brain Storm等。
其中Pixotope解决方案主要被用于大型的广播、体育赛事、电子竞技等直播领域,例如“超级碗”、英雄联盟决赛现场、欧洲电视网等。
Pixotope是一个开放式的软件解决方案,用于快速创建虚拟演播室、增强现实及实时图形。它拥有功能强大的商业硬件,专门设计来用于与其他合作商的技术及外部数据源进行连接。Pixotope和Zero Density一样,都是基于虚幻引擎的原生虚拟演播室软件解决方案。
例如,在韩国仁川举行的拳头公司RiotGames2018年英雄联盟世界锦标赛开幕式上,虚拟偶像K/DA女团通过Pixotope提供的技术完美演绎了逼真的AR舞曲《Pop Star》,吸引了包括现场观众外超过9000万的在线观看。
在LED品牌的选择上,目前包括《曼达洛人》《登月第一人》《西部世界》等众多电影、影视剧或短片都主要采用了国产品牌ROE(雷迪奥)的LED产品,比如Black Pearl系列和Diamond系列,其LED点距从2.6mm到5.2mm不等,根据摄影机到LED面板的距离来具体选择。此外,国内厂商ShowHo(秀狐)的LED“影”系列XR-LED显示屏也是众多虚拟发布会、影视综艺节目的首选。