XR为舞台艺术插上科技之翼

Xsens动作捕捉 2022-10-11 16060

XR为舞台艺术插上科技之翼  第1张

独乐乐不如众乐乐。从央视春晚应用在舞台节目演出的XR虚拟布景、2022北京冬奥会开幕式运用的缤纷炫彩的AR中国结、再到刚刚过去的中秋节河南卫视在XR摄影棚录制的《中秋奇妙游》以及咪咕在厦门打造的元宇宙AR夜景秀……

VR/AR/MR已经摆脱了小众娱乐的“标签”,成为普通老百姓从电视机上、手机上、甚至走在路上就能享受的娱乐方式。

XR虚拟演播室备受追捧

今年中秋节,河南广播电视台凭借《中秋奇妙游》为主题的国潮晚会再次“出圈”,受到人们的热议和追捧。AR吉祥物和XR虚拟拍摄技术等黑科技成为助力整场节目精彩呈现的幕后英雄——栩栩如生的AR极兔形象贯穿整场晚会、写有古人诗词的书页如树叶般飘荡,舞台背景可以从唐朝盛世的皇宫秒变现代博物馆,再变换为人们站在月球遥望地球的场景……

据了解,为了实现更好的视觉体验,2021年河南广播电视台将600平方米演播厅改造成XR沉浸式4K扩展现实演播厅,该演播厅的投入使用成为节目内容和文化创意创新探索的科技助力。

XR为舞台艺术插上科技之翼  第2张

不仅是河南广播电视台,国内很多媒体、电视台都对其演播室进行了改造和升级。2019年,新华网打造了LED沉浸式MR演播室,成为首个将混合现实与人工智能技术常态应用的媒体机构,掀起了媒体演播室数字化改造的热潮。2021年以来,越来越多的媒体引入XR演播室:番禺区融媒体中心建成了广东省首个XR沉浸式演播室,将高清虚拟演播室全面升级改造为4K XR沉浸式智能演播室。武汉市汉阳融媒体中心建成了湖北省首个XR虚拟演播室,配备了LED显示、三维渲染、实时拍摄和空间跟踪定位等配套系统,可实现逼真虚拟背景并实现XR节目的实时录制。此外,北京星光影视园的星光XR虚拟演播厅也已经服务了央视总台、广东广播电视台等诸多电视节目和企业发布会。

XR演播室为何成为广电媒体业的“香饽饽”?在节目中加入AR、VR等XR元素为何成为当前流行趋势?

利亚德集团副总裁兼COO、虚拟动点董事长姜毅在接受《中国电子报》采访时表示,驱使越来越多媒体和节目导演组使用XR等黑科技制作节目主要有三个原因:一是,传统美工布景无法100%呈现出艺术家脑中天马行空的想法,而借助XR等技术,这些创意想法可以被原汁原味地呈现,黑科技开拓了艺术家还原艺术的新路径。二是,XR科技呈现出的整体舞台效果更加炫酷更加丰富绚烂,给观众的直观感受更加震撼和赏心悦目。三是,XR虚拟影棚可以大幅降低运营成本,提高盈利效率。

XR为舞台艺术插上科技之翼  第3张

姜毅举例说,利亚德也在用AR/VR结合数字化的手段去制作儿童剧和舞台剧,以往大型演出,演员工作人员的总人数往往会达到上千人,员工成本和演员排练和管理都十分复杂,而数字化演出大幅降低了参演演员的数量:伴舞演员可以通过虚拟化的手段呈现,几个主演就可以完成一台大型的演出。“数字化解决方案和电子显示屏都是只需一次性投入,后续的运营成本很低,因此大家愿意去尝试这些数字化的方法降本增效。”

据了解,利亚德曾参与国内外二十余家媒体的演播室数字化改造,还参与了很多XR沉浸式演出的创意和实践,如幕,旗下数虎图像担纲2022河南春节晚会XR创意太极《下一秒》多媒体视觉创制,旗下德火科技为新华网媒体创意工场打造LED沉浸式MR演播室。

AR技术扮“靓”城市夜景

如果说XR虚拟演播室的应用,百姓可以从广电节目中领略XR科技的魅力。那么AR技术的应用,则让人们更好地感受到实景与AR交互的震撼。

今年,北京冬奥会开幕式导演组就利用AR技术来呈现中国结。通过电视转播画面,观众可以看到,中国结的红线从四面八方结在鸟巢上空,编织成一个巨大的红色中国结。红火的“中国结”通过AR动画特效缠绕在巨型雪花火炬周围,仿佛为雪花主火炬“穿上”了一件流光溢彩的新衣,最后悬停在鸟巢上空,仿佛一个巨大的实体中国结装置。AR技术的加持给电视机前的观众带来了巨大的震撼和感动。

XR为舞台艺术插上科技之翼  第4张

9月初,厦门的市民大饱眼福,体验了一场AR夜景秀。皎皎明月缓缓从海上升起、海豚和鲸鱼争相跃出海面、钢琴家演奏出的音符在空中飘荡、绚烂烟花在空中绽放、白鹭女神像逐渐升起……这些画面来自中国移动咪咕公司在厦门鹭岛打造的AR夜景秀,AR技术赋予厦门地标建筑更绚丽的色彩。据了解,市民在鹭岛沿途的三个AR体验点登录手机APP,打开相机就可以体验这些虚实交融的画面。

咪咕新空云AR事业部总监徐夏丰在接受《中国电子报》记者采访时表示,这场AR夜景秀覆盖面积十分广阔,其海域跨度总长达6.5公里,覆盖面积超百万平方米的AR夜景秀,为路人提供了海陆空间交互、虚实空间交织的超时空体验。

想要完成这场AR夜景秀并不简单,徐夏丰为记者介绍说,此次AR夜景秀综合应用了高精度建模、虚实融合渲染、定位追踪、智能交互等融合技术解决方案。在实施过程中,团队最终实现了厘米级精度、毫秒级时延的增强现实体验,解决了弱纹理、复杂光照场景(如海面)下如何强化AR感知跟踪等难题,让观众在炫目的色彩中依然能清晰看到细微处的动态变化,真正实现了全场景下虚实融合的沉浸式数实互动体验。“最终元宇宙AR夜景秀项目圆满落地,呈现效果也一如我们预期,受到了市民体验后的诸多好评。”徐夏丰表示。

舞台技术仍有探索和提升空间

近年来,伴随多样应用场景的落地,实时数字孪生、定位追踪、虚实融合渲染、多模态动作捕捉、双管线云端合成渲染等相关技术也在实践中不断成熟。

据了解,中国移动咪咕公司在年初打造了国内首场虚拟交互冰雪音乐嘉年华“集光之夜”。徐夏丰介绍说,本场演出采用了三大主流技术:一是XR+AR融合应用,全XR拍摄制作+LED屏演播区外延的增强现实(AR)扩展,达到了XR与AR虚拟制作融合的效果;二是多模态动作捕捉,可以实现虚拟偶像的实时驱动模型在XR渲染引擎内渲染,与真人演员一起完成录制。三是双管线云端合成渲染,保证同一个场景在两端渲染,并且场景、用户交互数据能够在两端实时同步。

行业专家告诉《中国电子报》记者,诸多核心技术在各企业主体推进应用落地探索时得到了突破和落地。

对于VR、AR、MR、全息显示等技术在演艺舞台上的呈现,行业从业者则表示技术仍有进步和提升的空间。姜毅认为,科技发展仍有巨大提升空间。他举例说,当前全息演讲受环境光影响制约较大,让全息影像更加突出就需要环境对比反差很大,需要对环境和设备进行改造和优化。未来随着科技的进步,可能会逐步降低对环境条件的挑剔度,呈现的虚拟形象也会更加鲜活。此外,脑机接口、语音口令等更智能的技术将代替人们的手工作业;未来这些技术呈现的分辨率、对比度也会越来越高,呈现的效果更加的鲜活灵动。

尽管相关技术还未尽善尽美,但行业从业者都十分看好XR在演艺影视行业的发展前景。徐夏丰表示,在元宇宙这一下代互联网的大背景下,企业主体更有意愿去探索VR/AR/XR在各个行业的应用落地,这个过程也将积累大量底层技术、沉淀了大量的人才,这些都将推动整个行业的持续爆发。姜毅表示,随着制作方对成本控制的诉求就会越来越强,数字化的影像呈现代替人工将成为一个刚需。随着科技的进步,相关技术发展的越来越简单好用、数字化的影响会越来越逼真,这也会让数字化在舞台表演中有更多的用武之地。

作者丨王伟

编辑丨邱江勇

美编丨马利亚

监制丨连晓东

The End