这几场沉浸式虚拟演出，带来线上娱乐新体验

2022-03-30 09:32

影像骑士

不久前，国内因疫情原因取消演出的场次约9000场，线下活动和项目面临严峻考验。3年来，越来越多的活动基于各种考虑，改成线上进行，并以各种技术和手段，模糊虚拟与现实界限，带来一种全新体验。

Coldplay X BTS虚拟舞台

美国真人秀节目《The Voice》的决赛季邀请到了乐队Coldplay和韩国男团BTS以特别的呈现方式联合表演歌曲《My Universe》，与以往不同的在于，男团BTS是以3D虚拟形象出现在舞台之上。

两个乐队混合现实与虚拟一起表演，Coldplay在现场演出，BTS的成员则通过体积空间捕捉技术（volumetric capture）创建并使用虚拟引擎进行现场渲染。

体积空间捕捉技术的工作原理是使用一大堆从不同角度同时拍摄的摄像机，通过计算机算法将这些角度的视图拼接在一起以创建3D体积图像。用于一些远程演出中，能捕捉到高度详细的面部表情、服装元素和动作手势，表演者可以犹如在现场一样进行表演。

VFX工作室使用108台360度的摄像机从各个角度记录每位歌手的表演，他们将成为类似于全息图的3D立体形象，而不是平面图像。通过后期根据现场光线、颜色等对3D形象进行合成，让两支乐队能在同一个场景下一起演出。期间还为每台摄影机配备了专用服务器，让导演能够同步看到所有的画面，方便他们进行镜头切换和剪辑。

设计图

为了让BTS的成员能实时出现和消失，团队创建了类似“故障”的效果，让整体呈现充满科技未来感。通过使用Stype的Stypeland插件来获取所有相机跟踪和镜头失真数据，用于重新渲染每个表演者单独画面的选定片段，并对后期特定表演者的口型同步进行帧级调整。

同时，舞台上使用特定的落地灯来帮助Coldplay乐队识别舞台上的虚拟表演者，并进行实时同步和流畅互动。

官方版视频

视频以MV的形式进行拍摄，但使用了相同的原理和技术，画面更加绚丽宏大，更像是一部星际科幻电影，非常值得一看。

英雄联盟的重金属虚拟乐队Pentakill的线上互动虚拟演唱会由Riot Games和虚拟娱乐领导者Wave联合制作，为其新专辑III: Lost Chapter的全球发行造势。全球粉丝皆可参与其中并进行互动，从中看见虚拟娱乐体验的未来。

设计公司Stufish与制作工作室The Mil的CG和实时专家团队合作，为虚拟演唱会创建了一个多维、身临其境的舞美空间。让粉丝们进入一个前所未有的，由想象力极限延伸的幻想世界中与Pentakill 互动。

设计手稿

▼

如此巨大、壮观的舞美设计包括舞台、视频屏幕和灯光、吉他手肩上的舞台雕塑、体育场废墟下数百米的洞穴锻造等，以大型建筑的设计方式来搭建演唱会的整体环境。

设计图

▼

舞台上乐队成员的服装则由Wild Blue Studio根据现场音乐会的整体环境和演唱歌曲的风格进行打造，让他们以全新的面貌亮相。

美国达人秀xR场景

美国达人秀第15季在共7期节目里带来了10场xR场景表演，这些让人眼前一亮的视觉呈现由AOINDMD Studios、Gravity 和 Xite Labs共3个团队参与制作。在60英尺宽的弧形LED舞台上，使用UE4创建逼真的视觉效果，并使用3x Stype Red Spy 系统进行摄像机跟踪拍摄。

能让如此多数字内容创建变得易于管理得益于多个设计团队可以在虚幻引擎中并行工作，通过源代码控制，为每个设计师创建分支以独立工作，然后将他们各自与团队合并。