本文来自微信微信官方账号:易娱乐观察,文/大艺人。
在长达一小时的演唱会中,为七位歌手提供了赛博朋克、黑暗天梯、虚拟城市、梦幻岛等七种不同的舞台场景,打造出完全契合他们音乐风格并随之变化的视觉风格,这在以往的传统现场演唱会中可能是不可想象的。

但当这一切都放在绿屏搭建的虚拟空房间里,一切都显得轻松多彩。
这个例子是阴超实验室的第一场说唱表演,是芒果TV在中国做的第一场虚拟现场演唱会。曾经被认为过于天马行空的想象正逐渐成为现实,虚构与事实的界限正在被技术打破。
《潮音实验室》虚拟演唱会7人组说唱歌手在符合他们音乐风格和个人艺术表达的虚拟场景中表演,让音乐重获视觉表达,艺术表现不再受空和技术的限制。更重要的是,借助虚拟音乐会,观众有了全新的音乐会体验。
以技术引领内容创新的流媒体平台将进一步打破虚拟与现实的界限,带来新的娱乐升级。
01虚拟空房间沉浸式说唱表演,弹幕惊呼“惊艳”
霓虹闪烁的赛博朋克之城,特立独行的形象空,色彩鲜艳的汽车,微风中摇曳的棕榈树。
七名说唱歌手每人表演了两首歌。虽然整场虚拟演唱会只有一个小时,但整场演出有七个完全不同的虚拟场景。不同风格的舞台场景共同构成了一个耳目一新、个性十足的说唱新世界。
娱乐圈近十年一直在拼内容实力,现在却进入了需要下一代内容的分水岭。谁能做出消费者真正感兴趣的内容,并在体验上有所创新,才是成功的关键。同时也将形成全新的商业模式。
事实上,娱乐圈的每一次虚实结合的探索,都是一次由次元墙发起的“破壁行动”。
“阴超实验室”虚拟演唱会说唱专场无疑是打破“次元墙”的一次尝试:即在有限的三维屏幕中,蕴藏着无限的信息量。XR技术在一定程度上打破了三维空间的时空限制,将观众带入了更多维度的空间空中,享受前所未有的沉浸感和震撼。
《潮音实验室》虚拟演唱会当然,除了简单的“视觉冲击”,阴超实验室虚拟演唱会rap专场的细节中还隐藏着许多技术深度和项目内涵:整场演唱会采用全球顶级的3D深度实时虚拟系统,首先真人可以实时与虚拟现实互动,打破次元壁,其次实现虚拟与虚拟多摄像头追踪,甚至在绿屏前也能显示镜头的运动调度,最后景深光照可以无限还原真实场景。
多摄像头完成对真实世界空和人的实时3D深度计算和重建,然后将重建的人和物融合到3D虚拟场景中,使人可以在虚拟空房间中与虚拟的人、场和物进行实时交互,同时实时渲染现场视频流。
要达到最好的效果,最后的成败在于算法。基于深度信息算法,呈现3D 空与实时角色的实时交互体验,自主研发的实时光影合成算法提高了3D 空之间真实角色融合的准确性和质量。正是这些技术的应用,才能带来极致的视觉体验。
和台下第三位选手白吉乐一样,他的舞台完全是根据他的歌来设计的。一望无际的天空中飘在云端的弯弯曲曲的道路空,色彩鲜艳的汽车加上棕榈树,不同的视觉元素增添了丰富的细节。动感的道路和空中浮动的仪表盘,提升了整个舞台的纵深感和纵深感。
最后出场的AJ莱·于哲在整个场景中使用了黑白色调。水中的圆月与群山融为一体,仿佛从水中喷涌而出。水和天空都是一样的,明亮空天空中孤独的月亮让整体的视觉更加高级。开场给了他一个在实景中无法实现的超级深度镜头,营造出强烈的空感。为整个视觉场景提供充足的空房间,让观众拥有最大最独特的视角。
《潮音实验室》虚拟演唱会随着他第二首歌的旋律响起,后面的场景也从一轮满月变成了一双从满月伸出的手。歌手双手站在银河中,银河如梦。然后利用光影带来立体效果,让整个场景更加生动,歌曲的意境在视觉设计上得到最好的传达。
每一首歌,每一个表演元素,甚至歌手对个人作品的想象和情感都在舞台上形象化的呈现出来,相当于在表演过程中为每一位艺人提供了自己的专属领地。而这种虚拟场景可以进一步放大舞台艺术的无限想象,尤其是那些过去在现实中无法实现的场景。
在这些完全为个人风格打造的“舞台”上,歌手们自然可以表现得更加忘我。
另一方面,“阴超实验室”虚拟演唱会说唱专场实现了从过去人与舞台的合作到今天人与舞台360度合作的技术突破。从评论的角度来说,当我们谈到“沉浸”时,我们总是下意识地站在观众的角度去思考。其实表演者本色的沉浸也很重要。
但传统的实景舞台有很多局限性:比如为了增强舞台的动感,艺术家不得不适时上电梯,或者在舞台布景区寻找自己的区域。当然更重要的是,不同的场景费时费力。传统的演唱会,往往会有很长一段时间的黑暗等待舞台切换。

当然,虚拟制作并不完全比传统演唱会简单。相反,虚拟演唱会对镜像运输的要求更高。因为虚拟演唱会的真实舞台空只是由几块绿屏拼成的空房间,不同于传统演唱会的巨型舞台,另外在虚拟视觉场景的配合下,嘉宾活动的空空间有限。
《潮音实验室》虚拟演唱会场景搭建当然,虚拟直播对于依靠技术驱动内容创新,提升互动感,有很大的使用价值和现实意义。
虚拟直播本质上是用一个实时渲染,任意变化,甚至是用户驱动的虚拟舞台来承载明星的表演。舞台的变化要和艺人的表演无缝衔接,舞台的变化要和音乐的节奏、歌词无缝衔接,所以算法在其中起着重要的作用。一方面舞台特效和移镜特效是和音乐挂钩的,另一方面舞台的变化也要随着表演者动态变化。未来观众的互动也会实时改变舞台,虚拟直播会越来越像一个群体互动游戏。
从目前的效果来看,阴超实验室的虚拟音乐会是一场成功的实时“云表演”。
娱乐行业正在被科技深刻改变,人们在寻找一个答案:科技与娱乐结合的终极形式是什么?不断追求内容和技术创新的芒果TV,以“阴超实验室”虚拟演唱会的品牌给出了自己的答案。
02流媒体进入技术驱动内容时代,芒果TV给出全新解决方案。
事实上,在疫情对全球线下娱乐产业造成巨大冲击后,线上娱乐也借此机会主动引领变革。
从去年开始,BTS、BLACKPINK、Billie Eilish等几个最著名的音乐团体和歌手,通过XR、多视角观看等技术和互动方式,提高了演唱会的制作水平。
从这种内容呈现和资本流动的趋势不难看出,流媒体竞争上半场的竞争往往是搭建平台,下半场的竞争则是通过技术引领内容创新。
某演唱会中无数萤火虫在光影森林中翩然过去的“芒果模式”是改革抓住4G移动互联网崛起机遇的产物。随着5G网络的大规模落地,5G不仅为超大内容在平台上的实时传输提供了支持,更因为其高速、低时延、大容量的特性,对内容创作体系进行了深度重构。
在这个层面上,芒果TV的部署是走在前列的。在2019年举办的中国新媒体大会“5G时代的新媒体变革”论坛上,芒果TV总裁蔡怀军曾表示,做5G时代创新引领的媒体平台,主要包括两个层面。一种是为我所用,坚定不移做内容;二是拥抱技术,坚守平台价值观。
2018年,芒果TV成立创新研究院,对5G、AI、VR等前沿技术进行前瞻性布局。去年,芒果TV还建设了芒果云技术和大数据应用中心,为即将到来的5G时代做铺垫。
5G高速对时间空关系的重构。比如电影《Ready Player One》中构建的虚拟世界,在用户体验层面,时间空关系的边界完全模糊。沉浸式体验不再需要苛刻的场景和昂贵的声光设备,可以随时随地切换模式。沉浸式视频将是一个巨大的市场,但也对平台和内容提出了很高的要求。
基于5G和AI技术的积累和对内容趋势的理解,芒果TV在行业内进行了互动视频创新的尝试。
2019年初,芒果TV推出的互动剧《头号嫌疑犯》和芒果互娱去年推出的互动游戏《记忆再现》。其中,互动剧《头号嫌疑犯》采用“边看边玩”的沉浸式互动体验,将内容创作与互动技术有机结合。此外,芒果TV还为此开发了互动剧制作平台,为下一批互动产品的制作创造了技术基础。
互动剧里提示线索同时,较低的延迟带来了创建交互关系的新范例。比如互动剧,几千万用户成为内容的主角,推动剧情进展的关键要素,内容的创造者。比如《阴超实验室》虚拟演唱会rap专场,其直播系统打通了芒果TV中间站,创新性地实现了虚拟3D场景中互动礼物的触发和融合,让直播更像一场互动游戏。
更重要的是,目前的流媒体平台必须不断探索技术前沿,加大资金投入几乎是必由之路。芒果超媒体作为一家上市公司,近两年不断投入资本募集。比如引入中国移动全资子公司中国移动资本,也显示了芒果TV通过增加更多内容,打造高门槛、长篇幅视频的决心。此外,芒果TV还受到一些新的内容消费模式的推动。
作为大型流媒体平台,除了互动剧、虚拟直播等技术创新,另一方面,大量的数字基础设施也不可或缺。
比如云数据、云计算、云存储等技术,大大降低了对用户终端设备的要求,从而降低了交互和体验的门槛。5G时代,终端将只是一个屏幕,而云将成为新的流量入口,产业格局的巨变也随之而来。2018年底,芒果TV与华为签署战略合作协议。未来,它将在5G商业网点上运行更多内容,并在技术和用户之间建立一座桥梁。

《阴超实验室》虚拟演唱会说唱专场更像是芒果TV在新兴技术探索布局上的一次全面成果展示。2016年以来,芒果TV不断积累AR/VR等新技术,至今已推出包括虚拟主持人“尧尧”、AR明星合拍互动系统、互动视频平台、IMGO超高清视频修复增强平台、互联网4K超高清制播平台等一系列5G、AR/VR、超高清视频技术创新。
《潮音实验室》虚拟演唱会9月22日,芒果超媒体也在投资人互动平台上向外界明确表示,已陆续与中国移动、华为等公司达成相关合作协议,并与高校合作建设国内首个、全球第三个VR应用实验室。多方共同努力,持续共同探索智能图像视觉、光场技术、AR/VR、5G全息等核心技术。
毫无疑问,9月29日阴超实验室的虚拟音乐会只是一个开始。
相比视频流媒体行业领域的竞争对手,芒果TV具有成熟的内容制作能力、广泛的用户基础和明星生态等优势。一旦能在技术创新上占得先机,无疑将继续放大芒果生态的效益。
与此同时,传统的广电融合也在经历人工智能、5G、大数据技术的冲击。以移动智能终端为载体的新媒体成为主流。如何利用新平台的特点,打造相应的内容,引领文化利益,成为广电的转型难题。电视在技术实践和改造上的示范效应,显然可以为整个行业突破困局,提供一些更为确定和前瞻性的参考价值。


