当前位置:中国生活都市网 >> 看科普 >> 文章正文

中国移动米微与银河威科技打造全MR虚拟舞台表演

发布于:2020-12-06

2020年12月3日,中国移动米谷公司与中国领先的虚拟表演和竞赛服务提供商GVR合作,打造了中国首个全磁共振虚拟舞台表演。这个原本每年都在南京举办的原创音乐节《呼唤之夜》,今年全线制作推广。据了解,一方面是受疫情影响,受众受到限制;另一方面来自国内5G用户快速发展的实际需求。目前,中国移动拥有1.3亿5G套餐用户,如何在5G时代提供高质量的差异化内容正成为未来用户的重点。

早在2020年,疫情的爆发和虚拟技术的特点让因为隔离而呆在家里的消费者以前所未有的速度接受虚拟沉浸式体验,这也为加速虚拟现实的普及提供了一个独特的契机:

2020年4月,休斯顿说唱歌手特拉维斯斯科特(Travis Scott)在《堡垒之夜(Fortnite)》虚拟世界举办的一场演唱会,引爆了整个网络。据路透社报道,这场音乐会吸引了2770万观众,观看次数超过4500万次,创下了0.103.010人次的单场出席记录。作为虚拟化身出现的观众可以随着充满视觉效果的表演摇摆和跳舞,并为斯科特的说唱欢呼。

2020年11月,腾讯音乐宣布与VR表现服务商Wave达成战略合作协议,将以股权形式投资。根据合作协议,双方将共同开拓VR音乐会的蓝海市场,共同开发高品质的沉浸式音乐会内容,提供面向世界的高品质音乐内容和创新的互动虚拟音乐娱乐体验。

可见,虚拟技术对娱乐圈的价值逐渐凸显,比如沉浸感、互动性。这些旨在开辟未来娱乐体验的新技术会给用户带来怎样的革命性体验?我们来看看。

40天打造“召唤之夜”虚拟演唱会

制作团队GVR产品总监孟超表示:“本次虚拟演唱会共有11组艺人,制作周期不到40天,包括虚拟舞台的设计、艺人的拍摄与动作设计、场景融合、特效制作等。”

在不到两个月的时间里建立一个虚拟音乐会并不是一件容易的事情。为了更好地呈现这场虚拟演唱会,GVR从四个方面优化了技术:

1.虚拟场景和真实场景的融合

在这个虚拟演唱会场景中,GVR在虚幻引擎中采用了UE4的虚拟制作技术。将现实生活中的图像组合成一个完整的虚拟场景,实现切换,就像在虚拟场景中重现这场演唱会,然后通过虚拟相机将其重新拍摄成电影。

2.渲染技术对接

虚拟演唱会场景由3D软件设计搭建,但传统3D软件耗时过长,无法按时完成场景渲染任务,需要与虚幻引擎UE4对接,面临模型优化、材质重构、灯光、动画、特效等一系列修改。

3.构建数据缓冲池

在传统的MR场景拍摄过程中,虚拟引擎中的真实摄像机和虚拟摄像机与真实拍摄画面的匹配和同步一直是一个难题。这个虚拟演唱会面临着大范围摄像机的跟踪、匹配和同步问题。GVR建立了一个数据缓冲池,用于缓冲和匹配摄像机的运动数据和实拍图像,从而实现完美的同步。

4.嵌入MR特效

为了实现场景之外的体验,GVR在场景中设计了一些超现实的内容,如演员周围的蝴蝶先生、巨型烟花、门户网站等特效。

特效是在纯粹的虚拟环境中设计和搭建的,音乐卡片是在虚幻引擎的序列中制作的。干扰匹配是通过拾取音乐中的波形来进行的,这样效果就可以随着音乐的变化而波动。另外,每一次灯光变化,背景屏幕变化,每一次烟火、烟雾、MR蝴蝶特效触发,也需要大量的优化和无数的调试。

虚拟演唱会技术蓄势待发,当前的环境加速了人们从现实世界向虚拟世界的迁移。虚拟演唱会带来的不仅仅是现场的氛围,还有现场之外的惊喜。孟超说:“下一步,GVR将结合更多的创意元素来设计和实现一般的虚拟音乐会,使虚拟音乐会成为一种新的音乐表现形式。”

XR技术增强了娱乐业的实力

整个虚拟演出采用了XR技术。XR,或称扩展现实,是指现实和虚拟相结合的环境,可以通过计算机技术和可穿戴设备与人类交互。XR是AR、VR、MR等形式的总称。三种视觉交互技术的融合实现了虚拟世界与现实世界无缝过渡的“沉浸”体验,所有XR内容都可以通过手机、电视、VR头盔多终端实时体验,不受头盔硬件的限制。

2016年,一个由专业电影制作人和工程师组成的团队决定专注于使用XR技术来提供革命性的娱乐体验。其核心专利包括三维互动直播、虚拟社交、XR特效包装等。并且一直专注于顶级赛事、演出和大型赛事。这家公司是GVR。

2019年4月,公司推出的《GVR第二幕》在CBA总决赛中亮相。先后完成了华为mate30产品发布会、p40产品发布会、英雄联盟“德玛西亚杯”总决赛、银河未来乐坛、世界VR大会等一系列国内顶级演出、比赛和大型活动。

从技术本身来看,虚拟技术借助3 D建模和实时渲染可以提供超现实的体验;同时,虚拟表演也避免了排队和长途旅行的麻烦,可以更自由、无障碍地近距离观看偶像表演。当然,虚拟表演不能代替真实的线下表演。也许技术永远无法复制现场音乐事件带来的所有感官体验,但毫无疑问,VR技术正在改变我们体验事物的方式,它们正在提供越来越多的场景之外的体验。

2020年是5G商业化的第一年。XR作为下一代移动智能平台和5G赋能下的重要应用场景,深入到智能制造、教育、游戏、体育竞赛、军事等领域,尤其是体育比赛和直播游戏,可以吸引很多人参与,加速XR技术的商业落地。XR的内涵继续向外延伸,刷新大众对视觉形象的理解。

未来,所有基于现场艺术的场景,包括表演、比赛、大型活动等定制场景,都可以通过虚拟技术体验更好的虚拟现实。

对于普通用户来说,专业级别的大规模VR直播和3D交互技术的结合,可以实现虚拟头像真实的入景体验。在顶级赛事、演出、大型赛事门票难拿的背景下,虚拟舞台将成为粉丝的最佳选择。

摘要

2020年是曲折的一年。在疫情和技术的双重推动下,人类社会正在开启新的未来。

马花藤在《堡垒之夜》的序言中说:“现在,一个激动人心的机会来了。经过十年的发展,移动互联网即将迎来下一次升级。我们称之为全真互联网。前言接着写道:“这是一个从量变到质变的过程,意味着线上线下的融合,实体与电子手段的融合。虚拟世界和现实世界的大门已经打开,无论是从虚拟到现实还是从现实到虚拟,我们都致力于帮助用户实现更真实的体验。随着VR等新技术、新硬件、新软件在各种场景下的推广,相信又一次大洗牌即将开始。就像移动互联网的转型一样,上不了船的人会逐渐掉队。"

我们不知道M区的虚拟表演《召唤之夜》是否开启了一扇未来之门,一扇XR娱乐圈未来发展之门。但可以肯定的是,虚拟与现实的交融正在开辟一个全新的世界,娱乐圈将首当其冲。

标签: 银河 技术 演唱会