在通信和交通技术不算发达的时代,十年乃至几十年都是寻常事,很多超越人类当下技术能力的设想刚刚被提出时,常常会被误解,直到它真正成为现实生活中的一部分,这中间总需要很长时间验证。
题图 | 视觉中国
一项技术从大胆设想到成为现实,再到改变人类生活需要多久?
在通信和交通技术不算发达的时代,十年乃至几十年都是寻常事,很多超越人类当下技术能力的设想刚刚被提出时,常常会被误解,直到它真正成为现实生活中的一部分,这中间总需要很长时间验证。
但元宇宙的发展速度远超人们的想象,今年的CES2023(国际消费类电子产品展览会),规模比2022年增长了70%,元宇宙成为技术焦点,全球众多大厂都在AR/VR新品及元宇宙生态布局继续发力,产品类目与功能令人目不暇接。
2022年,元宇宙离概念更远,离人们的生活却更近。
在现实世界之外,一个能实现虚实结合的世界,一片能供人类摆脱物理世界限制的全新土壤变得极具吸引力,技术的发展也为其实现提供了土壤。近些年来,沉浸式计算、边缘计算、深度学习、去中心化网络、数字钱包、感知科学、渲染引擎等技术的突破,让人类的大胆狂想逐渐照进现实里。
打破第四堵墙
文艺作品,通常是人类狂想的试验场。
很多时候它还承担着现实与未来之间的摆渡作用,将一些大胆的未来狂想体验展示给害怕变化和未知的人们,测试他们当下的反应。
比如早在1999年的《黑客帝国》,人们就曾浅窥元宇宙的初貌,只是创作者对其的描述更消极,这也代表着当时人们对超现实数字化世界的态度。
但到了2018年的《头号玩家》和2021年的《失控玩家》中,情况就发生了变化:整体的美术设计风格变得轻松明快,光鲜亮丽,观众也开始接受将现实世界数字化、游戏化的可能性,一直到《堡垒之夜》带人们体验了一次相对成功的虚拟世界狂欢。
未来变得不再令人恐惧,反而有了关于生活还能如何改变,我们还能得到哪些新体验的期待?
介于影视与现实之间的综艺率先迈出了打破第四堵墙的脚步。 第四堵墙 是法国戏剧家让 柔琏在1887年提出的,他的本意是舞台前沿应是一道第四堵墙,对观众是透明的,对演员来说是不透明的,演员要表演得像在自己家里那样,不去理会观众的反应,任他鼓掌也好,反感也好,只在自己的空间内表演。
但从娱乐内容发展的角度而言,越来越多的大型娱乐项目都在尝试打破第四堵墙。
综艺,常常是观众代入感最强的艺术形式。在现实的综艺中增加虚拟内容,通过头盔/眼镜将参演者和观众带入同一个世界,增强沉浸感和互动感,这种尝试类似于在虚拟游戏世界增加现实活动和现实明星,都是人类在完全的元宇宙世界前的尝试和融合,而目前的技术也完全能够实现。
《元音大冒险》就是现实与虚拟相结合的一档创新综艺。
节目中,主创团队构建起了一片完整的虚拟月球空间: MEMOON元音大陆 ,那些令过往从业者们想都不敢想的舞台、画面和动作形式一一被实现,让节目嘉宾和观众一次又一次穿梭在虚拟和现实世界之中。
当人类进入到虚拟时代的时候,我们的生活、娱乐、体验会变成什么样?想太多没有用,不如用一档综艺节目来代替大家进行全新的体验。 在接受媒体采访时,导演陈伟表示 这是全球第一档虚拟现实游戏闯关真人秀,没有先例可循。
《元音大冒险》遵循了 先有虚拟空间,再有综艺节目 的理念。节目组先行开发出了一个虚拟互动空间 元音大陆 ,再邀请艺人们在虚拟空间里进行真人秀的录制。
为了完成这一点,打造出全球首个将虚拟科技与游戏闯关真人秀相结合的综艺IP,团队采用了动捕、面捕、虚拟建模、XR等多项前沿技术;从去年3月就开始进行虚拟人原画创作,经历了漫长的筹备过程;整个项目现场日常有110多个工程师、50多个视觉设计师、近60个动画设计师在背后做技术支撑。
这是一次对于当下综艺市场来说颇为冒险的创新,但也是人们在综艺创新和元宇宙融入生活这两个方向上的必要探索。
创新需要技术与内容都恰如其分
在《元音大冒险》之前,国内也曾经有过一些以元宇宙概念为卖点的综艺节目。但由于节目玩法和技术创新不足,更多只是概念先行、噱头大于实质,观众反响并不强烈。
相比同行们,《元音大冒险》在内容和技术两个方面上都作出了革新,而这两个方面又有机结合在了一起。
内容设置上,节目组虚实结合,让前沿科技引爆观众情绪。例如第二期节目中,主创还原出了2017年说唱巅峰之夜总决赛的同款火车头舞台,GAI周延和妻子王斯然作为 关主 ,共同演绎经典作品《虎山行》,令观众在 回忆杀 中激动不已;而到了第四期,节目组利用岩浆、红土等元素堆出了一个逼真的战场废墟,咆哮的战鼓声中,虚拟场景对观众情绪的煽动力达到了顶点。
事实上,几乎所有能引领行业的爆款,背后都需要技术性的突破。
譬如电影界创造多次奇迹的卡梅隆,《阿凡达》的创意在1995年就有了,但相关技术,比如动作捕捉等却直到9年后才成熟。《阿凡达》之后,这些技术被用到了各行各业当中,甚至成为了元宇宙实现的前置条件。
《元音大冒险》之所以能在前辈的基础上更进一步,同样离不开骁龙提供的最前沿的技术。
借助搭载骁龙旗舰手机支持的高通AI引擎,及其专门面向AI神经网络的硬件加速单元等技术的支持,所有的细节、场景、表情,都仅仅只是通过一个头盔、一部搭载着骁龙芯片的智能手机,就精准地映射进入了 元音大陆 中。
接受采访时,高通公司产品市场总监刘晓光表示,相较于依赖后期制作的电影,综艺节目的现场观众需要看到实时的画面并打分。这涉及到实时数据的输出、采集、合成,进而还原演员的面部表情和动作等多方面技术,而传统的电影面部和动作捕捉技术不仅设备极其昂贵,并且需要依赖后期进行处理,无法实时运算。为此,骁龙提供了高精度的便携AI面部捕捉方案,以及一整套动作捕捉和实时运算输出的技术支持。
其次,因为演员需要一直表演,设备也需要连续长时间进行大量数据的处理工作,这很容易引起设备发热,进而性能下降,导致数据不稳定甚至丢失。关于这一点,现在市场现有的解决方案都有明显不足。 这次我们充分的利用了我们骁龙8移动平台的能效和性能优势,以及专业的AI技术,对这次突破性的元宇宙节目的制作提供了有力支持和保障。 刘晓光表示。
最后,也是最关键的,上述这一切,都仅仅依靠一台搭载骁龙的旗舰智能手机来完成。小小一部手机,需要搭载更强大的算力以及神经网络算法。这一切都离不开高通AI引擎,及其专门面向AI处理的神经网络硬件加速单元。
红点即人脸特征检测点
搭载骁龙移动平台的智能手机可识别多达300个人脸特征检测点,结合来自高通合作伙伴相芯科技的算法,能够为明星嘉宾实现精确的实时AI面捕和超过50种表情识别,精度和能效均领先市面现有解决方案,能够支持最高8路信号,驱动8个虚拟形象。
2004年,为了实现高精度动作和面部表情捕捉以及特效,一部电影需要花费数亿美金,然而到了今天,以高通AI引擎技术为代表的技术再实现这一切时,成本与效能已经发生了翻天覆地的变化,曾经只有世界顶级导演用得起的技术,如今也能在综艺中轻松落地。
在《元音大冒险》中,骁龙将算法和设备硬件都做了极大优化,让民用设备不仅做到了专业的事,许多指标上甚至超过了专业工具。
我们不能否认卡梅隆这样先行者带给整个行业的刺激和加速,就像如今《元音大冒险》这样的节目,同样是元宇宙领域的先行者,它在商业和内容尝试上的成功,也将反哺技术的飞跃,最终让元宇宙离人们的意识和生活更进一步。
通往元宇宙的钥匙
目前技术的强化和感官的提升,已经让人们具备了将现实世界融入虚拟元素的条件,比如在数字世界构建资产、构建新的数字文化,将现实世界的资产、文化、信仰扫描进数字世界,也可以完全构建脱离现实的Metaverse,短暂的在其中娱乐、社交和体验。
但最终图景的实现还要取决于沉浸式体验技术、身体数字化、意识数字化以及底层算法、算力和带宽、硬件等技术的突破,而目前最关键的一步是人类感官数字化,比如能支撑高精度人脸特征检测和捕捉的算法和AI技术的发展,更深一步则是底层芯片的进步。
综艺只不过是生活的提前预演。元宇宙的可能性,当然远远不止于此。
以制造业为例。制造业遭遇了疫情冲击,当设备发生故障时,专家无法到达现场检修,生产线只好停摆。为了减少损失,线上协同的需求开始急速上升。这样的情形下,AR设备成了最为合适的工具,在设备的协助下,现场维修人员将面前的视角传输给远端的专家,而专家将解决方案的图纸投送到现场人员佩戴的AR眼镜屏幕上,虚拟图纸和与实景零部件进行叠加后开启维修,双方协同、合为一体。一方面降低维护和沟通成本;另一方面,通过远程终端指导工人规范操作,杜绝风险。
可以预见的是,元宇宙将会成为互联网的未来,而随着相关技术的发展和演进,全新品类和形态的终端将不断涌现,催生出无数令人激动的新用例。
而基于在移动连接、网联计算和智能领域的领先优势,骁龙凭借领先的软硬件AI能力,出色的连接、AI、XR、计算、图形、音频等技术,为这一系列崭新的元宇宙体验铺平道路,推平门槛,将越来越多的智慧体验带给更多用户,增进工业界、医疗界的运作效率,为消费者和企业提供定制、优化的体验。
《堡垒之夜》和虚幻引擎的开发公司Epic Games的创始人 Tim Sweeney 坚持认为互联网诞生之后,我们就生活在与我们现实世界平行的数字世界之中。
元宇宙并不会一下子就像《头号玩家》中所描述的那样,直接被构建为一个完全脱离现实的虚拟世界,而是从交谈的数字化、社交、工作的数字化,过渡到虚拟现实结合,最终才能抵达我们的幻想绿洲,这一切都需要技术来照亮前路。