AI技术为超写实数字人带来了更高效的生产流程,更逼真的外观和表情,以及更智能的交互能力,进一步推动了超写实数字人的发展和应用。
在数字化浪潮下,VR/AR等技术日新月异,不断引领我们与虚拟世界共振,与真实世界交互。元宇宙技术逐渐从幕后走向台前,为科技的进步和文化的交融打开想象空间。
从硬件到软件,从内容制作与分发到应用场景与服务,XR产业不断开拓人类与数字世界的交互方式,众多入局者更是 各显神通 ,致力于让数字万物 活 起来。
于2023世界VR产业大会暨元宇宙博览会期间,新浪VR对凌云光 元客视界总经理熊伟进行了采访。围绕数字人技术、应用和产业发展,进一步了解凌云光 元客视界(下文简称 元客视界 )在元宇宙数字内容智能创作领域的解决方案,探索其背后充满崭新可能的数字世界。
升级骨骼解算技术,FZMotion系统实现多人精准动捕
作为一家元宇宙数字内容智能创作工具平台提供商,元客视界连续15年深耕立体视觉技术积累,打造了集光场建模、运动捕捉、XR虚实融合制作、数字人制作与直播等产品解决方案,为行业提供数字内容智能创作全栈式整体解决方案。
此次参展,元客视界展出了数字人实时直播方案,基于FZMotion光学运动捕捉系统实现了多人的精准动捕。据悉,该系统具有出色的稳定性,已实现支持100+场流畅直播;同时,方案采用超高清分布式实时渲染技术,突破画质极限,可输出4K@60FPS的超高清画面,能够为数字人提供更加逼真的实时动态虚拟场景。
元客视界展位-2023世界VR产业大会暨元宇宙博览会,新浪VR拍摄
展会现场,元客视界工作人员向新浪VR讲解了这套多模态动捕技术方案。据介绍,这套系统的主要通过红外动捕相机发射红外光,红外光发射到表演者身上贴的反光标记点材料还会进行反射,接着反射的红外光会被红外动捕相机接收到,就可以对表演者身上的这个点进行精准定位,再通过算法解算出骨骼信息。动捕数据可以实时驱动已经进行绑定的虚拟人模型,虚拟形象便能同步 复刻 表演者的动作。采用光学运动捕捉技术,精度非常高,可以达到亚毫米级别,同时稳定性强,其应用范围广泛,除了虚拟偶像直播,动画、游戏、影视等行业也普遍用到,降本增效作用显著。
此外,元客视界聚焦 人、场、境 三位一体服务能力,还带来 AI超写实数字人、大场景智能光场重建、XR+VP超高清虚拟制作 等一系列技术能力和案例成果。
AI风口之下,眺望超写实数字人的 下一站
关于数字人技术,元客视界已深耕较久。元客视界的核心能力在于,以视觉图像处理为基础,打造软硬件一体的系统开发以及一体化系统方案。
元客视界总经理熊伟接受新浪VR采访
熊伟谈到,在过去一年里,元客视界一直在关注如何让数字人更加写实,更加贴近大家所感知的真人效果。这两年随着AI技术的进步,大家可能更多的是被数字人的智能化所带动,感受到了数字人更多的应用领域。所以,元客视界也在重点关注如何让数字人更加智能化。当前,智能程度更高的数字人优先得到了更广泛的应用场景,包括智能对话及问答、智能化内容生成、互动陪伴等场景,这些都是元客视界正在关注的动向。
围绕数字人产业的整体发展,熊伟表示,第一,智能化是目前商业化落地最切实的一个应用场景;第二,在虚拟现实里的这些内容起来之后,三维写实化会有一个新的、大的应用场景的落地。整体来讲,目前AI生成的能力已经非常贴近真人了,但是在一些特定的应用场景当中,仍存在不尽完美的地方,因此这些需要在做落地应用之时进行调优,提升其实用化以及商业价值效用。
元客视界展位-2023世界VR产业大会暨元宇宙博览会,新浪VR拍摄
未来,在VR头显能够带来更加成熟的应用场景之时,AI超写实数字人如何高效且低成本地大量出现,这也是需要解决的一项难题,毕竟真正超写实的直播涉及到的制作周期成本较高。从整个行业的发展情况来看,可能在未来的一两年时间里,随着AI技术的引入,超写实数字人的制作,也会用更多AI生成的方式存在,例如Meta这两年发布的Codec Avatar这项新的生成技术,它就是在原来采集了大量高精度的数字人模型以后,后面只用少量的影像就可以高效地生成出超写实的这种虚拟化身,这为我们带来了一些新的技术方向。
云登 滕王阁,感受科技笔触下的文化传承
谈及此次参会感受,熊伟表示,第一,大家的参展热情显著回升;第二,大家的关注点又回到了VR。谈及最新亮相的元宇宙文旅短片《王勃归来》及该项目成果,熊伟感慨,数字化浪潮中,新技术与文旅产业融合的最终目的是展现文化价值,赓续历史文脉。
该项目以数字技术为 媒 ,通过超写实数字人技术,对王勃进行复现,形成在外貌、形体、语音、表演等各方面都接近真人的 AI数字人 ;通过大场景智能光场重建技术,实现对滕王阁3D资产的1:1复刻;此外,基于元客视界虚拟制片流程,再现 王勃 登楼吟诵《滕王阁序》的景观,以及与现场观众进行实时互动的文化氛围。这种新的技术在VR普及以后,会产生大量的应用帮助数字内容更加高效地产生。
面对在元宇宙解决方案上的探索,熊伟谈到,元客视界目前在做的,第一个是元宇宙当中的仿真实训,例如飞行模拟训练、驾驶模拟训练等应用场景,第二个是元宇宙多媒体实验室,例如传统的动漫动画虚拟人物的教学实验室,以及新型的虚实融合的元宇宙内容制作多媒体实验室,这些都是元客视界在打造的解决方案。
熊伟坦言,当我们要真正应用于产业当中的时候,不只是技术的进步,人才的储备也是非常重要的事情,有更多的人才出现,产业才会更加落地。后续,元客视界也将持续推动文旅元宇宙应用落地,全面探索数字化文旅的星辰大海。
结语
当前,数字人技术已广泛应用于游戏、影视、广告等领域。在游戏领域,数字人可以作为游戏角色,提供更加真实的游戏体验;在影视领域,数字人可以作为特效角色,呈现出更加震撼的视觉效果;在广告领域,数字人可以作为品牌形象代言人,吸引更多消费者的关注。总的来说,数字人走进公众视野是技术发展、社交媒体推动以及成功案例等多个因素共同作用的结果。随着技术的不断进步和创新,数字人的应用和发展前景将继续拓展,其在公众视野中的角色也将越发丰富。
据新浪VR观察,AI技术为超写实数字人带来了更高效的生产流程,更逼真的外观和表情,以及更智能的交互能力,进一步推动了超写实数字人的发展和应用。同时,技术驱动、多元化场景应用、个性化需求定制,将是数字人产业发展的大势所趋。元客视界在数字内容智能创作方面的成果,为开发者提供了创建XR应用程序的窗口,同时也为用户提供了与虚拟环境进行交互的工具。将目光看向数字人产业链,从制作工具到驱动运营再到落地应用,数字人的未来承载着人们对数实融合无尽的想象空间。