电话咨询
关注我们
工作时间
在线咨询
rotate
请旋转您的设备
将设备切换到纵向模式以获得更好的体验
2022
07.04
国内首场数字人XR实时直播带货背后的“灵魂捕手”
哇,沐岚好美
6月21号晚上,中国首位实时科技虚拟up主沐岚
进行了长达近2小时的
首先要讲的是虚拟制作,它是将计算机中虚拟场景与摄像机实景视频进行实时合成,使人物与虚拟场景能够同步变化,从而输出高真实感合成画面的视频制作方式,XR虚拟制作必须以LED大屏为背景且有屏外扩展画面。2021年春晚节目《牛起来》便是虚拟制作的典型案例。

 

本次直播,将摄像机跟踪、数字人、动作捕捉、LED大屏、UE5实时渲染等前沿技术或工具,有机结合到了一起。其中凌云光自主研发的FZMotion光学运动捕捉系统部署在场地中,保障了现场“中之人”的动作捕捉与真实摄像机的跟踪,是连接虚拟与现实世界的桥梁。

 

 

为了让沐岚动起来,FZMotion实时捕捉 “中之人”的动作,并融合面部捕捉与手指捕捉设备,将“中之人”的表情、手指动作、身体动作传递给沐岚并对其进行驱动。

 

一套动捕,多种跟踪

观众看到的包含沐岚的图像,其实由多个画面组合而成。一是真实摄像机拍摄到的,包含LED屏上的表演者、基于真实摄像机视角渲染而成的LED屏上画面。二是数字人沐岚,她被以AR前景的方式叠加到了画面一上。当摄像机拍摄到LED屏外的时候,还需要渲染屏外拓展画面,同画面一和二拼接。多个画面虚实融合,呈现给观众。而这一切,都离不开FZMotion的摄像机跟踪与真人动作捕捉。

 

 
 

      由于系统复杂、存在不稳定风险,XR制作与数字人未能在实时直播中普及应用,本次FZMotion持续100多分钟的稳定表现,为数字人XR直播及时注入了一针“强心剂”。同时,FZMotion “一套动捕,多种跟踪”的优势,能够实现多人、多摄像机以及道具的跟踪,更是XR虚拟制作的神兵利器与高性价比选择

 
 

【彩蛋】

沐岚与FZMotion同框解密直播黑科技,下期再会~

 

阅读更多:

<p style="margin-bottom:0px;outline:0px;max-width:100%;clear:both;min-height:1em;color:#333333;font-family:mp-quote, -apple-system-font, BlinkMacSystemFont, " letter-spacing:normal;"=""> 新品发布 | FZMotion光学运动捕捉系统上市!

牛年春晚“牛”科技,华仔一博“云”同台