本次直播,将摄像机跟踪、数字人、动作捕捉、LED大屏、UE5实时渲染等前沿技术或工具,有机结合到了一起。其中凌云光自主研发的FZMotion光学运动捕捉系统部署在场地中,保障了现场“中之人”的动作捕捉与真实摄像机的跟踪,是连接虚拟与现实世界的桥梁。

为了让沐岚动起来,FZMotion实时捕捉 “中之人”的动作,并融合面部捕捉与手指捕捉设备,将“中之人”的表情、手指动作、身体动作传递给沐岚并对其进行驱动。

一套动捕,多种跟踪
观众看到的包含沐岚的图像,其实由多个画面组合而成。一是真实摄像机拍摄到的,包含LED屏上的表演者、基于真实摄像机视角渲染而成的LED屏上画面。二是数字人沐岚,她被以AR前景的方式叠加到了画面一上。当摄像机拍摄到LED屏外的时候,还需要渲染屏外拓展画面,同画面一和二拼接。多个画面虚实融合,呈现给观众。而这一切,都离不开FZMotion的摄像机跟踪与真人动作捕捉。

由于系统复杂、存在不稳定风险,XR制作与数字人未能在实时直播中普及应用,本次FZMotion持续100多分钟的稳定表现,为数字人XR直播及时注入了一针“强心剂”。同时,FZMotion “一套动捕,多种跟踪”的优势,能够实现多人、多摄像机以及道具的跟踪,更是XR虚拟制作的神兵利器与高性价比选择。

【彩蛋】
沐岚与FZMotion同框解密直播黑科技,下期再会~
阅读更多:
<p style="margin-bottom:0px;outline:0px;max-width:100%;clear:both;min-height:1em;color:#333333;font-family:mp-quote, -apple-system-font, BlinkMacSystemFont, " letter-spacing:normal;"=""> 新品发布 | FZMotion光学运动捕捉系统上市!








