跨年晚会,各大电视和视频平台各出奇招同时竞技,众星云集大玩跨界,5G、AI、MR新玩法看点十足。《梦圆东方•2021东方卫视跨年盛典》就运用了诸多科技玩法,给观众带来了如梦如幻的视听体验。据悉,为晚会提供动态光场采集&XR虚拟制作技术的幕后团队正是叠境数字和SMT,双方共同携手打造了这场燃炸的视觉特效。

舞台上陈小春正底气十足的和主持人表明自己“一家之主”的家庭地位,怎料身后大屏中应采儿瞬间出现凝神静听, “一步出屏”从屏中跨到舞台要他好看,夫妇俩的欢乐互动让观众阵阵尖叫。为呈现这场颇具颠覆性的混合现实舞台特效,叠境和SMT成立的项目团队和导演团队进行了多轮头脑风暴,最终选择了动态光场采集&XR虚拟制作技术方案。

通过动态光场影棚对明星进行立体拍摄,历经一道道工序,真实地还原被拍摄人物的每一个动作、表情及衣服材质,在播出端配合跨年晚会舞台进行调整优化,最终使得光场重建的虚拟数字人 “破屏而出”,打破传统直播连线的互动方式,展现了极强的舞台空间感和视觉冲击力。

(叠境动态光场采集)

值得一提的是用于动态虚拟人制作的叠境数字光场采集系统,它是一套无需穿戴动捕设备即可实现360度真人动作采集和拍摄的解决方案,叠境虚拟数字人解决方案的优势在于,动态数字人的色泽/光泽还原度高,无论体型、肤质、纹路、服装褶皱甚至毛孔都能保持本人的真实特点和辨识度,使用户具有强烈的代入感和沉浸感,实现线上形象与线下场景的无缝衔接。这一全新的内容创作方式提升了三维内容制作的质量,在降低成本的同时大大提升了制作效率。

 (左为常规渲染人物模型,右为叠境生成的人物模型)

在动态三维虚拟数字人应用方面,叠境与芒果TV、腾讯、中国移动、中国联通、晨光文具等已合作了成熟的案例。随着5G商用部署加速,得益于5G的高速率、低时延和高可靠性优势,XR迎来全面的发展和变革,可提供更逼真、更高速的沉浸式体验。未来,5G+XR在包括影视内容制作、体育互动,教育培训、工业制造、文化旅游和新零售等领域都具有广泛的应用前景。