涨姿势：xR技术大咖方承天解析星光xR虚拟演播室

在全球整个形势之下，各行各业都在发生了变化。在舞美行业，目前最热门的就是XR。

越来越多的演唱会、发布会现场、电影拍摄现场以及电视节目等场景，开始运用行业内最新的的xR技术，大幅度提升画面的科技感和真实感，开辟拍摄制作又一新玩法。那XR技术是如何融合，又是如何给屏幕前的观众们呈现如此炫酷画面的呢？

下面且听本期特邀来自disguiseChina方承天老师，为大家介绍星光600㎡xR虚拟演播室沉浸式技术。

方承天：disguiseChina技术总监、中央广播电视总台牛年春晚xR技术统筹、XR系列片《深潜》《长征八号》等xR技术支持、The9《虚实X城》xR演唱会XR技术支持。

小编这次有幸采访方承天老师，请各位粉丝做好准备，讲课啦！来看看吧

一、XR技术浅析

星光影视园：方老师，在目前的实际应用领域，炫酷逼真的XR场景怎样制作的，请您给大家解析一下吧。

方老师：大家好，在虚拟制作中，首先重要的是快速且精准的摄像机追踪系统，通过这套系统，我们可以以极低的延迟为代价，在虚拟系统中完整模拟真实摄像机的实时位姿和镜头参数，并将这些信息传递给渲染引擎，从而计算出正确的画面并回传。另一方面LED屏幕可以将大部分拍摄内容显示在背景上，通过目前的SpatialMapping，也就是我们说的动态的Perspectivemaping，能将画面以正确的透视关系呈现出来，并且和真实世界的人物和事物叠加在一起进行拍摄。

上面说的是一个MR的流程，此外还有AR层面的内容，以同样的方式，叠加在整个画面的最前层，从而实现“现实层”，也就是刚才提到的真实人物和事物，同时叠加LED，也就是MR中的“后景”，以及AR中的“前景”的效果。并组合成完整的画面。

二、XR制作流程

星光影视园：cool，方老师，XR制作流程您给详细介绍一下吧。嘻嘻！

方老师：OK，简单说呢，这个流程是这样理解的，我们以一帧画面的生成为例，流程如下：

01、摄像机追踪：把摄像机的各个参数回传到disguise系统内，再传输到UE、Unity、Notch等引擎当中。

02、渲染引擎渲染：引擎收到摄像机数据后，在场景内模拟出相机的状态，并根据这个状态，渲染出摄像机拍摄的一帧画面并回传disguise系统。

03、disguise系统收到这一帧画面以后，由于内部已经有了LED的精准模型，会根据摄像机的透视关系，把画面拆成“MR”和“SetExtension”两部分。并把MR的部分输出给LED。

04、LED显示出这一帧画面之后，连同屏幕区域内的人物和事物，真实的摄像机会拍摄这一帧画面，并把拍摄的一帧发送回disguise系统。

05、Disguise系统收到了拍摄的这一帧，再把刚才拆分画面剩下的“SetExtension”贴回画面。形成一整帧16：9的画面。同时再在上面贴合AR画面，并最终输出。

06、这一整帧画面终于呈现在团队和观众眼前。

三、XR技术和行业未来的格局

星光影视园：谢谢方老师，XR制作太神奇了，现在XR技术基本覆盖了电影电视节目制作、线上演唱会、产品发布、电竞赛事等各个行业，也改变了我们的新“视”界，那么，您对XR技术未来的格局有什么看法呢？

方老师：说到未来的格局，其实谁也不能做一个精准的预测。但是经过这次疫情，整个行业开始进行从线下到线上的一个转换。我预计随着疫情未来的缓解，虽然不知道是什么时候，但总有一天吧，线上和线下会慢慢融合，从目前主攻线上的的玩法，逐渐变为相辅相成，真实场景演出和虚拟制作技术，结合在一起，不分彼此。我们始终不能忘记，虚拟制作，还是为创作和拍摄服务的，越是做虚拟，我们越应该记得，我们的存在是为了现实更加好，将虚拟作为现实的补充，而不是为了替代现实，这是我个人的一个思路。如果虚拟取代了现实，当然也是进步，甚至是飞跃，但是这是动画行业的巨大进步，而不是演出行业的。