索尼的模块化黑彩晶VERONA视频墙实现了真正的黑色水平，并减少了反射，如此摄像机内视觉特效制作所示。
最近在现场虚拟制作（OSVP）方面的创新在解决员工技能和成本关切方面取得了很大进展，使制作人员愿意颠覆制片老框框。
这些收获正在影响制作的方方面面。在高端，内容制作人现在可以使用专门建造的OSVP影棚，其中许多影棚是在过去一年左右才开始投入使用的。这些设施具有大规模可扩展的LED屏幕，通常用于影视节目和广告制作。与此同时，内部制作正在使用连接到摄像机到计算机渲染机箱的LED墙模块，这些机箱可以堆叠以支持几乎任何容积空间。工作流程管理系统协调物理和虚拟空间中的动态元素，包括机器人摄像机、3D扩展现实（XR）对象、与屏幕亮度协调一致照亮物理空间的灯光等等。
过程和成本担心
但尽管如此，当涉及到说服项目经理放弃对后期制作的严重依赖，转而在大大减少实景制作的专业知识和技术作前期投入时，下一代虚拟制作方式仍然很难说服人们接受它。
这一观点是下一代虚拟制作主要代言人加里·阿德考克提出的，他利用镜头和摄像机制造方面的专业知识，帮助制作人员有效处理棘手的应用场景。
阿德考克表示，人们通常难以接受把制作建立在一个处理视觉效果、色彩、灯光（它们传统上是留给后期制作）等所有细微差别的前端准备路线图的基础上的想法。
“你必须考虑终点是什么，然后逆向思考，确保你在虚拟制作中设置的东西能把你带到那里，”阿德考克解释说，“对于那些在电影行业工作了很长时间的人来说，这可能是一个艰难的转变。”
特别是当他们必须获得预算批准以支付前期费用时。“我们的粗略计划是每三米的墙都有其自身的计算机渲染系统，” 阿德考克解释说，“当你开始进入100米高的墙时，每隔3米你就必须这样做，突然之间你就有非常昂贵的计算机系统开支。”
他指出，这些设备每台售价在2.5万至4万美元之间，甚至更高。然后是许可和运行摄像机内视觉特效软件（VFX）的成本，如常用的Epic Games提供的虚幻引擎，它结合，压缩，统一帧率，并解析出瞬时场景特定的原始CGI和摄像机拍摄的视频片段，以便在每段墙上同步渲染。
但与实景拍摄成本相比，这些成本显得微不足道，特别是如果摄像机内VFX方法可以提供几乎不可能的真正现实的视觉效果。例如，阿德考克指出，没人能看出2022年上映的《蝙蝠侠》结尾那场疯狂的汽车追逐中没有真正的汽车。他说:“我们已经达到了可以模仿现实世界的程度，这对于电影和电视的制作来说是必要的。”
招聘的挑战
除了这些增加的成本之外，还需要雇用具有新技能的人员和/或重新培训现有员工以适应新环境。Vizrt产品专员雷•拉特利夫指出，由于行业在引进新人方面遇到了困难，这使得这一目标变得更加困难。扩展现实（XR）帮助Vizrt走在了下一代虚拟制作领域的前列。
拉特利夫说：“行业面临的一个重大挑战是缺乏新人加入广播工程队伍。”他从与客户的第一手经验中了解到这一点，这些客户“共同面临从大学和广播相邻技术领域招聘新人才的挑战”。
拉特利夫补充说，Vizrt正在尽自己的一份力量解决这个问题。“Vizrt与世界上许多地方的大学合作，让技术专业的学生接触广播电视领域，培养他们对该领域的兴趣，”他说，“我们也有实习机会和开发项目，我们也在讨论扩大这些机会，以进一步支持建设广播工程人才管道。”
人工智能来救援
由于AI应用的进步，繁重的工作变得不那么繁重了。拉特利夫表示，Vizrt正在利用AI “消除复杂性，为我们的客户带来更多价值”。其中一个更引人注目的恰当例子涉及到解决摄像机内视觉特效最令人烦恼的问题之一，即令屏幕上的人物逼真地沉浸在虚拟环境中。
Vizrt最新版本的Viz Engine实时图形渲染平台在其工作流程中加入了一个名为“Reality Connect”的新AI驱动功能。拉特利夫表示，该解决方案利用AI算法，结合Viz Engine与虚幻引擎集成后不断更新的现场人物3D模型，“显著改善了虚拟环境中的反射和阴影”。
Vizrt的Reality Connect是Viz Engine 5.1的一部分，由Viz AI驱动，使用先进的AI算法实现超现实的主持人沉浸感，包括虚拟演播室和XR布景中的阴影投射和反射。
AI正提供许多其它方法来节省员工的时间，降低执行任务所需的专业知识水平。例如，Vizrt正在使用该技术跟踪场景中的物体，从而不必实施多层跟踪系统。
拉特利夫还提到了最近推出的Adaptive Graphics（自适应图形）工具，该工具允许设计人员一次构建图形并设置参数以自动适应不同的显示，从而无需为制作中使用的每种类型显示手动配置图形。
建立OSVP专业知识
但是，即使有了这些进展，在急需的OSVP专业知识方面，仍有很大的差距需要填补。索尼电子公司（SE）电影制作高级经理杰米•拉福尼表示，缩小这一差距是索尼电子公司和索尼影视娱乐公司（SPE）的当务之急。
这两个部门合作使用索尼电子组件，支持索尼创新工作室的Stage 7的摄像机内视觉特效，Stage 7是索尼的Pixomondo（PXO）部门管理的位于SPE在加州卡尔弗城电影摄制场的一个巨大影棚。
拉福尼说：“（摄制中的）每个人不仅想知道成本是多少，还想知道利用这项技术需要什么。”她指出，这不仅仅是一个对员工进行再培训的问题，这是至关重要的；这也与教育决策者有关。
她说，没有一个对在摄制中使用虚拟影棚说‘是’或‘否’的角色。从副总裁到导演，再到制作人，再到监督公司投资的人，各级管理层都需要有决策方面的专业知识。在底层，一旦做出了执行决定，就需要有见识的监督，“从脚本评估开始，并让员工一起执行项目。”
拉福尼补充道，索尼在填补这些知识空白方面发挥着积极作用。“索尼正在与特定的工作流程集成商、设计师和顾问合作，这样当一家公司想使用索尼的生态系统时，他们就有一个合作伙伴来指导他们完成整个工作流程。这比购买设备要重要得多。”
简化广播电视公司对OSVP的使用
选择正确的设备是扩大OSVP采用的基础。Ross Video虚拟解决方案高级产品经理迈克•帕奎因表示，这项技术的使用“正开始变得越来越主流，部分原因是我们正在让它变得更加用户友好。”
他补充说，组件的自动化编排是其中的重要组成部分。在Ross的得到广泛使用的Overdrive自动化制作控制系统的指挥下，该公司的虚拟制作控制器Lucid精心安排被集成入此虚拟制作工作流程内并在其中工作的每个内部或第三方组件，包括切换台、机器人摄像机、图文包装平台和Ross的Unreal驱动的Voyager XR渲染系统。
Ross Video首席执行官戴夫·罗斯在2023年NAB展上站在公司10x60英尺、2000万像素的屏幕前
随着2021年收购G3 LED，Ross也成为可以无缝堆叠用于任何场景的LED显示屏的领先供应商，包括包围地板、墙壁和天花板的像素间距小至1.56mm的影棚。帕奎因说：“我们是一站式服务，我们唯一不提供的是镜头和摄像机。”
帕奎因指出，这些集成的解决方案大大简化了广播电视公司的OSVP。他说：“我们每天都在帮助人们做一些事情，而不需要一大群人。现在不必一个演播室用于新现场，另一个演播室用于体育赛事，也不需要为特殊活动设置单独的演播室，你可以在广告时间把整个影棚从一个用途快速切换到另一个用途。”
在未来的两三年里，摄像机内视觉特效会成为直播的常态吗？“这就是我的目标，”帕奎因说。