索尼的模塊化黑彩晶VERONA視頻墻實現了真正的黑色水平，并減少了反射，如此攝像機內視覺特效制作所示。

最近在現場虛擬制作（OSVP）方面的創新在解決員工技能和成本關切方面取得了很大進展，使制作人員愿意顛覆制片老框框。

這些收獲正在影響制作的方方面面。在高端，內容制作人現在可以使用專門建造的OSVP影棚，其中許多影棚是在過去一年左右才開始投入使用的。這些設施具有大規模可擴展的LED屏幕，通常用于影視節目和廣告制作。與此同時，內部制作正在使用連接到攝像機到計算機渲染機箱的LED墻模塊，這些機箱可以堆疊以支持幾乎任何容積空間。工作流程管理系統協調物理和虛擬空間中的動態元素，包括機器人攝像機、3D擴展現實（XR）對象、與屏幕亮度協調一致照亮物理空間的燈光等等。

過程和成本擔心

但盡管如此，當涉及到說服項目經理放棄對后期制作的嚴重依賴，轉而在大大減少實景制作的專業知識和技術作前期投入時，下一代虛擬制作方式仍然很難說服人們接受它。

這一觀點是下一代虛擬制作主要代言人加里·阿德考克提出的，他利用鏡頭和攝像機制造方面的專業知識，幫助制作人員有效處理棘手的應用場景。

阿德考克表示，人們通常難以接受把制作建立在一個處理視覺效果、色彩、燈光（它們傳統上是留給后期制作）等所有細微差別的前端準備路線圖的基礎上的想法。   

“你必須考慮終點是什么，然后逆向思考，確保你在虛擬制作中設置的東西能把你帶到那里，”阿德考克解釋說，“對于那些在電影行業工作了很長時間的人來說，這可能是一個艱難的轉變。”

特別是當他們必須獲得預算批準以支付前期費用時。“我們的粗略計劃是每三米的墻都有其自身的計算機渲染系統，” 阿德考克解釋說，“當你開始進入100米高的墻時，每隔3米你就必須這樣做，突然之間你就有非常昂貴的計算機系統開支。”

他指出，這些設備每臺售價在2.5萬至4萬美元之間，甚至更高。然后是許可和運行攝像機內視覺特效軟件（VFX）的成本，如常用的Epic Games提供的虛幻引擎，它結合，壓縮，統一幀率，并解析出瞬時場景特定的原始CGI和攝像機拍攝的視頻片段，以便在每段墻上同步渲染。

但與實景拍攝成本相比，這些成本顯得微不足道，特別是如果攝像機內VFX方法可以提供幾乎不可能的真正現實的視覺效果。例如，阿德考克指出，沒人能看出2022年上映的《蝙蝠俠》結尾那場瘋狂的汽車追逐中沒有真正的汽車。他說:“我們已經達到了可以模仿現實世界的程度，這對于電影和電視的制作來說是必要的。”

招聘的挑戰

除了這些增加的成本之外，還需要雇用具有新技能的人員和/或重新培訓現有員工以適應新環境。Vizrt產品專員雷•拉特利夫指出，由于行業在引進新人方面遇到了困難，這使得這一目標變得更加困難。擴展現實（XR）幫助Vizrt走在了下一代虛擬制作領域的前列。

拉特利夫說：“行業面臨的一個重大挑戰是缺乏新人加入廣播工程隊伍。”他從與客戶的第一手經驗中了解到這一點，這些客戶“共同面臨從大學和廣播相鄰技術領域招聘新人才的挑戰”。

拉特利夫補充說，Vizrt正在盡自己的一份力量解決這個問題。“Vizrt與世界上許多地方的大學合作，讓技術專業的學生接觸廣播電視領域，培養他們對該領域的興趣，”他說，“我們也有實習機會和開發項目，我們也在討論擴大這些機會，以進一步支持建設廣播工程人才管道。”

人工智能來救援

由于AI應用的進步，繁重的工作變得不那么繁重了。拉特利夫表示，Vizrt正在利用AI “消除復雜性，為我們的客戶帶來更多價值”。其中一個更引人注目的恰當例子涉及到解決攝像機內視覺特效最令人煩惱的問題之一，即令屏幕上的人物逼真地沉浸在虛擬環境中。

Vizrt最新版本的Viz Engine實時圖形渲染平臺在其工作流程中加入了一個名為“Reality Connect”的新AI驅動功能。拉特利夫表示，該解決方案利用AI算法，結合Viz Engine與虛幻引擎集成后不斷更新的現場人物3D模型，“顯著改善了虛擬環境中的反射和陰影”。

Vizrt的Reality Connect是Viz Engine 5.1的一部分，由Viz AI驅動，使用先進的AI算法實現超現實的主持人沉浸感，包括虛擬演播室和XR布景中的陰影投射和反射。

AI正提供許多其它方法來節省員工的時間，降低執行任務所需的專業知識水平。例如，Vizrt正在使用該技術跟蹤場景中的物體，從而不必實施多層跟蹤系統。

拉特利夫還提到了最近推出的Adaptive Graphics（自適應圖形）工具，該工具允許設計人員一次構建圖形并設置參數以自動適應不同的顯示，從而無需為制作中使用的每種類型顯示手動配置圖形。

建立OSVP專業知識

但是，即使有了這些進展，在急需的OSVP專業知識方面，仍有很大的差距需要填補。索尼電子公司（SE）電影制作高級經理杰米•拉福尼表示，縮小這一差距是索尼電子公司和索尼影視娛樂公司（SPE）的當務之急。

這兩個部門合作使用索尼電子組件，支持索尼創新工作室的Stage 7的攝像機內視覺特效，Stage 7是索尼的Pixomondo（PXO）部門管理的位于SPE在加州卡爾弗城電影攝制場的一個巨大影棚。

拉福尼說：“（攝制中的）每個人不僅想知道成本是多少，還想知道利用這項技術需要什么。”她指出，這不僅僅是一個對員工進行再培訓的問題，這是至關重要的；這也與教育決策者有關。

她說，沒有一個對在攝制中使用虛擬影棚說‘是’或‘否’的角色。從副總裁到導演，再到制作人，再到監督公司投資的人，各級管理層都需要有決策方面的專業知識。在底層，一旦做出了執行決定，就需要有見識的監督，“從腳本評估開始，并讓員工一起執行項目。”

拉福尼補充道，索尼在填補這些知識空白方面發揮著積極作用。“索尼正在與特定的工作流程集成商、設計師和顧問合作，這樣當一家公司想使用索尼的生態系統時，他們就有一個合作伙伴來指導他們完成整個工作流程。這比購買設備要重要得多。”

簡化廣播電視公司對OSVP的使用

選擇正確的設備是擴大OSVP采用的基礎。Ross Video虛擬解決方案高級產品經理邁克•帕奎因表示，這項技術的使用“正開始變得越來越主流，部分原因是我們正在讓它變得更加用戶友好。”

他補充說，組件的自動化編排是其中的重要組成部分。在Ross的得到廣泛使用的Overdrive自動化制作控制系統的指揮下，該公司的虛擬制作控制器Lucid精心安排被集成入此虛擬制作工作流程內并在其中工作的每個內部或第三方組件，包括切換臺、機器人攝像機、圖文包裝平臺和Ross的Unreal驅動的Voyager XR渲染系統。

Ross Video首席執行官戴夫·羅斯在2023年NAB展上站在公司10x60英尺、2000萬像素的屏幕前

隨著2021年收購G3 LED，Ross也成為可以無縫堆疊用于任何場景的LED顯示屏的領先供應商，包括包圍地板、墻壁和天花板的像素間距小至1.56mm的影棚。帕奎因說：“我們是一站式服務，我們唯一不提供的是鏡頭和攝像機。”

帕奎因指出，這些集成的解決方案大大簡化了廣播電視公司的OSVP。他說：“我們每天都在幫助人們做一些事情，而不需要一大群人。現在不必一個演播室用于新現場，另一個演播室用于體育賽事，也不需要為特殊活動設置單獨的演播室，你可以在廣告時間把整個影棚從一個用途快速切換到另一個用途。”

在未來的兩三年里，攝像機內視覺特效會成為直播的常態嗎？“這就是我的目標，”帕奎因說。