
隨著新設備吸引消費者XR市場,由移動和視頻技術研發公司InterDigital委托市場研究公司ABI research撰寫的一份白皮書詳細介紹了創造新的擴展現實(XR)機會的標準、解決方案和新挑戰。
這份名為《定義XR體驗:實現沉浸式生態系統》的報告介紹了無線和視頻創新的堅實基礎,這些創新支撐了包括AR、VR和MR在內的各種XR體驗,并強調了標準在確保兼容性,以及在各種設備、網絡和增強XR體驗的系統上對抗技術分裂的重要性。雖然消費者對XR頭顯和服務的接受相對緩慢,但報告指出,設備硬件、內容捕獲、編碼和面向XR的內容分發能力的改進是推動XR市場增長的關鍵因素。
無縫的沉浸式XR體驗取決于多種因素,包括能夠處理高分辨率、高幀率、多視點內容和空間音頻的頭顯,以及能夠滿足XR低延遲和高可靠性要求的網絡。在現有的獨立、有繩和基于手機的VR設備解決方案中,并不是所有的頭顯都能夠在設備內有計算功能。大多數需要把渲染分割到整個網絡上,這通常會給真正的沉浸式體驗帶來延遲及其它障礙。最近推出的Apple Vision Pro等設備在觸覺、眼動追蹤及其它精度指標上都有所改進,增強了設備所能提供的沉浸式體驗。
“當前無線和多媒體的創新使我們能夠將音頻、視頻、觸覺和動覺數據捕獲到一個場景呈現中,并通過我們的網絡傳輸復雜的XR流量,從而實現實體世界和虛擬世界的無縫融合,因而使XR能力穩步推進,”InterDigital首席技術官Rajesh Pankaj表示,“如果沒有像InterDigital這樣的公司的長期研究和對標準的貢獻,這些新的‘現實’是不可能實現的,這些公司改進網絡能力,發展壓縮技術,并確保設備和服務在這個不斷增長的生態系統中的互操作性。”
該報告將沉浸式生態系統的增長歸因于視頻壓縮和傳輸協議的基礎改進以及標準提供的無數好處。視頻標準組織MPEG已經開始通過圍繞動態網格編碼、觸覺和場景描述研究的標準研究工作探索XR經驗。此外,MPEG的視覺體積視頻編碼(V3C)標準,由MIV(MPEG沉浸式視頻)和V-PCC(基于視頻的點云壓縮)組成,已經建立了編碼和流傳輸體積內容(預計是捕獲、處理和分發方面最具挑戰性的XR內容類型之一)的定義。在無線標準方面,3GPP專門開展了大量活動增強5G系統,以更好地支持XR通信,同時解決5G網絡如何變得更加“XR感知”的問題。
“XR是硬件和內容要求的完美風暴,這使得支持它成為一個難題:高分辨率和幀率、交互性、移動性以及像觸覺和空間跟蹤這樣的新數據類型,”ABI Research研究總監Eric Abbruzzese表示,“提高從創建到分發的整個XR管道的效率對用戶和運營商都有好處。隨著XR的普及,確保設備和生態系統的互操作性也變得至關重要,確保健康的開發者和內容生態系統,為用戶提供高價值的內容,同時最大限度地減少用戶體驗摩擦。”
報告認為,在XR的各個方面都有進展,標準仍然是賦予新功能和確保兼容性的不可或缺的一部分。展望未來,XR生態系統將繼續探索新的“XR感知”網絡功能、新的XR附件和支持硬件,以及多用戶支持XR機用戶跟蹤和定位的解決方案,以及其它機會。