一段時間以來,3D音效似乎處于一個萎靡不振的狀態(tài),我們或者可以樂觀地說,它需要被復蘇。多虧了虛擬現實(VR)的到來,人們終于證實了3D音效復蘇的重要性。3D音效再也不是備選的調味料了,它是一個非常重要的原材料,是可以放大、倍增整個VR體驗,可以將臨場感和沉浸感提升到圖形永遠無法企及高度的重要元素。

3D音頻技術帶來的改變
每一次的全球音頻技術的進化,似乎都會引發(fā)一場革命,重新界定我們對聲音的“聽取模式”,改變我們的視聽世界。
3D音頻,一般人聽到這個詞或許會不以為然。直觀就是跟自己的生活沒有多大聯(lián)系,或者只是因為大家都聽慣了“3D”這個字眼。不過新近三件事讓這個詞頗為被關注。
一是去年底,Coolhear發(fā)布國內首款3D全息互動耳機Coolhear V1,堪稱耳機業(yè)顛覆性的產品,完全可以做到“聽聲辯位、身臨其境”的效果。二是微軟旗下Cities Unlocked項目第二階段產品測試細節(jié)發(fā)布,微利用3D音頻技術,幫助視障人士(盲人)實現導航行走,盲人的人造福音。三是在烏鎮(zhèn)召開的世界互聯(lián)網大會,虛擬現實(VR)受到強烈關注,市場應用更趨成熟。上述三個事件都直接或間接指向一個技術的應用,即3D音頻技術的市場化轉化、娛樂化轉化。
我們所說的VR設備,通常是覆蓋用戶身體部位的視聽設備,其中的傳感器模擬的是身體用于平衡的潛意識機制,從而使用戶產生身臨其境的感覺。當3D聲場控制技術運用之后,開發(fā)者對頭戴式耳機反復測試,對只有左右聲道、缺乏3D方位信息的音頻頗感失望,對VR視覺、聽覺360°同步的要求日益強烈。
所以,在VR技術浪潮席卷全球,消費級VR設備陸續(xù)問世前夕,為用戶提供360?全沉浸式的視聽體驗,成為國內VR技術領軍企業(yè)的共同目標。像諸如3D音樂錄制、3D影視音頻、3D游戲音頻、全息聲場配音及下一代智能家居音響等方面都是比較熱門的領域。那么,3D空間降噪及全息3D聲場還原技術的應用,最有可能改變的是什么?
其一,肯定會改變現有耳機市場的市場格局,傳統(tǒng)耳機勢必將被3D音頻技術耳機取代。
其二,在視聽領域,必然會促進影視業(yè)取得更大的顯聽技術進步。
其三,對人類記錄性資料的傳延或許提供更為精確的保存。
其四,在筆者看來,對我們的生命系統(tǒng)維護肯定也有很好的益處。
3D音效:VR的必需品
VR中的音效可以成為臨場感的點睛之筆,也能成為敗筆。正確執(zhí)行的3D音效能加強一個場景的臨場感,給玩家們傳遞各種物體的位置信息,以及環(huán)境信息。能夠通過頭部運動追蹤一個運動中的物體固然很重要,能夠聽見與這個物體實時位置所匹配的聲音也同樣重要。視覺和聽覺可以相互加強,一旦這兩種感覺互相沖突,沉浸感就消失了。
想象一下你看見一個物體在你的身體上方,但聽上去卻像是在邊上;或者是你在聽一個角色講話,但是無論你的頭轉向何方,聲音似乎總是從正前方傳來。如果真的這樣,沉浸感就成了一個笑話,那也就更不用談什么臨場感了。
3D音效非常重要,因為當我們聽到那些可以感覺到的聲音時,聽覺幾乎可以替代我們無法實現的觸覺,比如我們聽到了風從臉上吹過的聲音,或者雨落在身邊的聲音。來看看這個Oculus Connect大會上的視頻,你可以對3D音效對于VR的重要性有更進一步的了解。
但這并不是說沒有優(yōu)秀的3D音效,沉浸感就沒有了,而是真正的3D音效能將這種感覺放大至無限。這就是為什么VR如此堅決地推崇整合了空間定位和環(huán)境氛圍的真正3D音效。
然而有點反常的就是,由于耳朵對于聲音的連續(xù)性判斷和準確定位,利用HRTF的耳機似乎總比揚聲器傳遞更逼真的3D音效。
3D音頻技術對VR的意義
3D音效,極其震撼。身臨其境的音頻效果,讓你聽聲辯位,那種沉浸式的體驗,不僅是超前的,更是科幻一般的感覺,遠遠超出我們原耳在自然界的感知效果。
因有了3D音頻這種技術,看過這種電影,聽過這種音樂或者玩過這種游戲的人,最大的體驗就是:你一定會認為音樂效果、電影和游戲場景中的一切完全圍繞著你來發(fā)生的。這就是說,運用3D音頻實現的3D電影,實際上比現在已經有的5D電影體驗,實際也差不了多少,而且后者或者還是概念和測試階段,但是前者已經可以廣泛的應用于商業(yè)之中,前景可謂廣大。現在的音樂、電影、游戲作品更需要這種音響技術做支持,使得沉浸式的感受更加強烈。從虛擬現實角度來講,3D音頻技術的技術和商業(yè)意義更在于改變一個時代娛樂產品的賣點和享受方式。
依據現在全球VR行業(yè)的發(fā)展脈絡,VR與3D音頻融合發(fā)展早已是大勢所趨。除了3C巨頭們的直接切入,全球相關領域的技術平臺,都有積極的協(xié)作、參與。
比如,來自蒙特利爾的Felix & Paul工作室與阿波羅工作室合作,改善了三星Gear VR的3D聲場互動體驗;Oculus VR與VisiSonics RealSpace 3D聯(lián)姻,提升了Oculus新月灣的沉浸體驗;索尼PlayStation VR的SDK,提供自定義全息音頻解決方案。
3D音頻設備商迎頭并進
或許現在談普及3D音頻技術是比較奢侈,但也有谷歌、索尼、Sennheiser、杜比、fb、Coolhear等公司涉足。有了3D音頻領域的技術進步,現在任何電影,游戲中的聲音都可以經由這種技術來加工處理,使得玩家或者影迷像是站在一個開闊空間,又或者是在一個劇院里來感受這種聲響。
·Sennheiser令人嘆而觀止

2016年時虛擬現實技術迸發(fā)的一年,視頻顯示,動作捕捉,這些虛擬現實技術所集中關注的點,為虛擬現實技術關注者帶來了全新的娛樂體驗,但是在音效方面,卻遲遲不能夠有一個好的解決方法。而今,音頻專家Sennheiser推出了一項專注于3D場景沉浸式音頻的突破性技術,能夠實現終極的音頻采集與重放。在CES2016展會上,Sennheiser為大家展示了3D場景沉浸式音頻技術,包括Ambeo 3D音頻聽覺體驗。Sennheiser的錄音制作專家Gregor Zielinsky展示了原創(chuàng)9.1聲道錄音,以及對以往音樂的9.1格式重混。為了讓參觀者將這一體驗帶入日常音樂欣賞情景中,邀請參觀者帶上自己的立體聲音樂素材,通過Sennheiser的專利混音算法提升,以令人嘆而觀止的9.1音質再現。
·Glyph:將VR眼鏡與耳機合一

隨著虛擬現實(VR)、增強現實(AR)以及3D音頻技術的進步與推廣,現在的耳機產品也將會成為這些技術點集合體。在今年的SXSW 2016(西南偏南,美國德克薩斯州州府奧斯汀舉辦的跟音樂、電影以及多媒體交互相關的展會)上,新創(chuàng)團隊Avegant展出了他們最新版本的“眼鏡、耳機二合一”產品Glyph。它與現在理解的VR頭戴眼鏡有點區(qū)別,并非采用沉浸式效應的Glyph更像是一個掛在頭上的簡單顯示器。這副名為Glyph的造型與 MONSTER 某個系列的頭戴式耳機有點相似。
·OSSIC X——全球首款可校準3D音頻耳機

OSSIC X是世界時第一款具備即時校準功能的3D音頻耳機,能給用戶帶來更多聽覺空間感,通過頭部跟蹤和人體骨骼校準,以及先進的3D音頻算法,為耳朵帶來精準的3D音效。OSSICX能給VR玩家?guī)砬八从械穆曇趔w驗,獲得更多沉浸感,更把虛擬現實游戲提升到一個新水平。OSSIC X具有自動校準個體聽者頭部和耳朵的功能,最精準定位到聲音的落點,提升整體聲音質量。OSSIC X的聽覺體驗是目前虛擬現實音效技術的十倍!預計今年十一月,首批OSSIC X 3D耳機發(fā)貨,早鳥價為199美元,這款耳機是否能夠帶來一場聽覺革命呢?讓我們拭目以待吧。
·3D播播開通酷音3D音效頻道

去年底,Coolhear與大朋VR簽署合作協(xié)議,3D播播將增開Coolhear 3D音效頻道。該頻道的音頻內容采用Coolhear 3D音效SDK制作,用戶戴上耳機就能感受到電影劇場的感覺,全面提升移動用戶觀看電影的聽覺體驗。
自去年四季度起,Coolhear 3D音效內容逐漸在網絡平臺與實體展會上亮相,引來了業(yè)界的高度關注;來自聲學界的專家教授在仔細試聽過Coolhear 3D音頻之后,一致認為耳機顱中效應問題得到了很大的改善,對3D音頻給出了高度的評價及認可。“3D播播”是大朋VR旗下的虛擬現實內容聚合平臺,內容涵蓋3D影視、全景、游戲三大領域,目前已更新迭代了4.0版本,市場占有率已經超過了50%,用戶活躍量過30000,是國內最著名的VR內容平臺,也是VR用戶粘性最高的平臺之一。此次合作,3D播播將增開Coolhear 3D頻道,提供一系列使用Coolhear 3D音效SDK制作的3D Demo內容。用戶只要戴上耳機,就能真切的感知聲音在用戶四周的準確方位與運動軌跡,如同電影院里的環(huán)繞多聲道的感覺,全面提升移動用戶觀看3D電影的浸入式體驗。
結語
隨著VR產品的問世和不斷發(fā)展,真正的3D音效似乎再一次崛起了。這一次他們從過去層出不窮的新發(fā)明中吸取了教訓,VR要將沉浸式音效體驗推向一個前所未有的巔峰。
以3D音頻技術為主的VR改變的很可能不僅僅是3D視聽、3D游戲,包括休閑生活、電影、音樂、醫(yī)藥醫(yī)療、建筑、空間探索等。未來10年,有了3D音頻技術,更是在VR其它技術的協(xié)調下,我們和3C、人工智能、物聯(lián)世界打交道的方式會發(fā)生翻天覆地的變化。這是3D音頻技術更遠大的價值所在。