空間音訊設計是在VR和AR的“存在”關鍵_全影匯
喬治盧卡斯曾在2011年獲得了熱烈的掌聲,當時他宣稱“聲音是電影體驗的一半。”如果這是真的,那麼在VR和AR的設定中會發生什麼變化,其中的替代經驗2D電影的超越體驗3D沉浸。畢竟,沉浸式世界是對現實世界的創造性模仿,其中聲音和聽覺功能發揮的作用遠遠超過我們意識到的作用。
“聲音通常是事後的想法。聲音是看不見的; 它是分子的振動,我們不能把它握在手中,它只是在時間上存在,並且是運動中物體的聲音表達。“ Laura Sinnott說,我是NYVR博覽會的聲音設計師和聽力學博士。 。
事實上,重要的是要承認這樣一個事實:在一個現代化的世界中長大,充滿了混亂的噪音層,我們的大腦通過麻木和調整(突觸修剪)來應對和適應混亂。全譜,一切都是為了精簡我們的日常生活。
觸發聽覺復興
辛諾特最近好好教育我如何對我們的存在進行基本的聽證會; 它不僅是一種交流的媒介,而且是我們情感幸福,認知的關鍵,也許在過去比我們現在的現實更具相關性,甚至對我們的生存也更為重要。她說,音訊是第一種在子宮中發育的感覺,主要是與我們的本能中心相連,儘管它是一種我們已經失去了顯著敏感性的器官,但XR有可能幫助恢復它。
“聽覺是最原始的感官之一; 儘管在平衡系統之後,它很可能在視覺之前進化。聲音設計師,無論是為網路設計沉浸式音訊,還是設計傳統的單聲道收音機,都能理解聲音的強大程度。“Sinnott說。
即使是這種主要感官器官在我們的集體思想中已經降級為扮演第二小提琴角色的情況,上個月在NYVR博覽會上充滿了空間音訊專家的小組讓我相信XR可以為人類對它的欣賞打開了一種聽覺復興的大門。在小組的背景下,幻燈片上寫著:“我們的眼睛只能看到我們面前的東西,我們的耳朵可以吸引我們周圍的世界。”
空間音訊設計是關鍵
要認識到聲音不是二等公民,XR創作者很快就會遇到這樣的事情,他們試圖創造數字模擬器,足以讓我們的整體充分認識到幻想是真實的。他們意識到,正如臺灣作曲家和聲音設計師拉里·張上個月在一篇博文中所寫的那樣,我強烈推薦,“如果沒有適當的音訊設計,敘事體驗將失去魅力,世界也不會令人信服。
如果空間化的音訊不存在,或者更糟糕的是,在某種形式或形式上不對齊,那麼我們存在的質量將與忽視或無知的行為成比例地受到影響。我們的身體或本能程式設計與我們的思想和情感一樣,即使不是更多,也是如此之多,因此,如此糟糕的空間音訊設計可能被證明是不合時宜和不舒服的,例如,偽劣的視訊拼接。
聲音是核心體驗層
事實上,空間音訊是我們認知的基礎層次,它的包含對我們儲存和回憶經驗的能力有重大影響。
“正如'經驗之錐'形象所示,只要你為體驗新增音訊,學習保留率就會提高。” 傑夫麥克帕登說,他是電影,電視,廣告和新媒體的作曲家兼多元樂器演奏家。“視覺和聲音的結合創造了進一步的增長(這就是為什麼視訊變得如此受歡迎),但隨後讓學習者參與那些視覺和聽覺,就像大多數XR一樣,創造了90%的學習保留確定性!”
McSpadden是身臨其境的音響設計的先鋒,作為兩者的CEO 冷靜 (一個變革的高科技公司,建立一個使用空間和互動音訊,以減輕壓力,增加幸福感身臨其境的體驗),以及Prime8,是發展創意實驗室沉浸式視聽專案專注於聲音的力量。
“通過Composure,我們正在研究當用作沉浸式體驗的焦點時,互動式空間音訊的強大功能。我們的目標是創造定製的音樂體驗,讓使用者幫助減輕壓力,促進積極情緒狀態。“McSpadden說。“有大量證據表明,被動地聽音樂對於控制壓力是有用的,但是當你讓聽眾參與時,放鬆和聚焦效果會增加。”
去Daredevil並依靠AR可穿戴裝置完全放棄視覺元件也是有好處的; McSpadden描述的一種方法是增強聽覺體驗,而不是像大多數耳機那樣只是替換它。比如去年3月宣佈的Bose AR眼鏡以及價值5000萬美元的風險投資基金,以培育圍繞它的生態系統。
McSpadden認為Bose進入市場是每個人的主要勝利,尤其是盲人,他們可以從培訓,教育和娛樂的空間音訊中受益,其深度和參與程度前所未有。它是一種踏腳石,可以加速增強音訊的時間成為我們日常生活的一部分。