聲音對于真正身臨其境的VR來說至關(guān)重要。它傳達(dá)深度和情感，建立和加強(qiáng)互動，并引導(dǎo)用戶結(jié)合手跟蹤和視覺反饋，聲音甚至有能力創(chuàng)造觸覺的幻覺。

在這次探索中，我們將探討VR聲音設(shè)計(jì)的基礎(chǔ)知識，并深入探討聽覺世界。一路上，我們會打破一些物理學(xué)規(guī)律，揭示物理聲音效果令人驚訝的復(fù)雜性。

3D空間中的存在與現(xiàn)實(shí)主義

當(dāng)涉及深度線索時，立體視覺對于傳統(tǒng)顯示器是一個巨大的改進(jìn)，但這并不完美。因此，聲音不僅僅是一種身臨其境的工具，你的聲音周圍的物體（和位置）對您理解的位置有很大的影響，特別是當(dāng)您不看它們時。這適用于從背景噪聲到用戶界面的一切。

像Unity和Unreal這樣的引擎不斷變得更好地在3D空間中表現(xiàn)出聲音效果。雙耳音頻，更好的混響建模，更好的閉塞和障礙物建模等等。

氣氛渲染

音樂在設(shè)定體驗(yàn)的心情方面起著至關(guān)重要的作用，受環(huán)境藝術(shù)家賴奇?薩卡莫托啟發(fā)一個技術(shù)氛圍：

無重量的功能柔軟的鋼琴軌道，感覺優(yōu)雅和沉思：

最后，Land's End將夢幻般的超現(xiàn)實(shí)的品質(zhì)與硬度飽和度和乙烯基噪聲等硬邊結(jié)合在一起。

建筑相互作用

聲音傳達(dá)了互動和游戲物理學(xué)的開創(chuàng)性，成功性，失敗性和整體性，特別是當(dāng)用戶的視覺效果被引導(dǎo)到其他地方時。例如被設(shè)計(jì)為具有廣泛的聲音，創(chuàng)建相互作用的高電平和低電子音符，以及在地板上的音樂回波。

對于游戲開發(fā)商來說，這也是一把雙刃劍，需要仔細(xì)的時間安排，因?yàn)榧词乖谒姆种幻胫畠?nèi)就可以破壞經(jīng)驗(yàn)。

音頻教程

使用Unity的Mecanim系統(tǒng)中的抽象狀態(tài)功能，您可以輕松構(gòu)建流系統(tǒng)，使您的音頻提示響應(yīng)實(shí)際發(fā)生的情況。

設(shè)置邊界

虛擬現(xiàn)實(shí)是一個令人興奮的媒體，但是首次使用者可能需要花費(fèi)幾分鐘才能掌握其局限性。我們的手跟蹤技術(shù)只能跟蹤可以看到的內(nèi)容，因此您可能希望設(shè)計(jì)隨著用戶接近跟蹤視野邊緣而淡出的交互聲音。

喚起觸摸

在沒有觸摸反饋的情況下，視覺和聽覺反饋可以填補(bǔ)認(rèn)知差距，并加強(qiáng)場景的哪些元素是交互式的，以及當(dāng)用戶“觸摸”它們時會發(fā)生什么。這是因?yàn)槲覀兊拇竽X“不斷地綁定通過許多感覺通道獲得的信息，形成對物體和事件的固有感覺”。有些用戶甚至描述了虛擬現(xiàn)實(shí)中的幻影感覺，幾乎總是與引人注目的聲音設(shè)計(jì)相關(guān)聯(lián)。為了達(dá)到這個水平的沉浸，聲音必須符合用戶的行動。

聲音設(shè)計(jì)

我們已經(jīng)談到了它的環(huán)境啟發(fā)的配樂，但是您可能會驚訝地發(fā)現(xiàn)，Block是我們最大的發(fā)展挑戰(zhàn)之一，而僅次于物理對象交互，這是Leap Motion Interaction Engine的早期原型。

魔法與進(jìn)步

Blocks之后的核心設(shè)計(jì)思想之一是我們從不暗示任何東西下的特定設(shè)備。例如，當(dāng)手臂HUD出現(xiàn)時，沒有振動或機(jī)械噪音。創(chuàng)建聲音也很小，這是我們想要說明的敘述的核心- 神奇的力量用你的雙手創(chuàng)造事物。