在一個虛擬現(xiàn)實(VR)中,3D 視頻和雙耳聲音是通過VR眼鏡和耳機重現(xiàn)的。頭的位置和旋轉度是實時進行處理的。同樣,360度視頻也是可以用兩耳音頻方式重現(xiàn)聲音。
如果雙耳聲音跟隨頭部的動作進行響應,仿真頭制式就不再適用了,因為仿真頭制式只考慮一個相對頭的角度。取而代之,則采用將下列聲音元素分別收集和組合的方式:
作為干音的“音頻對象”
雙耳濾波 :“HRTF”(帶房間:“BRIR”)
通常“音頻對象”是一個有具體距離和3D 方向的單音源,比如VR 視頻游戲中的一個角色。它由干音構成, 然后依據(jù)它自身的3D 方向經(jīng)過雙耳濾波和房間濾波(雙耳化)進行處理。這里的3D 方向是由音頻對象的位置以及當時VR 場景內(nèi)聽者的位置及頭部旋轉角度所決定。
場景聲學背景聲或稱之為“環(huán)境聲”,是一種很特殊的音源。他即不能以干音錄制,也不能被映射為一個單點音源。原則上說,它可以通過將空間內(nèi)多個音源疊加來制作,但是這樣實施起來不是非常困難(例如森林里的樹木)就是不太可能(街道上的生活環(huán)境聲)。
可實行的方法是用由若干個音頻對象組成的一組虛擬揚聲器重現(xiàn)環(huán)境錄音。可以在3D 預置中選擇這組虛擬揚聲器,例如杜比5.1.4 的預設,或Auro3D 的9.1 預設,
這些設置中沒有中間揚聲器。如果沒有預設可選,也可以在聽者周圍建立一個等邊立體空間。這些“環(huán)境”音頻對象是“敘事”背景聲,就像它們的視覺對應物一樣,相對于整個場景,當聽者頭部旋轉時它們并不移動,但相對聽者頭部的聲波入射角度在變化,因而HRTFs 必須隨之變化。ORTF-3D 話筒的8個信號被用于以這種方法在VR 場景中建立一個優(yōu)質(zhì)的3D 現(xiàn)場“環(huán)境”。
該應用不推薦使用一階環(huán)境立體聲話筒。由于它體積小和一致性配置安裝的特點,其輸出通道之間缺少足夠的分離度,由此降低了空間感和3D 立體聲聲像質(zhì)量。