12月24日訊息,美國專利商標局釋出了7項與空間音訊相關的蘋果專利,這些專利分別深入探索使用者姿態、頭部追蹤等資料對空間音訊系統的影響。據悉,空間音訊技術可增強看影片、聽音樂等場景的聽覺體驗,也可以提升AR/VR的沉浸感和空間感,當你在空間中移動身體和頭部時,會感覺耳朵聽到的聲音也在動態變化,模擬聲音的物理特性。
專利1:為空間音訊預測頭部運動資料(US 20210397249)
利用AR/VR頭顯獲取使用者頭部運動資料,結合計算延遲來預測聲源與使用者頭部之間的相對運動,用來渲染根據頭部運動位置動態變化的空間音訊效果。
音訊聲道在3D虛擬空間中渲染,其中央聲道以頭顯為起點,並與視軸對齊,終點則位於聲源,視軸將代表聲源與頭顯之間的相對位置。
此外,該方案還將結合IMU資料來推斷頭部的旋轉和加速,也會在聲源中輸出雙聲道等空間音訊效果,模擬雙耳時間差、雙耳電平差、外耳頻譜過濾。
專利2:關於空間音訊系統中,根據使用者姿態變化來計算頭部位置(US 20210397250)
專利3:使用者姿態識別和分類(US 20210396779)
專利圖1為使用者姿態追蹤和分類系統框架圖、圖2為從坐姿到站姿變化的生物機械原理。
專利4:空間音訊應用中,使用頭對頭旋轉變化來預測頭部姿態(US 20210400418)
圖3表示在音訊空間中,預測頭部與頭顯相對旋轉變化的幾何結構,而圖9則表示頭部追蹤系統中相對運動模型的幾何結構。
專利5:與頭部追蹤相關的運動識別,應用於空間音訊場景(US 20210400414)
專利圖3表示透過相對運動來選擇運動追蹤狀態的系統圖,而圖9則表示多種參考幀和相對姿態追蹤的概念。
專利6:空間音訊應用中,對頭部尺寸的預估(US 20210400419)
專利圖1展示了正在旋轉運動的IMU頭顯,圖3則表示頭部尺寸測量的流程。
專利7:應用於空間音訊重建場景的雙耳脈衝響應方案(US 20210398545)
圖1展示了渲染空間音訊的系統和方法,而圖2A和2B展示了聲源與聲音反射的效果。