为了创造真正的沉浸式VR体验,开发者在关注视觉效果的同时,也要关注场景的音效。如果用户在VR中无法感知到声音的来源,那么这将影响用户的感知并降低体验的真实感。为弥补这一缺陷,HTC Vive推出3DSP(3D空间音频)SDK,使开发人员创造更加自然和立体的音效。
HTC Vive 3DSP采用一系列顶尖技术,并综合考虑到距离、几何结构和背景噪音等真实世界的因素,以为用户提供真实的、沉浸式的音频。
3DSP SDK为开发人员提供了以下关键特性:
1.采用高阶高保真立体声(HOA),且仅需很小的计算量。
2.基于对真实世界精确建模(包括水平和垂直方向)的头相关变换函数(HRTF),可以得到适用于所有声音的滤波器进而还原空间音频。
3.房间音频将模拟真实房间里的反射和回响。
4.原声和回放均采用高分辨率音频。
5.采用基于现实建模的距离模型。
6.对空间的覆盖不使用统一的几何模板,而是根据具体情况自行计算。
HTC Vive 3DSP SDK中使用了许多音频技术,以提供更沉浸式的效果。Ambisonics(高保真度立体声像复制)是将声源放在提前渲染好的全景球上来模拟空间音频,而距离模型则可以模拟出声音在你越远的地方越安静的效果。此外,3DSP还可以模拟当物体挡住声音时声音的变化。
目前,HTC Vive专业版头显和其他头显均已支持升级。