3D 世界更真实,3D Audio 来相助
增强“虚拟世界”的真实感,除了需要 Oculus Rift 这样的头戴式显示器来取代我们的眼睛,可能还需要带上一个特别的耳机,通过声音来模拟现实的感觉。
根据 Technology Review 的报道,来自微软的研究员 David Johnston 正在测试一套系统,让虚拟世界里的虚拟物体,都能具备自己的“声音”,从而让我们有身临其境的感受。——想一想现实生活当中,我们在某个地方,往往能听到某些特别的声音,比如说在闹市自然能感受到人声嘈杂,在野外自然能听到风声蝉鸣等等。
而 Johnston 开发的这套名为 3D-Audio 的系统,最有意思的是,虚拟世界里的音效会随着人的位置变化而自然而然地进行改变,尽量让人不感到突兀。
在实际体验当中,一戴上耳机,就发现声音方面发生了完全的变化,那些虚拟物体,突然间变得生动起来。能听到两种声音,一种像是便携式收音机,一种好像来自假的 Hi-Fi 音箱;不过,能听到小鸟在距离地面很高的地方鸣叫;而随着人的移动,这些声音也体验人员的位置相对进行变化。
而当体验人员坐在 Kinect 前面时,却发生了小小的不愉快,可能因为软件算法的关系,音效出现了错误,让人难受。
以前,曾经有名为 head related transfer function 的音效定位算法,能够通过 DSP(音效处理器),该技术能够成为虚拟世界的音源、这项技术之前并不流行,是因为:
第一步:制作一个头部模型并安装一支麦克风到耳膜的位置; 第二步:从固定的位置发出一些声音; 第三步:分析从麦克风中得到声音并得出被模型所改变的具体数据; 第四步:设计一个音频过滤器来模仿那个效果; 第五步:当你需要模仿某个位置所发出的声音的时候就使用上述过滤器来模仿即可。 过滤器的回应就被认为是一个 HRTF,你需要为每个可能存在声源的地方来设置一个 HRTF。
从以上的描述中可知,为人设置 HRTF 是一件很麻烦的事情。但 Johnston 与团队,则发明了一套软件,能够快速的设置 HRTF 音效。尤其是,这套软件拥有预测能力,可以预测人下一步要听见的东西。
微软的 3D Audio 技术有什么现实意义呢?来自 University of Canterbury 的教授 Mark Billinghurst 称,这套系统能够用于人生、通知音、游戏中的音效以及类似 Google Glass 那样的可穿戴设备,让人更加易于交互。