Wave:给VR/AR以更真实的声音体验
VR/AR的兴起带来相关技术的进步,对声音的处理就是其中之一。
我们对空间声音的感知是一个复杂的过程。结合了声波与房间或与空间的相互作用、头部和耳朵转动间的互相作用、我们中耳及内耳与听觉神经的反应,还有大脑对于声音状况的认知和解读。因此,要在VR/AR中模拟出真实的声音体验并不是一件容易的事情。
Wave威富思在日前举行的IDF16大会上展示了一种新的声音处理技术,显示该技术的最新进步:在VR中用户带上耳机,随着用户头部的转动,可以听到不同强度的声音,类似我们在真实场景中头部转动时的体验。
Waves威富思Nx技术展示
这种体验是通过Waves威富思的专利产品——Waves威富思Nx技术和英特尔实感SR300摄像头共同完成的。Waves威富思Nx技术通过英特尔实感SR300摄像头对用户的头部位置进行追踪,然后定位用户耳机中的声音,以此匹配出我们在真实世界里听到的声音路径。为了呈现可以创造出真实、动态、多变的感官体验的细微差别,Waves威富思Nx技术通过追踪用户头部的实时动向,正确地将音源发声位置放入耳机的左右声道,从而模拟人耳在真实世界中听见的声音位置。
这里,英特尔实感SR300摄像头运用包括1080p高清摄像头,红外摄像头以及红外镭射投影仪在内的一系列敏感元件捕捉3D画面,使电脑使用者实现众多独一无二的工作与娱乐体验。现在,英特尔更携手Waves威富思Nx技术进一步实现更丰富的声音体验。英特尔实感摄像头每秒60帧的输出和完整的深度加工能有效提高头部位置信息更新的频率,减少延迟,从而更流畅地实时模拟音场。而声音延迟对游戏或AR/VR这类音频的影响是很大的。此外,红外摄像头让设备在光线不足的情况下也能有强大的性能。在弱光条件下捕获影像,这对于其他摄像头来说是极具挑战性的,甚至是不可能做到的。Waves威富思Nx技术和英特尔实感SR300摄像头的紧密结合成就了独特的耳机音频体验。
据悉,Waves威富思Nx技术支持各种类型的耳机和所有媒体格式。它将呈现完全真实的、实时的、以及360度虚拟的音频环境,并将声音定位到宛如真实世界的声音位置。通过把聆听环境放置在耳机的限制范围之外,Nx技术可以让你全方位地体验到每一处定位得恰到好处的声音,让你仿佛身临其境,而不是那种充斥于你头部里的扁平化声音。同时,Nx技术可以让你在长时间使用耳机的时候亦能有更为舒适体验。
Waves威富思是一家软件音频信号处理工具开发者,在全球热门唱片、主流电影和流行电子游戏背后都有其身影。作为格莱美技术大奖的得主,在全球超过25万个录音室、后期制作设施和母带处理室都采用Waves威富思先进的技术组合。20多年的专业技术和对声音的热情如今用在了应对移动音频的挑战和移动设备实现优质音频体验上。
目前,Waves威富思Nx技术除了可以应用传统PC领域外,也可以应用到智能终端。实际上,智能终端也是Waves威富思一个重点领域,据介绍,Waves威富思已经和中国的TCL和Vivo开展了合作,未来还会与更多的中国厂商进行合作。