Nvidia使用LED传感器开发体积小、低成本VR注视点追踪系统
世界上所有顶级虚拟现实头显制造商都同意,注视点追踪将成为下一代VR硬件的基础,因为这项技术拥有能够实时感知眼睛位置的能力,从而使计算机能够优化细节渲染,甚至提供光标控制而无需手或头的移动。但是注视点追踪硬件目前不便宜,体型也较大,因此Nvidia的研究人员提出了一种新颖的解决方案,可以使该技术变得更加普及。
Nvidia的新型注视点追踪器利用普通LED的功能,它们既能发光又能感应光,可以简化确定眼睛相对于显示器的位置的过程。像其他注视点跟踪系统一样,Nvidia系统使用一圈红外LED将看不见的光投射到眼睛中,但是在这里,LED也用于从同一位置进行颜色选择感测。研究人员指出,这可以实现迄今为止体积最小,成本最低的注视点跟踪,并与当今最常见的解决方案的准确性和采样率相匹配。
在一个原型中,Nvidia为每只眼睛总共使用9个LED,其中三个发出红外光,六个使用该LED感应光,而在第二个原型中每只眼睛使用6个LED作为光传感器和光源。由于LED消耗的功率很低,并且依赖于相对简单的控制器硬件和软件,因此它们减少了总延迟以及头显设备所需的摄像头数量,并消除了头显管线内额外的图像处理模块的需求。
尽管Nvidia的解决方案性能足以满足典型的VR应用,但研究人员警告说,它可能不适合进行阅读、神经系统应用或心理研究。 LED系统的中间角度误差为0.7度,平均角度误差低至1.1度,而基于摄像头的替代方案可以提供“非常高精度”的结果,且误差水平低于0.5度。
Nvidia还指出,与其他解决方案相比,其初始校准阶段会“比较长”,在许多情况下,该解决方案通过指引用户眼睛的注视方向来与眼睛保持同步,并且如果佩戴者的脸部相对于感应硬件进行了相对移动,则必须重新校准。
Nvidia的注视点感应LED系统仍处于原型阶段,因此尚未准备好挑战HTC和Pico VR头显中的Tobii解决方案,或成为Nreal Light选择的7invensun的替代品。但是,它可能会进入下一代VR头显,从而使价格优惠且轻巧的新型VR头显具有更高的性能,但这需要研究人员能够找到使该解决方案校准过程足够快且对用户友好的方法。