当前位置: 首页 > 科技赋能

VR技术迎来突破 英伟达眼动追踪技术将彻底改变虚拟现实设备

时间:2024-05-22 18:08:26 科技赋能

北京时间7月22日中午消息,如果你看墙上的时钟,那么你看到的就是焦点,而周围的环境时钟的时间会模糊。

这就是人类大脑绘制周围环境的方式。

英伟达计划在虚拟现实中应用相同的技术。

这将有助于优化虚拟世界的真实感。

通过增强小区域的图形渲染性能,图像显示效果将得到大幅提升。

早在15世纪,达芬奇就第一个注意到这种现象,称为“黄斑视力”。

在过去的九个月里,David Luebke 和 Nvidia 的其他四位研究人员试图在虚拟现实环境中模拟这种现象:用户目光聚焦的区域将被设备完全渲染,而失焦的区域将被完全渲染。

分辨率将会降低。

当Nvidia设备的用户聚焦于屏幕的一小块区域时,眼动追踪软件会不断调整渲染焦点。

为了以可接受的最低帧速率 90FPS 完全渲染场景,必须每秒渲染 10 兆像素的场景接近 10 次。

但如果只专注于渲染用户视线的焦点,那么计算任务就会大大减少。

“性能提升非常显着,不容忽视,”卢克说。

这一原则在 VR 研究中并不新鲜。

“这在虚拟现实研究中并不新鲜。

事实上,通过 Kickstarter 资助的 Fove 也使用了类似的系统,”已在该领域研究了 15 年的 Luke 说。

他最初是弗吉尼亚大学的教授,目前在 NVIDIA 工作。

长期以来,眼动追踪技术的速度跟不上人眼运动的速度,导致屏幕显示总是延迟,让用户感觉不舒服。

然而,SensoMotoric Instruments 最新的眼动追踪虚拟现实显示器可以以 Hz 帧速率实现精确、低延迟的眼动追踪。

卢克说:“我们的眼球追踪设备第一次能够跟上你眼睛的运动。

”即使掌握了这样的技术,英伟达的团队仍然需要花费大量的时间来精确计算如何区分失焦图像。

速率应该低到什么程度才能避免被观众注意到。

“散焦视觉很容易检测到闪烁。

人眼的这一特征有助于我们发现森林中的老虎,”卢克说。

因此,在降低分辨率的过程中,任何闪烁都会造成干扰。

同样,如果离焦图像过于模糊,就会产生隧道视觉效果,让观看者感觉像是在通过双筒望远镜观看。

“即使你无法触摸它,你也能看出问题所在,”卢克指出。

“为了解决这个问题,NVIDIA研究人员发现,如果提高离焦图像的对比度并降低分辨率,就可以欺骗人眼。

虽然NVIDIA尚未在任何产品中应用这项技术,该公司正在与许多提供硬件和软件的 VR 公司合作,希望这一发现能够推动主流 VR 设备制造商在他们的产品中添加眼动追踪技术。

“我们所做的一部分就是帮助定义虚拟规则。

” “这项技术不太可能出现在虚拟现实之外的其他科技产品中,例如笔记本电脑,因为眼动追踪技术不适用于距离人脸较远的设备。

VR设备距离人脸只有几米”厘米,所以很适合这项技术。

这项技术很可能会影响Nvidia未来的图形产品。

这意味着开发者可以选择优先考虑某些像素,从而重新定义图像渲染算法。