当前位置: 首页 > 科技观察

苹果使用“场景摄像头重定向”提升VR头显的透视MR效果

时间:2023-03-20 19:03:39 科技观察

(英伟网,2021年1月26日)现在很多VR头戴设备都使用前置摄像头加入AR透视功能。但是传统的透视视图质量有限,因为眼睛、显示器和相机在空间中没有对齐。糟糕的透视图会导致距离知觉受损、定向障碍和手眼协调能力差。因此,Apple希望通过一种称为“场景相机重定向”的技术来帮助解决这个问题。Apple指出,在各种实施例中,这可以通过转换场景相机捕获的图像来补偿眼睛、显示器和相机位置差异来缓解,这样它看起来就像是在与用户眼睛相同的位置捕获的。问题。一种补偿形式基于平坦世界的假设:真实世界是单深度图像。在各种实施方式中,深度以各种方式确定。在一种实施方式中,MR视图呈现模块包括数据采集单元、MR视图呈现单元、单应性单元和数据发送单元。在一种实现方式中,数据发送单元用于至少向控制模块发送数据(例如渲染数据、位置数据等)。在一种实施方式中,数据获取单元被配置为至少从控制器组件获取数据(例如渲染数据、交互数据、传感器数据、位置数据等)。在一种实现方式中,MR视图呈现单元被配置为经由一个或多个显示器来呈现MR内容。在一种实现方式中,单应性单元被配置为基于场景的深度以及场景相机的视点与用户的视点之间的差异来变换场景的图像。简而言之,该方法包括使用场景相机捕捉场景,使用一个或多个处理器来确定场景的深度;使用一个或多个处理器基于场景相机视点和用户视点之间的深度和差异来变换场景的图像;然后显示器显示转换后的图像。如上图所示,5A是用户未佩戴耳机时应该看到的画面;图5B为场景摄像头拍摄呈现的画面,场景摄像头的视点与用户的视点不同;5C是应用程序转换后的图像。将5A与5B进行比较时,您会注意到由于场景相机视点的水平偏移,图像中的物体看起来更近了。此外,由于场景相机视点的垂直偏移,物体在图像中显得较低。将5C的变换图像与5A进行比较时,可以注意到5C的物体出现在与5A的物体相同的高度和距离处.相关专利:Scenecameraretargeting名为Scenecameraretargeting的苹果专利申请最初于2020年9月提交,最近由美国专利商标局公布。原文链接:https://news.nweon.com/82672