首码项目网
今天,美国专利商标局公布了一项苹果公司的授权专利,该专利涉及与他们未来的混合现实头显(HMD)互动的用户界面,用户只需使用眼睛注视(技术)即可进行互动。
苹果的授权专利描述了使用眼睛注视与HMD互动的技术。根据一些实施方案,用户可以用眼睛来选择HMD显示屏上显示的文本输入栏。
该技术提供了一个更自然和有效的界面,在一些示例性的实施方案中,允许用户主要使用眼睛的注视来识别要输入的文本。
这些技术对虚拟现实、增强现实和混合现实设备和应用是有利的。这些技术也可以应用于传统的用户界面,如台式电脑、笔记本电脑、平板电脑和智能手机等设备。
图源:patentlyapple
苹果公司的专利图2描述了一个用户(#200)的俯视图,其目光集中在一个物体(#210)上。用户的视线由用户的每只眼睛的视觉轴来定义(如射线201A和201B所示)。视觉轴的方向定义了用户的注视方向,而轴线汇聚的距离定义了注视深度。
注视方向也可以被称为注视矢量或视线。在图2中,注视方向是在物体的方向,注视深度是相对于用户的距离D。注视方向和/或注视深度是用于确定注视位置的特征。
在一些实施例中,用户的角膜中心、瞳孔中心和/或眼球的旋转中心被用来确定用户眼睛的视觉轴的位置。因此,这些数据也可以用来确定用户的注视方向和/或注视深度。
在一些实施方案中,注视深度是根据用户眼睛的视觉轴的汇合点(或用户眼睛的视觉轴之间的最小距离的位置)或用户眼睛焦点的一些其他测量数据来确定的。可选的是,注视深度被用来估计用户的眼睛所集中的距离。
图源:patentlyapple
苹果公司的专利图4说明了一种内置注视传感器的头戴式显示器设备(HMD)。用户将能够在VR世界或现实世界的环境中看一个表格,并能够将他们的文字输入引导到表格的特定区域,因为注视传感器检测到了用户的焦点。这项技术非常精准,从 "姓名"输入槽到下一个方框 "姓氏"的微小注视差距都能被准确检测到,这样用户就可以在不使用鼠标的情况下填写方框。
苹果公司指出,注视传感器(#410)朝向用户,在操作过程中,捕捉用户眼睛注视的特征,例如用户眼睛的图像数据。
在一些实施方案中,注视传感器包括一个事件相机,该相机根据检测到的光强度随时间的变化检测来自用户(例如,用户的眼睛)的事件数据,并使用该事件数据来确定注视方向和/或注视深度。
HMD同时使用图像数据和事件数据来确定注视方向和/或注视深度。可选地,HMD使用射线投射和/或锥体投射来确定注视方向和/或注视深度。在一些实施方案中,使用了多个注视传感器。
想了解更多细节,请查阅苹果公司的授权专利11,314,396。
来源:patentlyapple