根据美国专利商标局近日发布的苹果公司专利,该公司正在暗示iDevices和他们的XR头显将再次采用3D界面。苹果的新专利更强调使用眼动追踪技术来控制3D用户界面。
用于与3D环境互动的设备、方法和图形用户界面
苹果公布的关于3D操作环境的专利申请指出,需要具有改进的方法和界面的计算机系统,为用户提供计算机生成的体验,使用户与计算机系统的互动更加高效和直观。
新的系统、方法和界面将补充或取代传统的系统、方法和用户界面,为用户提供扩展现实体验。这种方法和界面通过帮助用户理解所提供的输入和设备对输入的反应之间的联系,减少用户输入的数量、程度和/或性质,从而创造一个更有效的人机界面。
苹果专利图7A-7J是框图,说明了在三维环境中各自的位置上显示用户界面对象。
图源:patentlyapple
在一些实施例中,一个或多个用户界面对象被提供在三维环境中的预定义区域内,这样,置于预定义区域内的用户界面对象在三维环境中跟随用户,而置于预定义区域外的用户界面对象在三维环境中不跟随用户。
在一些实施例中,第一显示生成组件是平视显示器。在一些实施例中,第一显示生成组件是头戴式显示器。在一些实施方案中,第一显示生成组件是一个独立的显示器、一个触摸屏、一个投影仪或另一种类型的显示器。
在一些实施例中,计算机系统与一个或多个输入设备通信,包括摄像头或其他传感器和输入设备,这些设备检测用户的手部运动、身体整体的运动和/或头部在物理环境中的运动。
在一些实施例中,一个或多个输入设备检测用户的手、脸和整个身体等部位的运动和当前的姿势、方向和位置。在一些实施方案中,一个或多个输入设备包括一个眼动追踪组件,该组件检测用户目光的位置和运动。
在一些实施方案中,第一显示生成组件,以及可选的一个或多个输入设备和计算机系统,是头戴式设备(例如,HMD或一对护目镜)的一部分,该设备在物理环境中随用户的头部移动和旋转,并将用户的视角改变为通过第一显示生成组件提供的三维环境。
在一些实施例中,第一显示生成组件是一个平视显示器,它不随用户的头部或身体整体移动或旋转,但是,可选择地,根据用户的头部或身体相对于第一显示生成组件的移动,将用户的视点改变到三维环境中。
在一些实施例中,第一显示生成部件可选择由用户的手相对于物理环境或相对于头部移动和旋转,并根据第一显示生成部件相对于用户的头部或面部或物理环境的移动,将用户的视点改变为三维环境。
在一些实施例中,用户界面对象#7104-1包括一个面板,该面板包括多个可选择的用户界面选项(例如,按钮),这些选项可由用户通过注视和/或用户的一只或多只手的手势(例如,空中手势)来选择。在一些实施例中,用户能够控制(例如,进行修改)的可选用户界面选项被包括在面板(例如,用户界面对象#7104-1)中。例如,用户选择某些应用图标、设置、控制和/或其他选项来显示在面板内,从而使包括在面板内的所选应用图标、设置、控制和/或其他选项能被用户轻易地访问(例如,用户能够与面板进行交互,甚至当用户在物理环境中移动时,面板能够在物理环境中跟随用户移动)。
图源:patentlyapple
在一些实施例中,如图7E-7G所示,当用户不注意用户界面对象#7104(例如,用户界面对象#7104-3、用户界面对象#7104-4和用户界面对象#7104-5)时,用户界面对象#7104会继续以视觉效果强调显示(例如,如图7E-7F中的阴影填充所示)。
最后,苹果公司指出,操作系统包括处理各种基本系统服务和执行硬件相关任务的指令。
在一些实施例中,XR体验模块被配置为管理和协调一个或多个用户的XR体验(例如,一个或多个用户的单一XR体验、一个或多个用户各自群体的多个XR体验)。为此,在各种实施方案中,XR体验模块包括数据获取单元、追踪单元、协调单元和数据传输单元。
这是一项非常详细的专利,想了解更多信息可查阅苹果的专利申请US 20230092874 A1。
来源:patentlyapple