近日，美国专利商标局公布了苹果公司的一项专利申请，该专利涉及使用未来的Apple Pencil与MR头显、iPad或Mac显示器的用户界面进行互动和操作，Apple Pencil可用作VR游戏控制器，控制虚拟代理（游戏角色）或管理与物理物体的互动。该专利还涵盖了使用注视控制来控制物体的移动。
在苹果公司的专利图1和6B中，我们能看到用户手持Apple Pencil，在这种情况下，它被用作游戏控制器以移动物体或游戏角色，苹果公司将其称为“虚拟代理#606”。Apple Pencil的功能将包括涉及在设备的触摸表面上敲击、滚动、旋转、弹动和刷动的输入。
图源：patentlyapple
Apple Pencil/控制设备#130包括一个或一组传感器，根据与触摸敏感表面#175的触觉和/或触觉接触，检测用户的输入。在一些实施方案中，Apple Pencil/控制设备包括多种触摸传感技术中的任何一种，其中包括但不限于电容式、电阻式、红外线和表面声波技术，以及其他接近传感器阵列或其他用于确定与触摸敏感表面的一个或多个接触点的元件。
在该专利的另一半中，苹果公司详细介绍了使用眼睛/注视追踪作为在XR环境或游戏中移动物体的手段。
图源：patentlyapple
苹果公司的专利图5A是一个示例内容交付架构的第一部分框图，而图5C是该示例内容交付架构的第二部分框图；图5B说明了示例数据结构。
这是一项深入的专利，感兴趣的MR开发者如果想了解更多专利细节，可查阅苹果专利US 20230042447 A1，该专利题为“管理针对用户界面与物理对象的互动”。
来源：patentlyapple
