近日，美国专利商标局公布了一项来自苹果公司的专利申请，该专利涉及一种方法，用于通过网络从智能眼镜或MR头戴设备向第二台设备（如Mac或iPhone/iPad）提供关于用户对至少一个参考对象的行为信息，特别是虚拟参考对象。本发明还包括一个系统，用于提供关于用户在特定虚拟场景中行为的信息。本发明适用于混合现实环境，可用于游戏、飞行模拟训练等。
传输移动HMD注视点数据
苹果公司的发明特别适用于VR和眼动追踪系统领域，VR可以有利地用于大量不同的应用。
除了游戏和娱乐，与眼动追踪相结合的VR技术还可用于市场研究、科学研究、人员培训等等。例如，眼动追踪数据可以提供关于目前正在体验虚拟环境的用户在该虚拟环境中的视线信息。因此，在市场研究中，人们可以将虚拟环境与眼动追踪结合起来，分析哪些物体可在虚拟环境中吸引更多人的注意。例如在虚拟超市，有哪种产品更多或更少地吸引用户的注意力。
同时，虚拟环境和眼动追踪的结合也可以用于培训目的，例如，通过模拟一个虚拟的培训环境，如以飞行模拟器或车辆模拟器的形式，并使用捕获的眼动追踪数据来分析用户是否看了正确的物体或重要的仪器，或者是否专心致志，以及是否疲劳等等。特别是在这种情况下，非常希望能够与第三方分享这样的VR用户体验，如观察者、指导者或监督者，他们希望观察或分析用户的行为以及用户与虚拟环境的互动，或者向目前正在体验虚拟环境的用户提供指示、建议或推荐。
图源：patentlyapple
苹果公司的专利图1是一个系统的示意图，该系统通过网络从第一设备向第二设备提供有关参考对象的用户行为的信息
在一个例子中，苹果公司指出，当与第一设备（#14智能眼镜）相关的用户移动并与已知的虚拟环境互动，该环境以虚拟场景VRS的形式显示，例如在玩游戏或在虚拟超市中行走时，只需要在第二设备（#16 Mac/电脑）上提供关于用户当前状态的信息，就可以在第二设备上再现用户体验。再现也可以被有意改变，例如提高或降低分辨率，例如在包括用户当前注视点的虚拟场景VRS的区域。在静态和交互式的虚拟环境中，未知的部分是用户如何移动并与之互动，其中已知的部分是虚拟环境本身。
想了解更多细节，请查阅苹果公司的专利申请US 20220404916 A1。
图源：patentlyapple
