近日,美国专利商标局正式公布了苹果公司一系列共55项新授权专利。在其中,有一项与未来HMD相关的眼动追踪系统专利,以及一项关于VR环境的声音处理的发明。
眼动追踪系统
在专利中,苹果的眼动追踪发明涵盖了双眼球追踪相机和向用户眼睛发射红外光的照明源,以及位于目镜处的衍射光栅。
那么,苹果工程师在这项可能出现在苹果未来HMD中的发明中关注了什么呢?这要从下面的专利图9说起,它说明了一个实施眼动追踪系统的混合现实头显(HMD#200)实例的侧视图。例如,眼动追踪系统可用于追踪用户(#290)的眼睛(#292)的位置和运动。
图源:patentlyapple
在一些实施方案中,眼动追踪系统可以代替或同时用于追踪用户的瞳孔扩张,或用户眼睛的其他特征。
想了解更多专利详情,可查阅苹果的授权专利11,360,557。
用于VR的声音处理方法和设备
美国专利商标局公布的另一项授权专利涉及合成现实/VR设置的声音处理,特别是涉及基于合成现实设置的声学混响特性将真实声音转化为虚拟声音的系统、方法和设备。
图源:patentlyapple
在苹果公司的专利中,图5表示用户在一个VR游戏中观看一个角色,这个角色在一个山洞里。可以预期到一个洞穴会引入大量的混响,特别是与室内小房间的混响量相比。因此,在各种实施方案中,为了产生更加身临其境的体验,HMD会记录在物理环境中产生的真实声音,通过转换真实声音以改变(例如,增加)与真实声音相关的混响量来产生虚拟声音,并向第一用户播放虚拟声音。
换句话说,当第一个用户说话时,他的HMD会接收到他的声音,引入与SR设置中可能预期的一致的混响,并在HMD(以及参与同一SR设置的其他用户的HMD)的扬声器中回放他的声音,从而提高模拟现实体验的真实性水平。
该专利提供了与在海滩上听到海浪的撞击声、秋天树叶落下的噼啪声等其他场景。
苹果的专利涵盖了用于SR环境的声音处理的设备、系统和方法。在各种实施方案中,该方法是在位于物理环境中的头戴式设备上执行的,该设备包括一个或多个处理器、非临时存储器、麦克风、扬声器和显示器。
该方法包括在显示器上显示SR设置的图像表示,该图像表示包括与SR设置的声学混响特性相关的多个表面。该方法包括通过麦克风记录物理环境中产生的真实声音。该方法进一步包括使用一个或多个处理器,通过基于SR设置的声学混响特性转换真实声音,生成虚拟声音。该方法还包括通过扬声器播放虚拟声音。
想了解更多专利细节,可查阅苹果公司的授权专利11,363,378。
来源:patentlyapple