视觉元素是下一代数字体验的主要焦点，但音频在促进完全沉浸式交互方面也发挥着关键作用，人们听到的声音有助于传送思想，并使虚拟环境变得生动。
这就是Meta公司新研究的意义所在。为了带来更真实的AR和VR体验，Meta公司正在开发新的空间音频工具，以响应视觉中显示的不同环境。
图源：Meta
Meta的工作围绕着人们在某些环境中期望体验的声音的共性，以及如何将其转化为数字领域而展开。
正如Meta所解释的那样：
无论是在元宇宙的聚会上与其他人打成一片，还是在客厅里通过AR眼镜观看家庭电影，声学在这些时刻的体验中发挥着作用。我们设想的未来是，人们可以戴上AR眼镜，重温全息记忆，其外观和声音与他们从有利位置所经历的完全一样，或者当他们在虚拟世界中玩游戏时，不仅能沉浸在画面中，而且也能沉浸在声音里。
这可能使其即将推出的元宇宙更具沉浸感，而且声音实际上在体验中发挥的作用比人们最初预期的要大得多。
Meta公司已经在某种程度上考虑到了这一点，其第一代Ray-Ban Stories眼镜，包括直接将声音传入用户耳朵的扬声器。
扬声器的定位方式使人们能够完全沉浸在音频中，而无需额外使用耳机。而且该扬声器可能已经成为这款时尚眼镜设备的一个关键卖点。
为了将其沉浸式音频元素推向下一个阶段，Meta公司向开发者开放了三种新的视听理解模型。
Meta表示："这些模型专注于视频中的人类语言和声音，旨在推动我们以更快的速度实现更加沉浸式的现实。"
Meta公司已经开发了自己的自监督视听匹配模型，通过将这些声学研究扩展到更多的开发者和音频专家那里，可以帮助Meta公司建立更加现实的音频翻译工具，以进一步加强其工作。
这一点，可能比人们想象的更有意义。正如Meta首席执行官马克-扎克伯格所指出的那样：
获得正确的空间音频将是我们为元宇宙所构建的东西中提供"令人惊叹"体验的因素之一。我很高兴看到它的发展。
与Ray-Ban Stories中的音频元素类似，这种 "令人惊叹"的因素很可能是让更多人购买VR头显的原因，这可能有助于迎来Meta正在建立的数字连接的下一个阶段。
因此，它最终可能会取得重大进展，未来Meta公司将如何建立其空间音频工具以加强其VR和AR系统？这是一件令人期待又有趣的事情。
来源：socialmediatoday
