在让坐在你面前的人在嘈杂的餐厅里第三次重复他们的句子之前,有没有过那种尴尬的犹豫?
Facebook的研究人员正在研究一种更好的解决方案,而不是考虑是否冒险,尝试性地给出一个模糊的回答,希望它适合谈话。
相反,Facebook Reality Labs(FRL)开发的一项新技术可以让你“放大”打开并增强您在现实生活中关心的声音,同时调暗可能妨碍清晰对话的背景噪音。
请参见:Magic Leap 1增强现实耳机:一张备忘单(TechRepublic下载)
由Ravish Mehra领导的研究团队称之为“感知超能力”。目前,这项技术只存在于入耳式监护仪的原型上,它与现成的眼球运动跟踪装置配合使用,可以捕捉用户感兴趣的内容,在打开任何吸引他们注意力的东西之前。
Facebook对声音渲染的兴趣可以追溯到几年前,主要致力于为Oculus Quest和Rift创造可信的AR和VR声学体验。”当我们开始在虚拟现实中进行这项研究,并将其转化为增强现实技术时,我们意识到,我们在这里建立的所有技术都可以达到一个更高的目的,那就是改善人类的听觉,”Mehra说。
最终,Mehra和他的团队希望在AR眼镜上提供感性的“超能力”,将音频功能与可视环境集成在一个平台上。例如,这项技术可以与Facebook的LiveMaps相结合,创建一个用户周围物理对象和声音的虚拟地图,空调发出噪音,或盘子和银器叮当作响。通过使用情境化人工智能,该设备可以在增强用户应关注的声音的同时消除分散注意力的噪音。
如果它听起来很像助听器,那是因为它确实如此——Facebook计划在研究人员对AR眼镜进行研究的同时进行探索,这项技术如何帮助那些听力受损的人。公司欢迎听觉科学家托马斯·伦纳进一步探索这条研究道路。
FRL还透露了公司所称的“音频存在”的进步,这是Facebook AR和VR项目的核心概念,它包括给用户提供一种感觉,他们和他们所听到的人在同一个房间里。
换句话说,我们的目标是在虚拟现实中重新创造一种奇怪的感觉,即不知道你在耳机里听到的哔哔声是否来自你在笔记本电脑上观看的节目中的电话铃声,或者从你家里的家用电器里买来的。
这说起来容易做起来难。房间里的声音与周围环境相互作用,从墙上反弹,并以某种方式影响听者,这取决于他们耳朵的形状或大小。在虚拟现实中重新创建所有这些交互需要巨大的技术能力。
实现这一点的一种方法是执行头部相关的传递函数(HRTF),它以数字方式表示个人的听觉体验。考虑到当前团队的人力资源捕获方法非常复杂,但考虑到当前的人力资源管理方法也很复杂,例如开发一种算法,可以根据用户耳朵的照片计算出近似的HRTFhttps://www.zdnet.com/article/ar-and-vr-now-have-a-chance-to-show-what-they-can-do-but-they-still-cant-break-through/“>AR和VR应该会蓬勃发展。那我们为什么不感兴趣呢?
Facebook的研究人员正在研究的超逼真的声音效果图,有一天可能会欺骗用户的大脑,让他们相信他们通过VR耳机听到的声音来自他们坐的房间。这将有助于下一代的临场感,即在与朋友的视频通话或团队会议中,实时地感觉到自己身处另一个地方的能力。
这项研究仍处于非常早期的阶段,但是FRL的科学家们已经在考虑他们“重新定义人类听觉”项目的隐私问题。从制造深造假货到窃听私人对话,如果这项技术落入恶意之手,其中不乏有害应用程序。
“我们的目标是在我们的创新周围设置护栏,以负责任地进行创新,因此我们已经在考虑我们可以采取的潜在保护措施,“梅赫拉说。”例如,在我提高某人的声音之前,可能会有一个协议,我的眼镜可以按照这个协议向别人的眼镜请求许可。“
这是否足以说服用户使用这项技术,以及在繁忙的餐厅中避免尴尬对话的可能性,仍有待观察。