Facebook专注于AR眼镜的智能音频

鼓舞人心的演讲者和亚马逊畅销书作家Sanjo Jendayi曾经说过:“听并不总是等同于听。听力并不总是能导致理解,但是积极聆听可以帮助每个人真正地’看到’对方。”

Jendayi在一次激励性演讲中提供了一些哲学建议,而技术可能是她心目中的最后一件事。但是实际上,她的话可能最好地描述了Facebook现实实验室研究(FRLR)团队的顶级科学家,程序员和设计师背后的突破性进展。

上周在FRLR网站上的帖子提供了对这家社交媒体巨头在增强现实和虚拟现实世界中前进方向的了解。

研究小组成员托尼·米勒(Tony Miller)表示:“我们正在探索可以扩展,保护和增强您的听力能力的新技术,使您能够增强注意力和注意力,同时还可以与关心的人和信息进行无缝交互。

Facebook原本计划在本月的一次会议上展示其AR 智能眼镜研究的进展,但由于大流行而被取消,而一直在向选定的记者和媒体专家提供演示。

演示集中在两种技术上,即音频呈现和增强听觉,这两种技术提供了FRLR所谓的“感知超能力”。

增强的听觉功能如下:如果您走进拥挤的酒吧,聚会的顾客,电视,现场乐队,嘈杂的厨房中的声音被合并成一个回音,想象一下能够隔离出您想听到的特定声音-一个特定的顾客,电视节目或乐队-仅通过观看它们即可。通过AI和声音抑制技术,仅看物体就能增强和澄清声音或声音,同时消除“视觉”之外的所有其他声音,包括颤抖和空调等其他干扰性声音。

眼镜中的微型麦克风阵列可聆听所有声音,其他内置组件可检测人头的位置和人眼的运动,以便将目标对准零。

当两个人远距离交谈,或者视频头饰将某人放置在遥远的地方时,音频状态的目的是使他们感到自己在那。通过测量“耳间时间”差异,声音到达每只耳朵所花费的时间的分数差异以及每只耳朵的音量差异以及室内声学,来确定这种存在。

甚至考虑到人耳的形状。就像指纹一样,没有两只耳朵的形状相同。所有人都有研究人员称为自己的与头部相关的传递函数,即HRTF。

没有两个人的听力配置文件相同。为了优化完美的AR环境,研究人员采取了持续半小时的多种声学措施。这包括测试声音如何与每个人独特的一对耳朵的设计相互作用。通过AI,精确测量的声学效果可以营造出如此真实的环境,以至于受试者难以区分同一房间内其他人的实际声音和人工创建的环境中听到的声音。

智能眼镜尚未准备好进行商业生产。但这听起来好像他们指日可待。

(0)
上一篇 2022年3月27日
下一篇 2022年3月27日

相关推荐