详情

ClearBuds团队介绍基于实时机器学习的通话音频增强技术

来源:cnBeta.COM2022/7/13 9:09:09112
导读
来自华盛顿大学的一支研究团队,介绍了一款名叫 ClearBuds 的真无线耳机,特点是能够利用实时机器学习来增强语言体验。
  对于习惯了佩戴支持主动式降噪(ANC)耳机的用户们来说,你会发现市售产品的解决方案仍有一定的改进空间 —— 麦克风会拾取诸多音频,而不是你想要集中注意力的那部分。好消息是,来自华盛顿大学的一支研究团队,介绍了一款名叫 ClearBuds 的真无线耳机,特点是能够利用实时机器学习来增强语言体验。
 
  ClearBuds 是华盛顿大学三名研究人员(COVID 大流行期间的室友们)的一个项目成果。
 
  作为一个开源项目,ClearBuds 旨在通过引入深度学习和音频处理层,来化解这方面的问题。
 
  可知其系统中包含了一套麦克风系统、以及能够在智能手机上运行的实时机器学习系统。
 
  尽管大多数耳机仅使用了其中一个耳塞将音频发送到手机,但 ClearBuds 系统却能够发送两路音频流。
 
  通过快速分析和处理,其相关信息能够被用于视频 / 电话呼叫等实时音频的体验改进。算法会抑制非语音信息,以增强用户通话时的声音。
 
  Paul G. Allen 计算机科学与工程学院博士生 Maruchi Kim 表示,ClearBuds 有两个关键特性。
 
  首先,这款真无线耳机使用了双麦克风阵列,用于创建两个同步音频流,提供信息并允许我们在更高解析力的空间上分离来自不同方向的声音。
 
  其次,通过引入轻量级的神经网络,ClearBuds 得以进一步增强通话者的声音。研究合著者 Ishan Chatterjee 补充道:由于讲述者的声音离两个耳机很近、且距离大致相等,因而神经网络训练可专注于其语音并消除其它背景噪声。
 
  这种方法与人耳的工作方式非常相似,即利用声音传入左右耳的时间差,来判断声音到底来自哪个方向。
 
  展望未来,我们希望该研究团队能够很快将 ClearBuds 或其实时机器学习音频增强技术推向市场。
 
  原标题:ClearBuds团队介绍基于实时机器学习的通话音频增强技术

版权与免责声明:凡本网注明“来源:兴旺宝”的所有作品,均为浙江兴旺宝明通网络有限公司-兴旺宝合法拥有版 权或有权使用的作品,未经本网授权不得转载、摘编或利用其它方式使用上述作品。已经本网授权使用作品的,应在授权范围内使用,并注明“来源:兴旺宝”。违反上述声明者,本网将追究其相关法律责任。 本网转载并注明自其它来源(非兴旺宝)的作品,目的在于传递更多信息,并不代表本网赞同其观点或和对其真实性负责,不承担此类作品侵权行为的直接责任及连带责任。其他媒体、网站或个人从本网转载时,必须保留本网注明的作品第一来源,并自负版权等法律责任。 如涉及作品内容、版权等问题,请在作品发表之日起一周内与本网联系,否则视为放弃相关权利。

展开全部
热门评论
相关新闻