研究人员通过对人类听觉处理进行建模来改进机器人的语音识别
我们很少想到噪音,因为我们正在倾听它们,但是在拥挤的城市广场和繁忙的百货商店等地方隔离音频存在着巨大的复杂性。在我们的听觉路径的较低层次中,我们将个体来源与背景隔离,将它们在空间中定位,并检测它们的运动模式 - 所有这些都在我们计算出它们的背景之前。
受到这种神经生理学的启发,一组研究人员在Arxiv.org的预印纸上分享了这一文章(“ 使用仿生双耳声源定位的增强型机器人语音识别 ”),该设计旨在测试地貌(即面部特征)对其的影响。声音识别的组成部分,如声源定位(SSL)和自动语音识别(ASR)。
正如研究人员指出的那样,躯干,头部和耳廓(耳朵的外部部分)吸收并反射声波,因为它们接近身体,根据声源的位置修改频率。它们前往耳蜗(内耳的螺旋腔)和内部的Corti器官,产生神经冲动以响应声音振动。这些冲动通过听觉神经系统传递到耳蜗核,这是一种将信息转发到两个结构的中继站:内侧上橄榄(MSO)和侧上橄榄(LSO)。(MSO被认为有助于定位左侧或右侧的角度以精确定位声音源,而LSO使用强度来定位声源。)最后,它们被整合到大脑的下丘(IC)中。
为了在算法上复制结构,研究人员设计了一个机器学习框架,处理嵌入人形机器人头部的麦克风记录的声音--iCub和Soundman。该框架包括四个部分:一个SSL组件,将音频分解为多组频率,并使用频率波来产生模仿Corti神经冲动的尖峰; 对某些角度产生的声音敏感的MSO模型; 对其他角度敏感的LSO模型; 以及一个IC组合的层,它结合了MSO和LSO的信号。额外的神经网络可以最大限度地减少混响和自我噪声(机器人关节和电机产生的噪音)。
为了测试系统的性能,研究人员使用Soundman建立SSL和ASR基线以及iCub头(配备允许其旋转的马达),以确定头部和内部组件的共振效应。一组13个均匀分布的扬声器采用半圆柱配置,朝向磁头喷射噪声,探测并处理它。
该团队发现,来自SSL的数据可以“显着改善” - 在某些情况下,在句子级别上提高了两倍 - 语音识别的准确性通过指示如何定位机器人头并选择适当的通道作为ASR的输入系统。当从头部移除耳廓时,性能甚至更好。
“这种方法与相关方法形成对比,在这些方法中,来自两个通道的信号在用于ASR之前被平均,”该论文的作者写道。“动态SSL实验的结果表明该架构能够处理不同类型的混响。这些结果是我们之前在静态SSL中工作的重要扩展,并支持系统对真实环境中声音动态的稳健性。此外,我们的系统可以轻松地与最近的方法集成,以增强混响环境中的ASR [55] - [57],而不会增加计算成本。
科技在提高人们社会活动质量的同时可能对部分科技使用者造成伤害。我们要正确认识网络的两面性,用其所长、避其所短,发挥网络对生活的积极促进作用。把科技作为生活的补充就可以享受科技的诸多益处,以上这篇文章希望可以给大家带来有用的信息。
免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!
-
【榴莲蛋糕怎么做】榴莲蛋糕是一款结合了浓郁榴莲风味与经典蛋糕口感的甜点,深受喜爱榴莲的人群欢迎。制作榴...浏览全文>>
-
【榴莲打开一半后没熟怎么办】在日常生活中,很多人买榴莲时会因为不确定是否成熟而选择先打开一部分尝一下。...浏览全文>>
-
【榴莲打开肉是硬的如何放软】榴莲是一种口感独特、香气浓郁的热带水果,但有时在购买或食用时会遇到一个问题...浏览全文>>
-
【榴莲打开了肉没熟怎么办】榴莲是一种香气浓郁、口感独特的水果,但有时候在打开后发现果肉没有完全成熟,这...浏览全文>>
-
【榴莲吃不了怎么保存】榴莲虽然味道独特,但一次吃不完时,很多人不知道该如何妥善保存。正确的保存方法不仅...浏览全文>>
-
【榴莲成熟的季节是几月榴莲什么季节成熟呢】榴莲是一种热带水果,因其独特的风味和丰富的营养价值而深受人们...浏览全文>>
-
【榴莲常温下能放多久】榴莲是一种气味独特、口感丰富的热带水果,深受许多人的喜爱。然而,由于其果肉柔软且...浏览全文>>
-
【流浪地球原著的结局】《流浪地球》是刘慈欣创作的一部科幻小说,首次发表于2005年。该作品以其宏大的世界观...浏览全文>>
-
【流浪地球影评400字】《流浪地球》作为中国科幻电影的里程碑之作,不仅在票房上取得巨大成功,更在口碑上赢得...浏览全文>>
-
【流浪地球结局是什么流浪地球结局成功了吗最后成功了】《流浪地球》作为中国科幻电影的里程碑之作,自上映以...浏览全文>>
- 榴莲常温下能放多久
- 刘累的其他释义是什么
- 领带夹怎么使用
- 领带打结怎么打的
- 灵芝排骨汤的做法大全
- 烈火英雄徐小斌结局
- 烈火军校沈听白结局是怎样的
- 辽宁锦州特产有哪些
- 辽宁教师资格证年龄限制吗
- 凉拌西兰花怎么做好吃
- 靶向药物普拉斯替尼 Pralestinib基因检测
- 肿瘤驱动基因的靶向药物
- 【靶向药物】尼拉帕尼通过激活干扰素信号增强抗PD-1抗体的作用
- 【靶向药物】尼拉普利的结构、功能及使用前所需要的检测
- 【靶向药物】BMN_673的药物机理、基因检测及临床治疗效果
- 肿瘤靶向药物索拉非尼使用前后需要什么肿瘤基因检测?
- 肿瘤基因检测指导布吉替尼 brigatinib治疗肺癌
- 宝宝为什么要补充维生素D以及如何补充?
- 免疫力调节性肿瘤术后康复产品——N-乙酰神经氨酸复合片
- 翔宇医疗已成立脑机接口实验室 下半年部分产品有望获注册证