发布时间:2023-03-19 07:15 原文链接: 科学家研发出可穿戴人工喉还原准确率超90%

一枚硬币大小的石墨烯片,贴在颈部靠近喉咙处,就能帮助发音障碍者获得新“声”。近日,清华大学集成电路学院任天令教授及合作团队在智能语音交互方面取得重要进展,其研发的可穿戴人工喉可以感知喉部发声相关信号,并通过人工智能模型将其识别和合成为语音,还原准确率超过90%。

这一研究结果为语音识别与交互系统提供了一条新的技术途径,并于近日在线发表在《自然》人工智能子刊《自然·机器智能》上。

语音是人类交流的重要方式,但说话人的健康状态(例如神经疾病、癌症、外伤等原因导致的声音障碍)和周围环境(噪音干扰、传播介质)往往会影响声音的传输和识别。一直以来,研究人员在致力改进语音识别和交互技术以应对微弱的声源或嘈杂的环境。多通道声学传感器可以显著提高声音识别的精度,但会导致更大的设备体积,而可穿戴设备能够获取高质量的原始语音或其他生理信号。然而,目前尚无充分的证据表明喉部肌肉的运动模式和反映在体表的发声器官振动中隐含着可识别的语音特征,且尚无实验证明其作为语音识别技术的完备性。

为解决这一问题,任天令团队成员开发了一款基于石墨烯的智能可穿戴人工喉,同商业麦克风和压电薄膜相比,人工喉对低频的肌肉运动、中频食管振动和高频声波信息有很高的灵敏度,同时也具有抗噪声的语音感知能力。对声学信号和机械运动的混合模态的感知使人工喉能够获得更低的语音基频信号。此外,该器件还可以通过热声效应实现声音的播放功能。人工喉的制作过程简单、性能稳定、易于集成,为语音识别和交互提供了一种新的硬件平台。

团队还利用人工智能模型对人工喉感知的信号进行语音识别和合成,实现了对基本语音元素(音素、声调和词语)的高精度识别,以及对喉癌患者模糊语音的识别与再现,为声音障碍者的沟通和交互提供了一种创新的解决方案。

实验结果表明,人工喉采集的混合模态语音信号可以识别基本语音元素(音素、音调和单词),平均准确率为99.05%。同时人工喉的抗噪声性能明显优于麦克风,在60分贝以上环境噪声下仍能保持识别能力。任天令研究团队进一步演示了它的语音交互式应用:通过集成AI模型,人工喉能够识别一名喉切除术患者模糊说出的日常词语,准确率超过90%。识别出的内容被合成为语音在人工喉上播放,可以初步恢复患者的语音交流能力。

任天令介绍,该人工喉还有很大的优化和拓展空间,例如提高声音的质量和音量,增加语音的多样性和表情,以及结合其他生理信号和环境信息实现更自然和智能的语音交互。研究团队希望通过进一步的研究和合作,让人工喉造福更多的声音障碍者和语音交互的用户。


相关文章

近千万清华大学公布9至12月政府采购意向涉高光谱、PCR等

近日,清华大学2025年9至12月政府采购意向发布,本项目采购预算925万元,预计采购的仪器设备包括高光谱成像仪、材料表征系统、数字PCR、定量PCR、恒温扩增核酸分析仪、高通量单细胞标记分选及核酸检......

获奖|杨海军老师荣获第十五届“清华大学优秀实验技术人员奖”

近日,清华大学实验室管理处对第十五届“清华大学优秀实验技术人员奖”获奖名单进行了公示。在此次公示名单中,化学系/分析中心磁共振实验室的杨海军高工荣获该项殊荣!这一奖项旨在表彰在实验技术岗位上长期耕耘、......

清华大学举行本科开学典礼

8月21日,清华大学2025级本科生新生开学典礼在该校举行,约4000名新生参加典礼。典礼上举行了新生佩戴清华大学徽章仪式,清华大学校党委书记邱勇为新生代表戴上了清华大学徽章,并激励清华新生心怀梦想、......

清华大学领导班子有调整

清华新闻网7月8日电日前,上级决定,曾嵘同志任清华大学常务副校长(正局级,试用期一年),吴华强同志任清华大学党委常委、副校长(试用期一年)。新任校领导简介:曾嵘曾嵘,男,汉族,1971年11月生,中共......

超3.68亿元!清华大学6至7月计划采购大批仪器

近期,清华大学连续发布多项仪器采购意向,预算总金额高达36836.6万元。涉及仪器设备包括红外光谱仪、热重-热常数分析仪、激光扫描共聚焦显微镜、高通量分子互作分析仪、类器官代谢监测仪、冷冻超薄切片系统......

清华新成果打破遥感水文界“时—空”权衡瓶颈

近日,清华大学水利水电工程系教授龙笛团队在全球地表水体遥感监测研究中取得重要进展。该团队研究成果成功揭示了全球百万湖泊水域面积的多尺度动态与季节性主导机制,在世界范围内打破了长期困扰遥感水文界的“时间......

安捷伦荣获两项科学家选择奖

2025年6月4日,北京——安捷伦科技公司宣布荣获两项科学家选择奖:公司凭借所举办的《为未来而生的HPLC:隆重推出全新AgilentInfinityIII液相色谱系列》荣获“2024年度在线研讨会”......

清华新设四大书院推动人工智能与传统工程学科融合

5月30日,清华大学无穹书院、紫荆书院、自强书院、水木书院成立仪式暨书院院长聘任仪式在主楼接待厅举行。这是清华大学坚持以进一步全面深化改革激发内在活力,面向国家重大战略需求和经济社会发展需要,把传统工......

1790万单细胞光导系统!清华大学一中标公告发布

一、项目编号:清采招第20240297号(0873-2024HW3L0658)(招标文件编号:清采招第20240297号(0873-2024HW3L0658))二、项目名称:清华大学单细胞光导系统采购......

1685万清华大学公布4月政府采购意向

为便于供应商及时了解政府采购信息,根据《财政部关于开展政府采购意向公开工作的通知》(财库〔2020〕10号)等有关规定,清华大学2025年4月政府采购意向有纳米流式分析仪、组织成像质谱流式系统和高端病......