万维读者网 > 数码科技 > 正文  

清华智能喉登Nature子刊,网:@李雪健老师

www.creaders.net | 2023-03-13 15:12:59  量子位 | 0条评论 | 查看/发表评论

清华智能喉登Nature子刊,网:@李雪健老师

将一块仅硬币大小的圆片,贴在喉咙处,嗓子有问题的人就可以重获新“声”了。

这是清华大学发表在Nature子刊上的最新研究成果,一个用石墨烯材料做成的可穿戴喉咙。

它可以准确识别到佩戴者喉咙处的细微振动以及模糊的话语,然后将之合成为正常的语音,平均识别准确率高达99.05%。

据称,这款设备在噪音非常大的地方也好使。

如此一来,那些不能正常发声的人,包括喉切除患者、临时嗓子发炎者、长时间讲课的老师、在嘈杂环境工作但需要交流的人等,都有救了。

要说帮喉咙有问题的人解决交流问题,科学家早就在研究了。

不过此前的一些方案由于带有一系列外设或者多通道电极,通常具有侵入性且不够便携。

要解决这俩问题,需要感应器足够灵敏且小巧,在外部就能使用。

还需要足够贴合皮肤。

清华智能喉登Nature子刊,网:@李雪健老师

△ Nature Machine Intelligence(自然·机器智能)

清华智能喉登Nature子刊,网:@李雪健老师

清华智能喉登Nature子刊,网:@李雪健老师

当然,还有不少人直接cue起了李雪健老师。

清华智能喉登Nature子刊,网:@李雪健老师

因为理论上,喉部的振动反映的是声带以及相关肌肉群的运动。

一些声带发声有障碍的人,可能会训练食管发声,因此,需要柔性传感器来保持对皮肤的贴合从而照顾到这一部位。

清华智能喉登Nature子刊,网:@李雪健老师

好在,有这么一种东西可以满足这些需要。

它就是用柔性激光直写(laser-scribed)石墨烯(LSG)制成的机械传感器,专门用于身体表面。

不过,由于不确定这种设备对低频肌肉运动和传递到皮肤表面的声音振动是否敏感,作者团队对它的蜂窝状微观结构进行了优化。

清华智能喉登Nature子刊,网:@李雪健老师

最终,它可以做到在>1000次的弯曲测试后仍表现出均匀稳定的灵敏度,准确识别出频率范围在100–20kHz之间的振动信息。

由于LSG薄膜具有导电性和导热性,这种设备也可以通过热声效应产生声音。在声音发射稳定性的实验中,作者证明它可以做到连续三小时都保持稳定。

下面是这款可穿戴智能喉的工作流程:

清华智能喉登Nature子刊,网:@李雪健老师

首先,设备将收集到的振动信息编码为标准脉冲编码调制(PCM)信号。

然后通过快速傅里叶变换(FFT)生成相应的频谱图。

接着通过模型进行外部处理和识别,将检测到的多模态信号转换为相应的语音。

最后通过热声效应驱动设备发声,帮助佩戴者完成交流。

实验表明,这款设备对音素、音调以及单词的识别准确率平均达到了99.05%。

下图则显示了设备在不同强度(dB)噪音下的识别精度。

清华智能喉登Nature子刊,网:@李雪健老师

可以看到,它在环境噪声超过60dB的情况下,也能保持识别能力,抗噪能力远远优于麦克风。

“Talk is cheap”,作者也进行了实战测试。

他们找来一位完成了喉切除(非全切)手术的志愿者,检测六个日常短句的识别情况。

从频谱图可以看出,可穿戴智能喉可以感知患者喉咙的发声振动。

不过由于发声器官不完整,患者有时会在说话时吞咽声音。不过微调模型仍然能够从信号中提取足够的信息,将识别准确率做到81.25%。

清华智能喉登Nature子刊,网:@李雪健老师

接着,他们又对用到的单个AlexNet模型进行了优化(Alex Net+ReliefF+SVM),最终实现了91%的识别精度。

清华智能喉登Nature子刊,网:@李雪健老师

总的来说,由于制造工艺可行、灵敏度高、性能稳定、抗噪能力强以及集成了发声能力,作者认为,这款可穿戴喉咙可以成为下一代语音识别和交互系统的理想工具。

而网友们也脑洞大开:

有让加个音色调节的过滤器,变成可穿戴变声器的;

也有说来个实时翻译,就让人直接拥有说多种语言的能力的。

清华智能喉登Nature子刊,网:@李雪健老师

你觉得还有哪些妙用?

   0


24小时新闻排行榜 更多>>
1 中国财政部表态 货币策略重大转向
2 普京咋来北京?中共学者甩出了一记耳光
3 暗示什么?习近平又出新词 令人忧
4 北京连丢3大海外订单
5 马斯克突然宣布提前…

48小时新闻排行榜 更多>>
1 传傅晓田抵京即被带走 孩子被做DNA鉴定
2 张玉凤的老照片,有些很少见
3 突然,高盛来了个180度大转弯
4 扛不住了?北京率先宣布…
5 毛泽东见江青前夫唐纳 惊讶说了“三个字”
6 真正的麻烦或许才刚刚开始…
7 遭北京抛弃 这位传媒大亨下场惨
8 危急!哥大告急!美加多所名校告急
9 习明天怕不怕?布林肯带这个大杀器到北京
10 中国财政部表态 货币策略重大转向
热门专题
1
以哈战争
6
中共两会
11
秦刚失踪
2
中美冷战
7
台湾大选
12
火箭军悬案
3
乌克兰战争
8
李克强猝逝
13
台海风云
4
万维专栏
9
中国爆雷
14
战狼外交
5
美国大选
10
李尚福出事
15
普里戈津
一周博客排行 更多>>
1 周傥:理性反省和重新认识乌克 万维网友来
2 美国为何选择这个时候公布中共 山蛟龙
3 乌克兰呀,你太让人失望了! 山蛟龙
4 解密: 千年之计“一盘大棋”崩 文庙
5 谁敢买中共国的电动车? 山蛟龙
6 为什么不可能有第二次改革开放 三都瓠瓜
7 太尴尬了--杭州千人相亲大会竟 弓长贝占郎
8 以色列狠扇三巴掌 伊朗摸着脸 雷歌747
9 美国梦 - 房东老王和他的房客 山货郎
10 海一代选民:多少人视民主党为 随意生活
一周博文回复排行榜 更多>>
1 亚洲的乌克兰其实不是台湾,而 随意生活
2 一只小鸟的咏叹 木桩
3 台湾面临的三个选项 suoliweng
4 美国为何选择这个时候公布中共 山蛟龙
5 在言论管控大搞一言堂方面,中 爪四哥
6 乌克兰呀,你太让人失望了! 山蛟龙
7 海一代选民:多少人视民主党为 随意生活
8 周傥:理性反省和重新认识乌克 万维网友来
9 解密: 千年之计“一盘大棋”崩 文庙
10 谷歌是不是被中共收买用来欺骗 右撇子
关于本站 | 广告服务 | 联系我们 | 招聘信息 | 网站导航 | 隐私保护
Copyright (C) 1998-2024. CyberMedia Network/Creaders.NET. All Rights Reserved.