用于语音识别的液体声学传感器

MEMS 2024-10-08 07:03

语音是复杂人机交互的强大基础,可穿戴声学传感器可以通过连接到喉咙捕捉声带振动。然而,现有的语音识别可穿戴传感器通常采用固体材料(如压电材料、聚合物薄膜、金属和二维材料),其依赖声压导致的材料变形或振动。但由于这些材料的皮肤适形性差、灵敏度有限、检测范围窄以及易受运动伪影干扰,它们的功能和应用受到限制。

近期,加州大学洛杉矶分校陈俊教授团队报告了一种用于语音识别的液体声学传感器该方法基于悬浮在载液中的钕铁硼磁性纳米粒子的三维定向和分支磁网络结构,其行为类似于永磁体。该传感器可以区分小压力(0.9Pa),具有高信噪比(69.1dB),并提供自滤波功能,可以消除低频生物力学运动伪影(小于30Hz)。作者使用液体声学传感器与机器学习算法一起创建可穿戴语音识别系统,该系统在嘈杂的环境中提供 99% 的识别准确率。相关成果以“A self-filtering liquid acoustic sensor for voice recognition”为题发表在Nature Electronics期刊上。第一作者为Xun Zhao, Yihao Zhou为共同一作。


陈俊教授

传统声传感器的声阻抗(约40 MRayl)比生物组织高十倍,无法与皮肤表面良好贴合(图1a)。尽管超薄弹性体制成的柔性传感器有所改进(图1b),但仍存在机械失配和气隙,影响了声学性能。为解决这些问题,本研究开发了液体声学传感器,采用液体材料设计以减少阻抗失配并增强声波传输(图1c)。液体声学传感器使用低硬度的PFM材料,能够更好地与组织形成共形界面。根据不同液体的流变特性(图1d),作者选用膨胀流体PFM,具有对高频声音信号的灵敏响应,并可减少低频生物力学伪影。PFM通过3D ORM网络结构保持铁磁性与稳定性,纳米颗粒均匀分散(图1e-f),表面经SiO2涂层增强生物相容性,最终形成稳定的3D网络(图2a)。


图1:自过滤液体声传感器

通过二甘醇(DEG)修饰PFM,提升其对高速频率信号的响应(图2b)。在不同磁场强度下观察3D ORM结构的形成过程:0.1 T下未见明显取向(图2c),0.2 T时开始形成簇(图2d),1.5 T时簇互连并形成明确的3D网络(图2f)。随着磁场增加,颗粒在X方向的取向显著增强(图2g-j),X/Y比率从1.00增至1.75,网络的连接节点数也从1.37增至3.00,与蒙特卡罗模拟结果一致。即使在移除外部磁场后,PFM的3D结构依然保持磁化强度。磁滞回线显示PFM具有约0.1 T的矫顽力和12.4 A·m²/kg的剩磁(图2k),其磁通密度在1.8 T达到饱和,长期测量显示其剩磁在46天内稳定(图2l)。这些结果表明PFM具有稳定的铁磁性。


图2 :PFM的形成过程

基于 PFM 的液体声传感器

可穿戴声学传感器在通信中发挥重要作用,但传统的固体材料传感器由于皮肤适形性差,传感性能受限。基于PFM的液体声传感器通过更好的贴合性和灵敏度提升了解决了这一问题(图3a)。PFM被注入导电线圈,并在一侧涂上PDMS形成薄膜(图3b, 3c),使其能与皮肤紧密贴合(图3d)。当受到声压时,传感器将喉部细微振动转化为磁场波动,进而通过磁感应生成电信号。实验表明,液体声学传感器具有极高的检测精度(0.01 Hz)和宽频响应范围(0.4至10 kHz),能够检测微小声压变化(如0.9 Pa)并生成相应的电输出(图3g, 3h)。


图3:液体声传感器的制造

皮肤舒适度和自过滤能力

基于PFM的液体声学传感器与皮肤的紧密贴合性优于传统固体材料传感器(图3i),克服了固体材料在弯曲皮肤表面易产生间隙和声阻抗失配的问题(图3j, 3k)。液体材料具有高流动性,能够快速适应皮肤轮廓,优化了传感性能和舒适度。PFM的流变特性可根据频率调整,通过减轻低频运动伪影提取干净的声压信号(图4a)。其剪切稀化行为和可调节的粘弹性特性(图4b, 4c, 4d)使其能够准确捕捉并转换声波,特别是在更高频率下实现高保真电信号输出。这一特性使液体声学传感器在复杂声学环境中具备更强的信号处理能力。

运动伪影缓解

运动伪影会导致可穿戴传感器的信号失真,影响测量数据的准确性,并增加信号处理的复杂性和设备功耗。相比之下,基于液体的声学传感器能更有效地减轻运动伪影。在测试中,液体传感器实现了69.1 dB的高信噪比,远高于固体传感器的18.4 dB(图4e)。液体传感器能有效去除低频机械信号干扰(图4f),并在90 dB的噪声环境下保持稳定性能(图4g),而固体传感器则易受噪声和振动影响(图4h, 4i)。液体传感器在信噪比、声阻抗、一致性、检测精度等多个参数上表现优异,并且对电磁干扰和温度变化不敏感。


图4:液体声传感器的表征

可穿戴语音识别系统

液体声学传感器在可穿戴语音识别系统中的应用展示了其在人机交互中的潜力,尤其在智能轮椅控制方面(图5a)。该系统结合液体声学传感器和定制印刷电路板,用于采集、处理声音信号并通过卷积神经网络(CNN)识别语音命令(图5b, 5c)。通过训练,系统能够准确识别“走”、“停止”、“左”、“右”、“后”等语音命令,识别率高达99%(图5e, 5f),并成功实现了对智能轮椅的实时控制(图5h)。未来通过优化信号处理和算法,有望进一步缩短响应时间和提高识别精度。


图5:基于液声传感器的可穿戴语音识别系统

小结

本文报道了一种基于自过滤液体声学传感器的语音识别方法,该传感器利用PFM保持磁化,具备可调节的流变特性,能够根据人声动态调整频率响应范围。液体声学传感器显示出69.1 dB的信噪比(SNR)和自滤波功能,有效减轻运动伪影。在机器学习算法的帮助下,构建的可穿戴语音识别系统识别准确率达99%,并成功用于控制轮椅。相比固体声学传感器和水凝胶,PFM具有更好的皮肤适应性和较低的声阻抗,潜在应用包括声音健康监测和替代通信方法等。

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论
  • 11-29学习笔记11-29学习笔记习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-02 23:58 90浏览
  • 概述 说明(三)探讨的是比较器一般带有滞回(Hysteresis)功能,为了解决输入信号转换速率不够的问题。前文还提到,即便使能滞回(Hysteresis)功能,还是无法解决SiPM读出测试系统需要解决的问题。本文在说明(三)的基础上,继续探讨为SiPM读出测试系统寻求合适的模拟脉冲检出方案。前四代SiPM使用的高速比较器指标缺陷 由于前端模拟信号属于典型的指数脉冲,所以下降沿转换速率(Slew Rate)过慢,导致比较器检出出现不必要的问题。尽管比较器可以使能滞回(Hysteresis)模块功
    coyoo 2024-12-03 12:20 156浏览
  • 学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&
    youyeye 2024-11-30 14:30 85浏览
  • 戴上XR眼镜去“追龙”是种什么体验?2024年11月30日,由上海自然博物馆(上海科技馆分馆)与三湘印象联合出品、三湘印象旗下观印象艺术发展有限公司(下简称“观印象”)承制的《又见恐龙》XR嘉年华在上海自然博物馆重磅开幕。该体验项目将于12月1日正式对公众开放,持续至2025年3月30日。双向奔赴,恐龙IP撞上元宇宙不久前,上海市经济和信息化委员会等部门联合印发了《上海市超高清视听产业发展行动方案》,特别提到“支持博物馆、主题乐园等场所推动超高清视听技术应用,丰富线下文旅消费体验”。作为上海自然
    电子与消费 2024-11-30 22:03 103浏览
  • RDDI-DAP错误通常与调试接口相关,特别是在使用CMSIS-DAP协议进行嵌入式系统开发时。以下是一些可能的原因和解决方法: 1. 硬件连接问题:     检查调试器(如ST-Link)与目标板之间的连接是否牢固。     确保所有必要的引脚都已正确连接,没有松动或短路。 2. 电源问题:     确保目标板和调试器都有足够的电源供应。     检查电源电压是否符合目标板的规格要求。 3. 固件问题: &n
    丙丁先生 2024-12-01 17:37 111浏览
  • 当前,智能汽车产业迎来重大变局,随着人工智能、5G、大数据等新一代信息技术的迅猛发展,智能网联汽车正呈现强劲发展势头。11月26日,在2024紫光展锐全球合作伙伴大会汽车电子生态论坛上,紫光展锐与上汽海外出行联合发布搭载紫光展锐A7870的上汽海外MG量产车型,并发布A7710系列UWB数字钥匙解决方案平台,可应用于数字钥匙、活体检测、脚踢雷达、自动泊车等多种智能汽车场景。 联合发布量产车型,推动汽车智能化出海紫光展锐与上汽海外出行达成战略合作,联合发布搭载紫光展锐A7870的量产车型
    紫光展锐 2024-12-03 11:38 121浏览
  • 作为优秀工程师的你,已身经百战、阅板无数!请先醒醒,新的项目来了,这是一个既要、又要、还要的产品需求,ARM核心板中一个处理器怎么能实现这么丰富的外围接口?踌躇之际,你偶阅此文。于是,“潘多拉”的魔盒打开了!没错,USB资源就是你打开新世界得钥匙,它能做哪些扩展呢?1.1  USB扩网口通用ARM处理器大多带两路网口,如果项目中有多路网路接口的需求,一般会选择在主板外部加交换机/路由器。当然,出于成本考虑,也可以将Switch芯片集成到ARM核心板或底板上,如KSZ9897、
    万象奥科 2024-12-03 10:24 86浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2024-12-02 10:40 134浏览
  •         温度传感器的精度受哪些因素影响,要先看所用的温度传感器输出哪种信号,不同信号输出的温度传感器影响精度的因素也不同。        现在常用的温度传感器输出信号有以下几种:电阻信号、电流信号、电压信号、数字信号等。以输出电阻信号的温度传感器为例,还细分为正温度系数温度传感器和负温度系数温度传感器,常用的铂电阻PT100/1000温度传感器就是正温度系数,就是说随着温度的升高,输出的电阻值会增大。对于输出
    锦正茂科技 2024-12-03 11:50 140浏览
  • 最近几年,新能源汽车愈发受到消费者的青睐,其销量也是一路走高。据中汽协公布的数据显示,2024年10月,新能源汽车产销分别完成146.3万辆和143万辆,同比分别增长48%和49.6%。而结合各家新能源车企所公布的销量数据来看,比亚迪再度夺得了销冠宝座,其10月新能源汽车销量达到了502657辆,同比增长66.53%。众所周知,比亚迪是新能源汽车领域的重要参与者,其一举一动向来为外界所关注。日前,比亚迪汽车旗下品牌方程豹汽车推出了新车方程豹豹8,该款车型一上市就迅速吸引了消费者的目光,成为SUV
    刘旷 2024-12-02 09:32 131浏览
  • 《高速PCB设计经验规则应用实践》+PCB绘制学习与验证读书首先看目录,我感兴趣的是这一节;作者在书中列举了一条经典规则,然后进行详细分析,通过公式推导图表列举说明了传统的这一规则是受到电容加工特点影响的,在使用了MLCC陶瓷电容后这一条规则已经不再实用了。图书还列举了高速PCB设计需要的专业工具和仿真软件,当然由于篇幅所限,只是介绍了一点点设计步骤;我最感兴趣的部分还是元件布局的经验规则,在这里列举如下:在这里,演示一下,我根据书本知识进行电机驱动的布局:这也算知行合一吧。对于布局书中有一句:
    wuyu2009 2024-11-30 20:30 141浏览
  • 遇到部分串口工具不支持1500000波特率,这时候就需要进行修改,本文以触觉智能RK3562开发板修改系统波特率为115200为例,介绍瑞芯微方案主板Linux修改系统串口波特率教程。温馨提示:瑞芯微方案主板/开发板串口波特率只支持115200或1500000。修改Loader打印波特率查看对应芯片的MINIALL.ini确定要修改的bin文件#查看对应芯片的MINIALL.ini cat rkbin/RKBOOT/RK3562MINIALL.ini修改uart baudrate参数修改以下目
    Industio_触觉智能 2024-12-03 11:28 104浏览
  • TOF多区传感器: ND06   ND06是一款微型多区高集成度ToF测距传感器,其支持24个区域(6 x 4)同步测距,测距范围远达5m,具有测距范围广、精度高、测距稳定等特点。适用于投影仪的无感自动对焦和梯形校正、AIoT、手势识别、智能面板和智能灯具等多种场景。                 如果用ND06进行手势识别,只需要经过三个步骤: 第一步&
    esad0 2024-12-04 11:20 94浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦