深度学习辅助压力传感器识别方言

MEMS 2025-01-09 00:01

研究背景

口语识别作为语音识别的一个分支,可以帮助有语言障碍的人以及人机交互表达想法和发出指令。当前的口语识别涉及直接检测声波,包括频谱分析、声学特征的提取与比较,以及声学纹理分析。然而,直接检测方法容易受到传输介质、环境噪声和说话者生理状态的干扰。通过机械传感器进行的语音识别可以通过检测喉部肌肉的振动来避免这些缺陷,这是基于发音时喉部的解剖基础。

可穿戴压力传感器能够将喉部振动转换为可视化电信号,在检测语音信息方面受到了广泛关注。最初,语音识别主要是通过比较使用压力传感器或触觉传感器捕获的喉部振动电信号波形来实现的。此外,压力传感器可以检测喉部肌肉内的振动,并通过简单的信号处理,如计算信号峰值的斜率和比较峰值宽度,来区分不同的发音。随着人工智能(AI)技术的进步,机器学习被引入用于构建模型,用于训练和识别不同的发音,特别是压力传感器和机器学习的结合。卷积神经网络(CNN)和支持向量机经常被引入用于识别收集的发音信号,以进行语音识别。然而,目前用于语音识别的压力传感器仅限于识别标准语言,这阻碍了方言说话者的有效沟通。对于声调语言,方言发音之间的差异在于声调和音高,这些是由控制舌骨和软骨运动的喉部肌肉产生的。声音音高的升高或降低与喉部肌肉的收缩和放松密切相关。通过具有狭窄检测范围和滞后效应的压力传感器进行方言识别的主要挑战在于,在发声过程中捕捉喉部肌肉微妙且快速的振动的困难。这些因素对压力感应性能提出了严格的要求,例如低检测限、高稳定性和滞后特性。

为了满足语音识别的要求,Ti3C2Tx MXene因其可调节的层间距和优越的导电性成为可穿戴压力传感器的有前途的候选材料。然而,纯Ti3C2Tx通常会受到机械脆性和氧化的影响,使其在重复循环过程中容易崩溃。为了防止在机械刺激下灵敏度退化,将Ti3C2Tx层与纳米结构聚合物基体复合,可以增强特定表面积和更多的接触点。具有高孔隙度的气凝胶结构对于创建有效的电连接和增加传感器层的压缩性至关重要,当暴露于外部压力时,会引起电导率的变化。壳聚糖(CS),作为一种多糖生物聚合物,可以显著增加分子运动的自由度,最终通过在生物聚合物和Ti3C2Tx之间形成坚固的氢键来提高灵活性。聚偏氟乙烯(PVDF)短纤维作为增强相,通过在高压下提供可逆变形来改善气凝胶的耐用性。与广泛用于压力传感器的导电气凝胶相比,这种聚合物纤维增强气凝胶通过利用低密度、在高压下的优异可逆变形以及由于低压缩模量而获得的小信号检测限,实现了宽检测范围,从而超越了导电气凝胶。因此,将聚合物复合到基于Ti3C2Tx的气凝胶中是实现具有增强灵敏度和机械稳定性的可穿戴压力传感器的可行方法。

研究成果

可穿戴压力传感器能够舒适地粘附在皮肤上,在声音检测方面具有很大的潜力。然而,基于压力传感器的当前智能语音助手只能识别标准语言,这限制了非标准语言人群的有效沟通。在这里,吉林大学刘方猛&贾晓腾教授等人制备了一种超轻的Ti3C2Tx MXene/壳聚糖/聚偏二氟乙烯复合气凝胶,其检测范围为6.25 Pa至1200 kPa,响应/恢复时间快,滞后性低(13.69%)。可穿戴气凝胶压力传感器可以通过喉部肌肉振动无干扰地检测语音信息,借助卷积神经网络,能够准确识别六种方言(准确率96.2%)和七个不同的单词(准确率96.6%)。这项工作代表了在人类与机器交互和生理信号监测的无声语音识别方面的重要进步。相关研究以Ti3C2TComposite Aerogels Enable Pressure Sensors for Dialect Speech Recognition Assisted by Deep Learning为题发表在Nano-Micro Letters期刊上。

图文导读


Fig. 1 a Schematic preparation of MX/CS/PVDF aerogel. b Wearable Ti3C2Tx-based aerogel pressure sensor for dialect speech recognition


Fig. 2 Characterization of MX/CS/PVDF aerogels


Fig. 3 Piezoresistive effect of MX/CS/PVDF aerogel pressure sensor


Fig. 4 Pressure-sensing performances of MX/CS/PVDF aerogel pressure sensor


Fig. 5 Real-time monitoring of human physiological signals using the piezoresistive sensor


Fig. 6 Dialect speech recognition assisted by deep learning

总结与展望

在这里,作者制造了基于MX/CS/PVDF的压力传感器,具有超轻密度和显著的耐用性,用于方言识别。精心设计的基于MX/CS/PVDF的压力传感器展示了快速的响应/恢复时间(<72毫秒)和低检测限(6.25帕斯卡),允许检测喉咙中的微小振动。在方言语音识别过程中,喉咙上的发声振动信号超过6888和4158次,通过使用7个词汇和6种汉语方言来训练卷积神经网络模型获得了这些结果。方言发音信息的识别准确率分别达到了96.6%和96.2%。这种高性能的压力传感器在未来的人机交互和健康监测中可以发挥重要作用,用于表达指令和获取生理信息。

文献链接
https://doi.org/10.1007/s40820-024-01605-z

延伸阅读:
《安费诺NovaSensor压力传感器芯片P883产品分析》
《First Sensor工业级STARe压力传感器芯片产品分析》
《Merit Sensor压力传感器及MEMS芯片产品分析》
《博世气压传感器BMP581产品分析》
《触觉技术及市场-2024版》
《印刷和柔性传感器技术及市场-2024版》

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论 (0)
  • 导读Linux驱动程序领域再添新成员,PLIN驱动程序现已正式发布。这一新驱动程序为使用LIN接口的用户提供了一个便捷、高效的解决方案。本文将展示如何安装PLIN驱动程序,以及如何在Linux环境下进行基本的PLIN通信操作,确保您能够快速掌握并应用这一新工具。继我们在Linux环境下成功推出CAN/CAN FD接口驱动程序后,现在我们为LIN接口带来了同样兼容Linux的驱动程序。免费软件包中不仅包含了驱动程序本身,还提供实用工具和一份易于理解的快速入门指南。用户下载后,需要根据当前使用的Li
    虹科汽车智能互联 2025-04-21 14:56 34浏览
  • 精益生产咨询师证/精益管理专业人员证/精益生产工程师证虽然在名称上有一些差异,但其实实际区别并不大,目前类似的证书以ILSSI-CLMP较为得到国际上的认可,当然,你不会因为有一张精益生产咨询师证,而会有人马上请你做咨询师,因为除了知识之外,你还要有充足经验、热诚、沟通能力等等,这些也是我们招聘咨询师的基本要求。那么,有没有必要取得CLMP证书呢?这主要取决于你自己对职业发展的规划和自我提升的意志。CLMP是什么?CLMP的全称是Certified Lean Management Profess
    优思学院 2025-04-21 14:29 27浏览
  •   有效数据智能分拣系统详解   北京华盛恒辉有效数据智能分拣系统融合人工智能、大数据分析与机器学习等前沿技术,实现海量数据自动化分类、筛选、整理及分配。凭借强大的数据处理效能,助力企业精准提取关键信息,优化决策流程,提升运营效率。以下从系统架构、核心功能、技术特性、应用场景及发展趋势展开解读。   应用案例   目前,已有多个有效数据智能分拣系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润有效数据智能分拣系统。这些成功案例为有效数据智能分拣系统的推广和应用提供了有力支持。
    华盛恒辉l58ll334744 2025-04-21 16:46 21浏览
  •  霍尔效应自发现以来,已渗透至多个行业领域,其核心应用可归纳为以下几类:一、‌电子与半导体行业‌1、‌半导体器件开发与测试‌① 通过测量霍尔系数和电阻率,判断器件的导电类型(N型/P型)及载流子浓度分布,优化器件设计和制造工艺‌。② 监控晶圆掺杂水平和表面缺陷,提高集成电路良率‌。2、‌磁场传感器制造与校准‌测试霍尔传感器的灵敏度、线性度、响应时间等参数,确保其在汽车、工业控制等场景下的可靠性‌。3、‌电磁测量仪器‌基于霍尔电压与磁场强度的线性关系,开发高斯计、电流表、功率计等‌。二、
    锦正茂科技 2025-04-21 13:17 29浏览
  • 导读在智能汽车技术发展浪潮中,车辆控制系统的智能化、网络化已成为行业发展的必然趋势。虹科PEAK智行定位车控系统,集成了尖端科技,能够实现车辆全方位监控与控制。从实时GPS定位到CAN/CAN FD信号处理,虹科方案不仅提升了车辆的智能化水平,更在安全性和效率上迈出了革命性的一步。虹科PEAK智行定位车控系统,通过CAN/CAN FD信号实现车辆的精准控制,包括加减速、转弯、倒退等动作,模拟真实车辆平台的动态表现。该系统搭载了虹科各型号设备,通过紧密协作,实时反映车辆位置、总线报文等信息,实现车
    虹科汽车智能互联 2025-04-21 16:04 34浏览
  •   电磁信号模拟平台解析   北京华盛恒辉电磁信号模拟平台作为模拟复杂电磁环境的系统,在无线通信、电子对抗等多领域广泛应用。以下从功能、技术特性、应用场景及发展趋势展开详细解读。   应用案例   目前,已有多个电磁信号模拟平台在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润电磁信号模拟平台。这些成功案例为电磁信号模拟平台的推广和应用提供了有力支持。   一、核心功能   复杂电磁环境建模:构建贴近真实的电磁环境,涵盖各类干扰因素。   多通道信号模拟:模拟多通道电磁信号
    华盛恒辉l58ll334744 2025-04-21 15:10 45浏览
  • 导读在汽车测试和现代工业领域,功耗控制与效率优化是工程师们不断追求的目标。虹科PCAN Router系列设备以其卓越的性能和灵活性,为CAN/CAN FD网络中的报文转换提供了高效解决方案。本文将探讨虹科PCAN Router系列设备如何在保持高效工作的同时,通过低功耗模式和高效唤醒功能,满足对能耗有严格要求的应用场景。虹科PCAN Router系列网关1 低功耗模式的优势与实现在实际的工作场景中,可能会出现一些对功耗要求存在限制的情况。鉴于此,可以灵活设置虹科PCAN Router系
    虹科汽车智能互联 2025-04-21 15:45 28浏览
  •   海上安全事件应急处置系统平台深度解析   一、平台概述   北京华盛恒辉海上安全事件应急处置系统平台融合现代信息技术、通信技术、GIS、大数据分析及 AI 等技术,旨在快速响应船舶碰撞、火灾、溢油等海上突发事件,实现科学决策与高效资源调配,保障海上生命财产安全、减少环境污染。   应用案例   目前,已有多个海上安全事件应急处置系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润海上安全事件应急处置系统。这些成功案例为海上安全事件应急处置系统的推广和应用提供了有力支持
    华盛恒辉l58ll334744 2025-04-21 15:21 49浏览
  •   海上安全事件应急处置系统解析   北京华盛恒辉海上安全事件应急处置系统是为应对船舶碰撞、火灾等海上突发事件打造的综合管理体系,通过技术与协同机制,实现快速响应救援、优化资源配置,守护海上生命、财产与环境安全。以下从系统构成、功能、技术、应用及趋势展开阐述。   应用案例   目前,已有多个海上安全事件应急处置系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润海上安全事件应急处置系统。这些成功案例为海上安全事件应急处置系统的推广和应用提供了有力支持。   一、系统构成
    华盛恒辉l58ll334744 2025-04-21 15:50 40浏览
  •   有效数据智能分拣系统平台深度解析   一、系统概述   北京华盛恒辉有效数据智能分拣系统平台融合人工智能、机器视觉、物联网及大数据分析技术,为物流包裹、数据信息等提供高效精准的智能化分拣处理方案。通过自动化设备与智能算法协同运作,取代传统人工分拣模式,显著提升分拣效率、降低错误率,满足电商、快递及供应链不断增长的业务需求。   应用案例   目前,已有多个有效数据智能分拣系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润有效数据智能分拣系统。这些成功案例为有效数据智能分
    华盛恒辉l58ll334744 2025-04-21 16:22 39浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦