MWC Shanghai展会的ST展位上可以看到TWS耳机相关的传感器产品及功能展示,ST今年在主推骨传导降噪和空间音频特性。我们和意法半导体MEMS部门市场经理刘轶谈了谈TWS耳机可能的未来。

TWS耳机作为前两年就兴起的热点,一直是消费电子市场的香饽饽。即便近一年以来的消费电子市场并不理想,今年MWC Shanghai展会上的TWS耳机相关展示热度依然不减,而且绝大部分咨询机构都预测了2023年TWS耳机出货量的相对回升。

ST(意法半导体)在去年的Capital Markets Day 2022上,就MEMS传感器与制动器业务方向,将TWS、AR/VR/MR、健康数据感知定为“新兴应用(emerging applications)”,视作“高增长领域”,在未来数年内都还将有相当大的增长潜力。

我们也在MWC Shanghai展会的ST展位看到了TWS耳机相关的传感器产品及功能展示,和意法半导体MEMS部门市场经理刘轶谈了谈TWS耳机可能的未来。刘轶说:“消费者对产品的功能特性一直是有追求的,不会满足于当下。这就需要我们和TWS耳机厂商一起开发,达成更多的特性、给客户提供更好的体验。”

 

骨传导降噪和空间音频

ST在展会上展示了一款配备LSM6DSV16BX传感器的TWS耳机demo。LSM6DSV16BX是一个IMU六轴传感器,配合音频加速计构成的高度集成方案。

这颗传感器是ST前几个月发布的,当时EE Times也报道过这颗芯片以小尺寸应用于耳机设备能够极大程度地节省设计空间,以及借助IMU传感器来追踪头部动作,辅以音频加速计通过骨传导来检测声音等。

刘轶给我们展示的demo主要是两个方向。其一就是骨传导通话降噪:比如用这款TWS耳机打电话,在嘈杂环境下,ST的这颗传感器记录通话人的骨骼振动信息,结合麦克风收集声音,“再借助算法,分辨哪些是噪音、哪些是人说话的声音,对噪音进行反向消除”,“提取出纯净的人声”,“对方会感觉我在很安静的环境下说话——非常适合商务人士或经常移动办公的人”。

这里的“骨传导”,并不是指那种借助骨传导发声的耳机;而是借助骨骼振动传导数据,针对说话人一方的背景噪音做消除的技术。展位现场,刘轶演示用这款耳机和我们进行通话:刘轶作为发起通话的一方,其手机一旁就在播放较大声的音乐;就我们受话方这一侧,是完全听不到对方的背景音乐的。

相较于直接用手机听筒与麦克风来拨打电话,从受话方的角度来看,背景噪音的差别还是相当大的——还需要考虑到我们是在嘈杂的展会现场接打电话。

其二是空间音频:这项特性在TWS竞品上已经有了对应的实现。ST的方案是借助于传感器追踪头部动作,基于头部的移动、转动、抬起可对音频声场做调整,耳机中听到的声音来源根据头部朝向做实时调整,而不是总在一个固定的位置上;好比听音乐时,某个乐器的发声位置,会根据头部朝向做对应调整,也就提供了更沉浸式的临场感。

“空间音频需要六轴传感器来支持。不仅是国内的头部厂商,也有不少二三线厂商都在开发这样的功能。”刘轶说,“因为这项功能对用户体验有非常大的提升。消费者也愿意为这样的音频体验多花一点钱。对于ST来说,我们能够提供传感器产品来支持这样的功能。”在刘轶看来,空间音频未来会越来越普及,不止于当前某一两家头部厂商和高端产品。

“像3D空间音频这样的特性,也给XR应用做了探索性的启发。我相信越来越多的AR/VR厂商会去做空间音频,来达到极致影音效果。”“我们会配合客户、下游厂商,包括第三方算法供应商,进行通力合作,做好空间音频的产品。”

“而作为传感器供应商,ST也有一些sensor fusion的功能。” 刘轶表示,“我们提供一些库,和相关的软件算法专家来支持客户”,“降低了开发难度,节省开发资源。开发者可以把更多的精力放到UI端,发挥他们的优势和特色。”

 

TWS耳机的未来需求

刘轶将LSM6DSV16BX的优势概括为“低功耗、超高稳定性/精准性、高集成度”。

高集成度还是很好理解。从ST的官网资料可知,LSM6DSV16BX是SiP封装的IMU,其中包含一个3轴数字加速度计和一个3轴数字陀螺仪——针对运动追踪在3个通道上处理加速度和角速度数据,以及振动检测——也就能支持前文提到的骨传导,另外配合Qvar电荷变化检测感知。

“LSM6DSV16BX在紧凑型封装中集成了UI传感器(用于实现如单击、双击操作,入耳检测等)、音频加速度计(实现本例中的骨传导音频降噪),以及Qvar传感器。”刘轶介绍说这款产品的高集成度就体现在“将原本需要3-4个sensor的方案集成到一颗芯片上”。

与此同时,这颗传感器也具备数据处理能力,包括FSM(有限状态机)、SFLP(sensor fusion low power)、ASC(adaptive self-configuration)和MLC(机器学习内核)。拿其中的MLC,即AI特性来说,“具体到我们的产品上,它会记录用户的使用习惯。比如空间音频,记录用户的各种转头、抬头、移动的习惯,采集数据做数据分析,训练模型;我们向开发者提供这样的AI框架。”在开发者工具上,“包括AI机器学习、有限状态机,我们也向开发者提供示例。”

这些实际上也部分体验了“低功耗”特点。除了更高的集成度本身能带来更低的功耗,“之前需要3-4颗芯片解决的问题,现在1颗芯片就能解决”;另外“传统的sensor,实时判断、处理需要MCU基于算法来进行,功耗就会更高。如果这些功能在sensor内部完成,直接输出数据给MCU。由于sensor的功耗在μA级别,而MCU至少需要在mA级别。”刘轶谈到,“额外提一句,ST在数字产品方面也有很多的know-how,也能体现低功耗的优势。”“我们也提供一些开发算法、工具,减少MCU运行的时间和功耗。”

“从系统的角度,提高集成度的同时,优化了功耗;另外也降低了整机的成本,毕竟这么多特性集成到了一颗硬件上。”而“高精准度”的部分,“我们也在做持续的优化,实现参数的再优化;随着技术的迭代,来提升产品精度。”

除了这几大优势项之外,“我们一直在开发新功能,比如骨传导通话降噪——这也是ST首创的”;“另外不光是传统耳机上的sensor,我们现在也在尝试一些运动记录的功能,包括运动状态识别、计步;同时也在开发对应的算法,丰富产品线,给客户带来价值”,“戴上耳机就能做运动计步”。刘轶表示在TWS耳机中引入运动健康相关特性的开发已经在进行中。

“消费者对产品的功能特性一直是有所追求的,不会满足于当下。这就需要我们和TWS耳机厂商一起开发,达成更多的特性功能、给客户提供更好的体验。”“今年我们开发的产品,我觉得就给市场提供了新的选择:做到高集成度、简易的开发体验、提供包括空间音频、骨传导降噪在内的特性,未来还会有运动健康的特性在耳机里实现。”

在我们问到有关TWS耳机这些年的进化,以及未来会向哪个方向发展时,刘轶总结说是特性的增加和体验的持续加强;从传感器的角度来看,“就我们的产品来看,是高度集成化、高精准度、更低的功耗”,“除了传统功能,现在还在做更好的人机交互、动作识别,未来还会开发新的功能。”

和意法半导体MEMS部门市场经理 刘轶

ST的这颗IMU六轴传感器当前主要应用于高端品质的TWS耳机产品。刘轶也说,基于ST这类传感器的市场定位,即便当前消费电子市场整体并不理想, “搭载IMU传感器的产品相比前两年仍然有增长”,而且“大家对新技术的需求在提升”,“从这个角度来看,这也促使我们作为方案商、芯片商能够更好地开发有价值的产品,提供给客户,促进市场健康发展”,“这个市场对我们来说还是有很多的机会”。

责编:Illumi
阅读全文,请先
您可能感兴趣
由于在满足所有要求方面存在不同的权衡,因此很难采用一种适用于所有情况的电流检测方法。
在经历了两年多的时间后,即2024年12月2日,赛微电子通过互动平台回应投资者提问时表示:“受外部客观因素影响,公司合肥项目已停止推进。”
短期全球芯片市场数据的上调反映了 2024 年第 2 季度和第 3 季度业绩的改善,尤其是在计算领域,受AI 芯片支持的需求推动。
石头科技董事长昌敬频繁出现在社交媒体上推广其创立的极石汽车品牌,活跃表现与石头科技股价的下跌形成了鲜明对比,加剧了投资者的不满情绪……
此次发布的iQOO Neo10系列不仅在性能上进行了全面升级,还在用户体验方面引入了多项创新技术,其中再次采用汇顶科技超声波指纹方案,引发了广泛关注。
UWB技术的精准定位需要与支付系统的安全性相结合。此外,UWB无感支付需要解决多人同时通过闸机时的精准识别问题,以及防止插队和误扣费等情况。
目前,智能终端NFC功能的使用频率越来越高,面对新场景新需求,ITMA多家成员单位一起联合推动iTAP(智能无感接近式协议)标准化项目,预计25年上半年发布1.0标准,通过功能测试、兼容性测试,确保新技术产业应用。
中科院微电子所集成电路制造技术重点实验室刘明院士团队提出了一种基于记忆交叉阵列的符号知识表示解决方案,首次实验演示并验证了忆阻神经-模糊硬件系统在无监督、有监督和迁移学习任务中的应用……
C&K Switches EITS系列直角照明轻触开关提供表面贴装 PIP 端子和标准通孔配置,为电信、数据中心和专业音频/视频设备等广泛应用提供创新的多功能解决方案。
投身国产浪潮向上而行,英韧科技再获“中国芯”认可
近期,多个储能电站项目上新。■ 乐山电力:募资2亿建200MWh储能电站12月17日晚,乐山电力(600644.SH)公告,以简易程序向特定对象发行A股股票申请已获上交所受理,募集资金总额为2亿元。发
投资界传奇人物沃伦·巴菲特,一位94岁的亿万富翁,最近公开了他的遗嘱。其中透露了一个惊人的决定:他计划将自己99.5%的巨额财富捐赠给慈善机构,而只将0.5%留给自己的子女。这引起了大众对于巴菲特家庭
12月18日,珠海京东方晶芯科技举行设备搬入仪式。插播:加入LED显示行业群,请加VX:hangjia188在10月31日,珠海京东方晶芯科技有限公司发布了Mini/Micro LED COB显示产品
对于华为来说,今年的重磅机型都已经发完了,而明年的机型已经在研发中,Pura 80就是期待很高的一款。有博主爆料称,华为Pura 80将会用上了豪威OV50K传感器,同时电池容量达到5600毫安时。至
12月18 日,据报道,JNTC与印度Welspun BAPL就车载盖板玻璃的开发及量产签订了投资引进业务合作备忘录(MOU)。资料显示,JNTC是韩国的一家盖板玻璃厂商。Welspun的总部位于印度
万物互联的时代浪潮中,以OLED为代表的新型显示技术,已成为人机交互、智能联结的重要端口。维信诺作为中国OLED赛道的先行者和引领者,凭借自主创新,实现了我国OLED技术的自立自强,成为中国新型显示产
2024年度PlayStation游戏奖今日公布,《宇宙机器人》获得年度最佳PS5游戏,《使命召唤:黑色行动6》获得年度最佳PS4游戏。在这次评选中,《宇宙机器人》获得多个奖项,包括最佳艺术指导奖、最
阿里资产显示,随着深圳柔宇显示技术有限公司(下称:“柔宇显示”)旗下资产一拍以流拍告终,二拍将于12月24日开拍,起拍价为9.8亿元。拍卖标的包括位于深圳市龙岗区的12套不动产和一批设备类资产,其中不
近期,高科视像、新视通、江苏善行智能科技等企业持续扩充COB产能。插播:加入LED显示行业群,请加VX:hangjia188■ 高科视像:MLED新型显示面板生产项目(二期)招标12月18日,山西高科
LG Display  12月18日表示,为加强OLED制造竞争力,自主开发并引进了“AI(人工智能)生产体系”。“AI生产体系”是AI实时收集并分析OLED工艺制造数据的系统。LG Display表