苏黎世神经科学研究所(INI-Zurich)的研究团队致力于开发低延迟、低功率的语音检测传感器。在此传感器的核心是一个生物模拟的硅耳蜗,功耗仅几微瓦(µW),可望为系统设计人员在设计时带来更具电源效率的选择…

我们使用的传感和计算设备无处不在,而且会不断增多,设备始终处于工作状态,因此功率变得越来越重要。最好的例子就是放在办公桌上、口袋里以及散布家中各处的声控设备。关键词捕捉是目前各种神经拟态技术的一个目标。

硅耳蜗

2020年,神经拟态工程学Misha Mahowald奖的获得者是Shih-Chii Liu教授及其团队,他们一直致力于研究低延迟、低功率传感器,用于语音检测。苏黎世神经科学研究所(INI)的Shi-Chii Liu及其团队开发的动态音频传感器拓展了这一市场(图1)。传感器的核心是一个生物仿真硅耳蜗。首先,它利用一组模拟带通滤波器将输入的声音滤入到各个频道,并在输出侧对其进行半波整流。这组电路仿真耳朵中毛细胞的功能。

图1:A.在常见的音频系统中,声音首先通过模数转换器转换成数字信号,然后使用数字快速傅立叶变换(FFT)和带通滤波(BPF)提取信号特征。这些信号由数字信号处理器(DSP)运行语音端点检测(VAD)或自动语音识别算法进行处理。B.在苏黎世INI的动态音频传感器中,接收信号为模拟音频频带,其特征和变化被并行编码成一系列的异步尖峰信号(事件),随后进行处理。

这一过程类似于生物学中让不同通道为大脑的处理做好准备。在人耳中,神经节细胞将信号快速编码为一串化学离子;在硅耳蜗中,则被转换成电尖峰信号。这一步可以通过使用常用的IF神经元模型或异步增量调制器(ADM)来完成:ADM将信号与两个阈值进行比较,并在信号超过阈值时发送事件——相当于信号特征提取器。因为忽略了不变的信号,从而减少了传递到下一级的冗余信息。

从功率的角度来看,在没有任何活动时,硅耳蜗几乎不会消耗任何电量,随着活动的增加,尖峰信号的数量也随之增加。对于一直在听却很少进行处理的应用而言,这是一个巨大的优势;而当应用一直需要对相关内容进行解码时,则没有明显的功耗优势。

由于这种音频传感器的功耗只有几微瓦,系统设计人员在设计中可以将其作为一个很有用的选择,以便提高电源效率。此外,该音频传感器是在连续时间内工作,尖峰之间的距离可近可远,因此它也支持非常高的动态范围。

语音识别

这项工作的关键是证明硅耳蜗的有用性,具体而言,就是由硅耳蜗产生的事件串流可以用于语音端点检测(关键词识别的第一阶段)等实际应用中。Liu和她的团队成功地做到了,他们使用事件输出来创建2D数据帧,尖峰信号到达的直方图在5ms的帧上按频率排列。这即是类耳蜗图,可以由神经网络读入并解码其含义。

“IEEE ISSCC社群对在传感器上使用深度网络非常感兴趣,音频边缘计算正在兴起,深度网络出现得非常及时。”Liu说,“现在已经有很多利用低功耗专用集成电路(ASIC)进行关键词识别的论文,但这些论文都采用类似频谱图的常规功能。我们的一个目标是要证明混合方案(混合模拟信号设计)可以提供更低的功率,减少响应延迟。”

去年INI发布了一段视频,展示了数字识别系统。该系统现在仍处于开发初期,还不是绝对可靠。Liu的团队成员还有Minhao Yang、Chang Gao、Enea Ceolini、Adrian Huber、Jithendar Anumula、Ilya Kiselev和Daniel Neil,多年来他们还研究了传感器融合,将音频和视频信息结合起来,以进行更可靠的分类。他们一直遵循初期的设计准则来决定什么时候应该选择模拟传感器,什么时候应使用数字传感器。

图2:Misha Mahowald是地址事件表示法(AER)的发明者之一,“神经拟态工程奖”就是以她的名字命名的。

他们的另一个目标是提高数据采集系统(DAS)的电源效率和性能,包括利用源极跟随器实现带通滤波器,以及设计模拟特征提取器。

减少模拟电子器件易变性的影响是另一个重要的研究领域。为了解决这个问题,Liu及其团队设计了一个硬件仿真器。他们表示,与Cadence Virtuoso这样的商用软件相比,该仿真器可以更快地测试这些问题。使用软件而非硬件来训练二进制神经网络进行分类,能够准确预测多种测试芯片的分类性能。Liu及其团队正在考虑在系统中增加噪音来测试其易变性,使设计过程更加稳健。

Mahowald奖

Liu是神经拟态工程学的早期研究者之一,她在加州理工Carver Mead的实验室工作过,是苏黎世神经信息学研究所的创始人之一,当时研究组许多人员离开加州前往苏黎世。Mahowald(图2)也曾在该实验室工作。

在获得该奖项时,Liu说:“我们很荣幸能够获得这个奖项,特别是与这么多神经拟态工程学的优秀研究人员一起。这项工作建立在数十年早期硅耳蜗设计的基础上,是Dick Lyon、Carver Mead、Lloyd Watts、Rahul Sarpeshkar、Eric Vittoz和Andre van Schaik的工作的延续。

谈到神经拟态工程学的重要性,她说:“即便摩尔定律走到尽头,数字计算的能效仍比生物学的落后,只有其千分之一。因此,DAS这类混合模拟电子系统能达到什么样的效率比以往任何时候都更加重要。”

编译:Jenny Liao, EDN China

本文授权编译自EETimes,本文为《电子技术设计》2021年4月刊杂志文章,版权所有,禁止转载。免费杂志订阅申请点击这里

原文参考链接:Allowing Machines to Listen, and Understand

 

您可能感兴趣
最近收到一款Jetson Orin Nano Super开发套装,我打算拿它来做个简单的AI应用开发...在没有任何AI应用和嵌入式应用开发经验的基础上...主打传说中的零代码开发~
“物理智能(Physical AI)”,黄仁勋在CES 2025上发表主题演讲时提出的新概念。他指出,即将全面到来的“Physical AI”时代,将是在1000万工厂、20万仓库、15亿汽车和卡车及海量人形机器人之上应用的下一波万亿规模市场驱动力。
微软还强调,拜登政府的《人工智能扩散出口管制框架》限制了美国向许多快速增长且具有战略意义的市场出口关键AI组件,破坏了特朗普政府的两项优先事项:加强美国的AI领导地位以及减少美国近万亿美元的贸易逆差。
该标准旨在为养老机器人的设计、制造、测试和认证提供统一规范,推动全球养老机器人产业的健康发展,通过明确养老机器人的功能与性能分类,确保其在互联家居环境中的有效应用。
2月以来,一些人形机器人头部企业高薪案例值得关注。其中,宇树科技招聘机器人感知算法工程师、机器人控制算法专家等岗位,月薪可达7万元至10万元。智元机器人SLAM算法专家月薪4-7万元,年薪超百万(15薪制)。
在应对美国加码措施上,中国一方面应该依托自身庞大的垂直应用场景,特别是工业制造领域,在做大做强中国制造的同时,推动国产AI芯片的替代,另一方面仍需加大基础研究投入,重点突破AI芯片设计、半导体设备和先进工艺制程。
TEL宣布自2025年3月1日起,现任TEL中国区地区总部——东电电子(上海)有限公司高级执行副总经理赤池昌二正式升任为集团副总裁,同时兼任东电电子(上海)有限公司总裁和东电光电半导体设备(昆山)有限公司总裁。
预计在2025年,以下七大关键趋势将塑造物联网的格局。
领域新成果领域新成果4月必逛电子展!AI、人形机器人、低空飞行、汽车、新能源、半导体六大热门新赛道,来NEPCON China 2025一展全看,速登记!
本次股东大会将采取线上和线下相结合的混合形式召开,股东们可选择现场出席或线上参会。
本文来源:物联网展行业变革:“位置即服务”正催生万亿级市场裂变数据洞察:2025年全球GNSS市场规模预计达680亿美元,年复合增长率28%,其中智能穿戴、资产追踪、工业安全三大场景贡献超50%。增量
引言 嘿,各位电动汽车的爱好者们!咱们今儿个就来聊聊电动汽车里那些“看不见,摸不着”,但又至关重要的零部件。要说电动汽车这玩意儿,那可真是科技含量满满,各种高精尖的技术都往里堆。但要让这些
Silicon Labs(芯科科技)宣布其MG26系列无线片上系统(SoC)现已通过芯科科技及其分销合作伙伴全面供货。作为业界迄今为止最先进、高性能的Matter和并发多协议解决方案,MG26 SoC
本文来源:智能通信定位圈自动跟随类的产品属于比较酷炫功能的“黑科技”产品。要实现自动跟随的技术可以有很多,但是最常用的就是UWB,因为UWB定位精度高,现在的成本也在下降,手机中也开始逐渐普及UWB等
先问大家一个问题:你有多久没看电视了?对老局来说,最近这几年除了春晚和国庆阅兵,其他情况下,基本已经不会看电视了。当然了,连着PS5打游戏那是另外一回事。不过,虽然我们不怎么看电视了,但电视的市场却并
新思科技与国际半导体产业协会基金会(SEMI 基金会)近日在新思科技总部宣布签署一份谅解备忘录(MoU),携手推动半导体芯片设计领域的人才发展。据预测,到 2030 年,全球半导体行业将需要新增 10
点击文末“阅读原文”链接即可报名参会!往期精选《2024年度中国移动机器人产业发展研究报告》即将发布!2024年,36家移动机器人企业融了超60亿元2024移动机器人市场:新玩家批量入场,搅局还是破局
今日光电     有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。追光逐电,光引未来...欢迎来到今日光电!----追光逐电 光引未来----来源: 逍遥设计自动化申
高通又放大招了!3月3日,也就是MWC世界移动通信大会的第一天,高通正式宣布,推出自家的最新5G调制解调器及射频解决方案——高通X85。高通X85对于高通X85的发布,行业早有关注。因为高通的手机So