在手机和物联网边缘设备上运行高效AI的需求正迅速增长。通过为边缘TinyML添加能模仿人脑感知和学习的神经形态模拟信号处理,将复杂AI算法嵌入到设备或传感器硬件中,使得AI计算和学习不在云或远程服务器上、而在边缘设备本身即可完成,省去与云的交互,原始数据流减少了上千倍,从而使其非常适合工业物联网等广泛用途。

如今,在边缘小型设备上运行高效人工智能(AI)的需求正在迅速增长。传统上,边缘设备需将海量数据与云端进行收发交互。在智能手机和物联网(IoT)设备中,未来的边缘AI必须运行在使用更小电池供电的微处理器和微控制器上。这样可以减少与云的往返通信,还能够解决延迟问题。

可行的解决方案是在边缘利用TinyML技术。这里,可能让读者惊讶的是模拟在该技术中所扮演的角色。

图1:显示边缘侧机器学习的使用以及广泛的TinyML生态系统即服务。资料来源:MDPI

AI涉及使用机器学习(ML)和深度学习等技术从数据中获取知识的设备和系统。TinyML涉及将复杂的AI算法构建到设备或传感器的硬件中。通过这种集成,因为省去了与云的交互,数据分析所需的能量更少。另外,由于没有数据传输,外部攻击和安全漏洞也减少了。

采用TinyML模型时,只有模型参数才被发送到云端进行处理。第一次学习在服务器上进行,而更具体的学习则在本地完成。

微型机器学习或TinyML包括能够完成设备传感器数据分析的硬件、算法和软件。功耗极低(毫瓦级或更低),并支持常开机场景和电池供电设备。

现在,看看如何为边缘TinyML技术添加神经形态模拟信号处理(NASP)。

神经形态模拟信号处理

神经形态计算是指系统单元在硬件和软件上模拟人脑和神经系统,从而实现更快的计算速度和更低的功耗。就像大脑一样,可并行处理许多操作。

2022年4月,POLYN发布了NeuroSense,这是一种专有的神经形态芯片。神经形态模拟信号处理器(NASP)器件被设计作为实时边缘传感器信号处理器。POLYN的NASP芯片利用模拟电路,其中神经元利用运算放大器来实现,而神经轴突则由薄膜电阻器来实现。POLYN声称,这是业界首个神经形态模拟TinyML芯片,可直接紧贴传感器使用,可省掉模数转换器(ADC)。

这里,TinyML使用了一种称为嵌入式的技术,该技术允许人工智能计算直接在芯片上执行,而不是在云端或远程服务器上执行。该嵌入指的是将训练好的自动编码器神经网络建构在深层和隐层中。它们包含关于传感器输入数据及其用于传感器数据预处理的密集信息;将嘈杂的原始数据流减少了1000倍,使其适用于工业物联网(IIoT)用途。

因此,NASP芯片是解决功耗和计算延迟问题的TinyML的具体实现。

图2:利用传感器数据预处理中的嵌入,将噪声原始数据流减少了1000倍,使其适合工业物联网用途。资料来源:POLYN

值得注意的是,在这种环境下的数字实现,并不会将海量并行数据处理至最适于神经网络计算之所需。数字神经网络模型具有模拟神经元;它在数字处理器内核中使用标准的逐次连续数学运算。然而,传统处理器上的数字神经网络效率低下,尽管在过去二十年中,数字神经网络的实现取得了重大进展,但能耗问题一直没有得到解决。

图3:在数字神经网络实现中,功耗仍然是一个问题。资料来源:POLYN

通过构建人工神经系统、实现神经元和突触(synaps),来传递模拟电路上的电信号,使这种神经形态模拟计算成功模拟了大脑的功能和效率。这就是为什么模拟神经形态芯片非常适合神经网络工作的原因。

这里,NASP方法简化了芯片布局。它结合了固定权重方法和固定芯片结构,类似于人类视觉神经和视网膜,以及负责对接收到的嵌入内容进行进一步分类的灵活功能。在混合概念中(参见图4),固定神经网络的组合负责模式检测,并与用于模式解释的灵活算法相结合。

图4:使用NASP,大多数负责原始数据预处理的神经网络层在训练阶段后保持不变,只有在接收新数据和重新训练时方才更新。来源:POLYN

NASP混合核心概念的基本部分包括一个具有超低功耗和低延迟、并生成内嵌的固定神经形态模拟核,以及一个用于最终分类的非常灵活的数字内核。为解决功耗和计算延迟难题,该解决方案分为固定和灵活两部分。固定部分是模拟的,只有基于嵌入的相对少量的输出才被发送到灵活数字处理部分进行分析。

神经形态应用扩展

POLYN Technology和Edge Impulse的联手利用NASP,使得设计工程师能够开发用于传感器级一维信号处理的专用应用芯片。目标是加速ML在边缘的利用。

图5:POLYN的神经形态模拟信号处理器(NASP)模仿人脑感知和学习的方式。来源:POLYN

Edge Impulse推出了其机器学习软件,实现了更智能的边缘产品,并提供了强大的自动化能力,且代码量极小。该公司声称,其解决方案使创建重要的数据集以及快速开发高级ML算法和行业特定解决方案变得更容易,只需几周,而不是通常的几年。

POLYN和Edge Impulse最初专注于听力设备,在任意环境中利用POLYN的语音检测和语音提取,功耗可低至150uW,可用于各种助听器和助听器产品的设计、还有耳塞和包括可穿戴设备在内的其他微型设备。

接下来还有工业物联网、机器人、自动视频安全、语音助手、自动校正、摄像头图像处理、自动驾驶、远程医疗、工业4.0和精准农业中的广泛用例。

本文为《电子工程专辑》2023年2月刊杂志文章,版权所有,禁止转载。点击申请免费杂志订阅

 

责编:Jimmy.zhang
阅读全文,请先
您可能感兴趣
CNE的成立是Rusnano在高科技和新技术领域投资战略的重要一环,也是其最大的半导体生产项目,官方资料显示这是一家 300 毫米晶圆上的集成电路和电子元件制造商……
一项技术要想产生广泛的影响,它不仅要解决短期的挑战,还应该超越现有技术的进步,为未来的创新打开大门。这就是我们对泛林集团(Lam Research)今年早些时候推出的全球首个用于半导体量产的脉冲激光沉积(PLD)技术的描述。
当今这个数字化时代,图像传感器技术的发展对于摄影、安防、医疗等多个领域的重要性不言而喻。近日,合肥晶合集成电路股份有限公司与国内设计公司思特威联合宣布,他们共同研发的首颗1.8亿像素全画幅(2.77英寸)CMOS图像传感器(CIS)已成功试产。
在美国国防部将中国禾赛科技列入所谓的“中国军方关联企业黑名单”后不久,又决定将其移除……
激光雷达正在迅速获得人们的关注,并被广泛用于ADAS和自动驾驶汽车传感系统,但该技术有多种实现方法。本文介绍了这些方法以及相干激光雷达检测的相对优势。
雷达在新型汽车设计中随处可见。现在,高清雷达可以在所有天气条件下发挥作用,可以作为AI物体检测的前端,与其他传感器通道相辅相成,进一步提高准确性和安全性。高价值嵌入式雷达系统的制造商有着巨大的潜力。然而,如何在竞争中发掘这种潜力可能是一项挑战。
• 得益于西欧、关键亚洲市场和拉丁美洲市场的增长,以及中国品牌的持续领先,全球折叠屏手机出货量在2024年第二季度同比增长了48%。 • 荣耀凭借其在西欧特别强劲的表现,成为最大的贡献者,成为该地区排名第一的品牌。 • 摩托罗拉的Razr 40系列在北美和拉丁美洲表现良好,为其手机厂商的出货量贡献了三位数的同比增长。 • 我们预计,头部中国手机品牌厂商的不断增加将至少在短期内抑制三星Z6系列在第三季度的发布。
AI技术的发展极大地推动了对先进封装技术的需求,在高密度,高速度,高带宽这“三高”方面提出了严苛的要求。
奕斯伟计算2024首届开发者伙伴大会以“绿色、开放、融合”为主题,从技术创新、产品应用、生态建设等方面,向开发者、行业伙伴等相关方发出开放合作倡议,加速RISC-V在各行各业的深度融合和应用落地,共同推动RISC-V新一代数字基础设施生态创新和产业发展。
2024年 Canalys 中国云计算渠道领导力矩阵冠军厂商分别是:阿里云、华为云和亚马逊云科技(AWS)
在全球智能手机竞争日益激烈的情况下,谁能在高端市场站稳脚跟,谁就占据了主动权。一直以来全球智能手机市场格局都是,苹果专吃高端,其他各大厂商分食全球中低端市场。但现在市场正在其变化。根据Canalys最
文|德福很多去成都旅游的朋友都有个疑惑——为什么在成都官方的城市标志上看不到熊猫,而是一个圆环?其实这个“圆环”大有来头,它被唤作太阳神鸟,2001年出土于大名鼎鼎的金沙遗址,距今已有三千余年历史。0
据市场调查机构Allied Market Research的《单晶硅晶圆市场》报告指出,2022年单晶硅晶圆市场价值为109亿美元,预计到2032年将达到201亿美元,2023年~2032年的复合年均
在德国柏林举行的IFA 2024上,AMD计算和图形业务集团高级副总裁兼总经理Jack Huynh宣布,公司将把以消费者为中心的RDNA和以数据中心为中心CDNA架构统一为UDNA架构,这将为公司更有
会议预告向世界展示中国最具创新力、领导力和品牌化的产品与技术!9月27号,“第6届国际移动机器人集成应用大会暨复合机器人峰会”将在上海举行,敬请关注!逐个击破现有痛难点。文|新战略半导体行业高标准、灵
近日,又一国产SiC企业宣布实现了主驱突破,并将出口海外。据“行家说三代半”的追踪统计,自2022年起,国内主驱级SiC器件/模块开始在多款车型中得到应用,尤其是2024年,本土供应商的市场份额显著上
‍‍‍‍上市PCB厂商竞国(6108)日前出售泰国厂给予陆资厂胜宏科技后,近日惊传台湾厂惊传12月前关厂,并对客户发布通知预告客户转移生產,最后出货日期2024年12月25日。至於后续台湾厂400名员
近日A股上市公司陆续完成2024年上半年业绩披露,其中24家SiC概念股上半年合计营收同比增长14.58%至1148.65亿元,研发费用同步增长7.22%至69.16亿元。尤为值得注意的是,天岳先进、
今日碎碎念由于所租的共享办公空间政策的调整,上周我和我队友又搬到开放共享空间了。所以,也就有了新同桌。从我的观察来看,新同桌们应该基于AI应用的创业型公司。之所以想起来叨叨这个,是因为两位新同桌正在工
点击蓝字 关注我们准确的图像深度和细节对于安保摄像头、人脸识别设备和机器视觉设备至关重要,可以提供更真实且高保真的观看体验。为在具体应用中达到这一效果,需要具备某些图像传感器功能,其中之一就是自适应局