行业前沿的MCU+AI/ML开发工具弥合智能和嵌入式系统之间的差距

SiliconLabs 2024-07-10 17:02

人工智能(AI)和机器学习(ML)是使系统能够从数据中学习,进行推断并随着时间的推移提高其性能的关键技术。这些技术通常用于大型数据中心和功能强大的GPU,但是将它们部署在资源有限的设备(如微控制器MCU)上的需求越来越大。

在本博客中,Silicon Labs(亦称芯科科技产品营销高级经理Gopinath Krishniah先生将带您探究MCU技术和AI/ML的交叉与汇合,以及它如何影响低功耗边缘设备的发展;同时将讨论在电池供电设备的MCU上运行AI的困难、创新和实际用例,并进一步介绍芯科科技专为边缘智能开发所提供全套MCU+AI/ML工具的解决方案。点击文末的阅读原文按钮或访问链接以获取完整内容:https://cn.silabs.com/blog/mcu-ai-ml-intelligence-and-embedded-systems

AI/MLMCU概述

人工智能创造的计算机系统可以完成类似人类的任务,比如理解语言、寻找模式和做决定。机器学习是人工智能的一个子集,涉及使用算法,让计算机从数据中学习,并随着时间的推移变得更好。机器学习模型可以找到模式,排序对象,并从示例中预测结果。

mcu在使AIML在边缘设备上成为可能方面发挥着重要作用。

基于MCU运行的边缘AI/ML用例包括:

  • 关键字识别:识别特定的单词或短语(例如,语音命令),而不需要云连接。

  • 传感器融合:结合来自多个传感器的数据,做出比单一传感器解决方案更明智的决策。

  • 异常检测:检测传感器数据中的异常值或异常模式,可能表明故障,错误或威胁,用于预测性维护或质量控制。

  • 目标检测:在摄像机或其他传感器捕获的图像或视频中识别和定位感兴趣的对象(例如,人脸、行人、车辆)

  • 手势识别:在摄像机或其他传感器捕获的图像或视频中解释人类手势(如手部动作、面部表情、身体姿势),以改善人机交互。


AI/MLMCU上的挑战

深度学习模型,特别是深度神经网络(DNN),已经成为计算机视觉和自然语言处理等复杂任务中不可或缺的一部分。然而,它们的计算需求是巨大的。这种资源密集型模型对于日常设备来说是不切实际的,尤其是那些由边缘设备中的低功耗MCU供电的设备。深度学习模型复杂性的增长是必然的,随着深度神经网络变得越来越复杂,它们的尺寸会膨胀,使它们与MCU上有限的可用计算资源不兼容。

什么是TinyML?

TinyML指的是为在资源受限的设备上部署而优化的机器学习模型和技术。这些设备在边缘运行,在那里生成数据,并在本地执行推理。TinyML系统通常运行在低功耗MCU上,对节点本地收集的数据执行推断。推理是人工智能模型的关键时刻,测试它在训练中所学知识的应用能力。本地推理使MCU能够直接执行AI模型,在不依赖外部服务器或云服务的情况下做出实时决策。

AI/ML环境中,局部推理至关重要,原因如下:

  • 资源限制:许多嵌入式设备,特别是那些使用电池供电的设备,资源有限,例如内存、处理能力和能源效率。传统的通用微控制器由于其有限的处理能力和内存、有限的能源资源或缺乏片上加速而难以有效地执行人工智能任务。本地推理允许这些资源受限的设备在不消耗过多功率的情况下执行AI工作负载,以提高效率和性能。

  • 用户体验增强:考虑一个例子-支持人工智能的电子Cat Flap。通过训练它区分猫和其他物体,它可以只为被授权的猫开门。在这里,本地推理通过确保安全性和便利性来改善用户体验,而不需要诸如RFID项圈之类的额外硬件。

  • 效率和性能:GPU通常用于大规模人工智能部署,因为它们可以并行执行许多流程,这对于有效的人工智能训练至关重要。然而,对于小型嵌入式应用来说,GPU的成本很高,并且超出了功率预算。AI优化的MCU具有专门的架构,通过为AI工作负载提供更好的性能和功率效率来实现平衡。芯科科技提供的新型无线SoCMCU中已包括一个矩阵矢量处理器,作为其AI/ML支持的一部分。这种专门的硬件加速器旨在增强AI/ML算法或矢量数学运算的性能,以缩短推理时间并以更低的功耗执行这些关键任务。


总之,边缘的本地推理可以实现实时决策,减少延迟,增强安全性,使电池供电的设备具有人工智能功能,并增强用户体验,使其成为现代计算系统的关键组成部分,同时满足资源限制。

芯科科技前沿的AI/ML解决方案

芯科科技作为智能、安全物联网无线连接领域的开拓者,正在致力于将AI/ML带到边缘。我们对创新的承诺导致了开创性的解决方案,它赋予资源受限的设备如MCU具备更丰富的智能功能。

针对TinyML进行优化的设备

EFR32xG24EFR32xG28EFR32xG26等无线MCU系列产品均结合了78 MHzARM-M33处理器、高性能无线电、精密模拟性能,以及一个AI/ML硬件加速器,给开发人员一个灵活的平台,用于部署边缘智能。同时,这些产品还支持广泛的物联网无线协议,提供最高的安全性与最佳的RF性能/能效比的组合。

现今的开发人员经常被迫为在边缘部署人工智能/ ML而付出许多精力。xG24xG28xG26使用专用的AI/ML加速器,可以大幅降低整体设计复杂性,助力开发人员更快实现产品原型。专门的硬件设计对于处理复杂的计算可提高8倍的推理速度,以及在能源效率上改进了6倍;这与基于固件和云计算的解决方案相比,可提供更高的性能和效益。硬件加速器的使用将从主应用程序MCU中触发的负担卸下了更多的时钟周期,从而服务您的应用程序。

简化AI/ML开发的工具

构建、测试和部署机器学习所需算法的工具与运行这些算法的MCU一样重要。通过与TensorFlowSensiMLEdge ImpulseTinyML领域的领导者合作,芯科科技为初学者和专家提供了多种开发工具的选择。使用这个新的AI/ML工具链和芯科科技的Simplicity Studio开发环境,开发人员可以创建应用程序,从各种连接的设备中提取信息,以做出智能的机器学习驱动的决策。

芯科科技提供各种工具和资源来支持ML应用程序:

ML应用:开发平台支持TinyML模型推理,由TensorFlow Lite for Microcontrollers TFLM)框架支持。存储库包含一组利用ML的嵌入式应用程序。

机器学习工具包(MLTK):这是一个带有命令行实用程序和脚本的Python包,可帮助为芯科科技的嵌入式平台开发机器学习模型。它包括从命令行界面或Python脚本执行机器学习操作的功能,确定机器学习模型在嵌入式平台上的执行效率,以及使用Google TensorFlow训练机器学习模型。

芯科科技还提供一个TinyML解决方案,作为机器学习工具包的一部分。该工具包包括TinyML基准测试使用的几个模型。这些模型可以在芯科科技GitHub上找到,包括异常检测、图像分类和关键字识别。

AI/ML驱动的边缘设备为我们与周围环境的互动开辟了新的视野,它们将很快以惊人的方式改变我们的生活。芯科科技处于TinyML创新的最前沿,使其能够将这些功能以前所未有的方式带入低功耗,连接的边缘设备。

了解更多关于我们的EFREFM MCU平台是如何针对边缘的AI/ML进行优化的,请访问产品页面:https://cn.silabs.com/applications/artificial-intelligence-machine-learning

扫描以下二维码,关注芯科科技的社交媒体平台


评论
  • 更多生命体征指标风靡的背后都只有一个原因:更多人将健康排在人生第一顺位!“AGEs,也就是晚期糖基化终末产物,英文名Advanced Glycation End-products,是存在于我们体内的一种代谢产物” 艾迈斯欧司朗亚太区健康监测高级市场经理王亚琴说道,“相信业内的朋友都会有关注,最近该指标的热度很高,它可以用来评估人的生活方式是否健康。”据悉,AGEs是可穿戴健康监测领域的一个“萌新”指标,近来备受关注。如果站在学术角度来理解它,那么AGEs是在非酶促条件下,蛋白质、氨基酸
    艾迈斯欧司朗 2025-02-27 14:50 400浏览
  • 一、VSM的基本原理震动样品磁强计(Vibrating Sample Magnetometer,简称VSM)是一种灵敏且高效的磁性测量仪器。其基本工作原理是利用震动样品在探测线圈中引起的变化磁场来产生感应电压,这个感应电压与样品的磁矩成正比。因此,通过测量这个感应电压,我们就能够精确地确定样品的磁矩。在VSM中,被测量的样品通常被固定在一个震动头上,并以一定的频率和振幅震动。这种震动在探测线圈中引起了变化的磁通量,从而产生了一个交流电信号。这个信号的幅度和样品的磁矩有着直接的关系。因此,通过仔细
    锦正茂科技 2025-02-28 13:30 100浏览
  •         近日,广电计量在聚焦离子束(FIB)领域编写的专业著作《聚焦离子束:失效分析》正式出版,填补了国内聚焦离子束领域实践性专业书籍的空白,为该领域的技术发展与知识传播提供了重要助力。         随着芯片技术不断发展,芯片的集成度越来越高,结构也日益复杂。这使得传统的失效分析方法面临巨大挑战。FIB技术的出现,为芯片失效分析带来了新的解决方案。它能够在纳米尺度上对芯片进行精确加工和分析。当芯
    广电计量 2025-02-28 09:15 116浏览
  • 1,微软下载免费Visual Studio Code2,安装C/C++插件,如果无法直接点击下载, 可以选择手动install from VSIX:ms-vscode.cpptools-1.23.6@win32-x64.vsix3,安装C/C++编译器MniGW (MinGW在 Windows 环境下提供类似于 Unix/Linux 环境下的开发工具,使开发者能够轻松地在 Windows 上编写和编译 C、C++ 等程序.)4,C/C++插件扩展设置中添加Include Path 5,
    黎查 2025-02-28 14:39 140浏览
  • 振动样品磁强计是一种用于测量材料磁性的精密仪器,广泛应用于科研、工业检测等领域。然而,其测量准确度会受到多种因素的影响,下面我们将逐一分析这些因素。一、温度因素温度是影响振动样品磁强计测量准确度的重要因素之一。随着温度的变化,材料的磁性也会发生变化,从而影响测量结果的准确性。因此,在进行磁性测量时,应确保恒温环境,以减少温度波动对测量结果的影响。二、样品制备样品的制备过程同样会影响振动样品磁强计的测量准确度。样品的形状、尺寸和表面处理等因素都会对测量结果产生影响。为了确保测量准确度,应严格按照规
    锦正茂科技 2025-02-28 14:05 134浏览
  • 在物联网领域中,无线射频技术作为设备间通信的核心手段,已深度渗透工业自动化、智慧城市及智能家居等多元场景。然而,随着物联网设备接入规模的不断扩大,如何降低运维成本,提升通信数据的传输速度和响应时间,实现更广泛、更稳定的覆盖已成为当前亟待解决的系统性难题。SoC无线收发模块-RFM25A12在此背景下,华普微创新推出了一款高性能、远距离与高性价比的Sub-GHz无线SoC收发模块RFM25A12,旨在提升射频性能以满足行业中日益增长与复杂的设备互联需求。值得一提的是,RFM25A12还支持Wi-S
    华普微HOPERF 2025-02-28 09:06 143浏览
  • RGB灯光无法同步?细致的动态光效设定反而成为产品客诉来源!随着科技的进步和消费者需求变化,电脑接口设备单一功能性已无法满足市场需求,因此在产品上增加「动态光效」的形式便应运而生,藉此吸引消费者目光。这种RGB灯光效果,不仅能增强电脑周边产品的视觉吸引力,还能为用户提供个性化的体验,展现独特自我风格。如今,笔记本电脑、键盘、鼠标、鼠标垫、耳机、显示器等多种电脑接口设备多数已配备动态光效。这些设备的灯光效果会随着音乐节奏、游戏情节或使用者的设置而变化。想象一个画面,当一名游戏玩家,按下电源开关,整
    百佳泰测试实验室 2025-02-27 14:15 137浏览
  • 在2024年的科技征程中,具身智能的发展已成为全球关注的焦点。从实验室到现实应用,这一领域正以前所未有的速度推进,改写着人类与机器的互动边界。这一年,我们见证了具身智能技术的突破与变革,它不仅落地各行各业,带来新的机遇,更在深刻影响着我们的生活方式和思维方式。随着相关技术的飞速发展,具身智能不再仅仅是一个技术概念,更像是一把神奇的钥匙。身后的众多行业,无论愿意与否,都像是被卷入一场伟大变革浪潮中的船只,注定要被这股汹涌的力量重塑航向。01为什么是具身智能?为什么在中国?最近,中国具身智能行业的进
    艾迈斯欧司朗 2025-02-28 15:45 221浏览
  • 美国加州CEC能效跟DOE能效有什么区别?CEC/DOE是什么关系?美国加州CEC能效跟DOE能效有什么区别?CEC/DOE是什么关系?‌美国加州CEC能效认证与美国DOE能效认证在多个方面存在显著差异‌。认证范围和适用地区‌CEC能效认证‌:仅适用于在加利福尼亚州销售的电器产品。CEC认证的范围包括制冷设备、房间空调、中央空调、便携式空调、加热器、热水器、游泳池加热器、卫浴配件、光源、应急灯具、交通信号模块、灯具、洗碗机、洗衣机、干衣机、烹饪器具、电机和压缩机、变压器、外置电源、消费类电子设备
    张工nx808593 2025-02-27 18:04 120浏览
  •           近日受某专业机构邀请,参加了官方举办的《广东省科技创新条例》宣讲会。在与会之前,作为一名技术工作者一直认为技术的法例都是保密和侵权方面的,而潜意识中感觉法律有束缚创新工作的进行可能。通过一个上午学习新法,对广东省的科技创新有了新的认识。广东是改革的前沿阵地,是科技创新的沃土,企业是创新的主要个体。《广东省科技创新条例》是广东省为促进科技创新、推动高质量发展而制定的地方性法规,主要内容包括: 总则:明确立法目
    广州铁金刚 2025-02-28 10:14 103浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦