智能机器人到底需要什么样的SoC?

FPGA开发圈 2024-05-18 12:02

随着人口老龄化和劳动力成本上升,智能机器人在制造业、服务业、医疗等领域的应用需求不断增加。它们能够承担一些繁重、危险或复杂的工作,提高生产效率和服务质量。同时,随着人们生活水平的提高,对智慧机器人的需求也在不断增加,

那么,智能机器人到底需要什么样的SoC?今天,致力于推广中国芯的的第十四届松山湖中国 IC 创新高峰论坛在东莞松山湖隆重开幕,本次论坛聚焦“智慧机器人”主题,来自本土的10家与智慧机器人相关的IC公司,将推介最新的产品技术信息。

在上午的论坛上,合肥酷芯微电子有限公司联合创始人、CTO沈泊分享了智能机器人SoC 需求并推介了该公司感算一体的智能机器人SoC AR9481。

机器人主控芯片有哪些核心诉求?沈泊认为主要有四点:一是要有丰富的传感器接口、要融合可见光、热成像、麦克风、激光雷达等;二是较高的数据处理能力、三是要有较高的AI算力,要能实现目标跟踪、识别、深度图提取、图像分割等支持NLP及视觉大模型。四是较低的系统功耗,功耗3-5W以内最佳。

他表示AR9481酷芯微电子针对机器人应用的第四代智能SOC智能SoC,它具有高CPU主频、高NPU算力、多光谱传感器感知能力、宽电压工作范围、强CV处理能力和低功耗的特点。“AR9481功耗比较小,对于典型应用功耗限制在1W,完成一个完整的机器人的应用,这样对我们用户的整机开发就非常有用。”他指出,“该芯片已经进入到量产阶段,客户已经追着我们下订单了,差不多有大几十万颗的订单在手,到9月份就开始大批量量产。”

他表示,考虑到机器人应用需要可靠性,他们在这个芯片里面包括了接口运行可靠性。

他表示AR9481不仅有强大的算力,而且有非常强的感知能力,该芯片首先是有非常强的可见光的感知能力,可以支持4-8K的视频,视频输入可以最高6路,甚至可以超过10路的,2D、3DHDR是比较常规的操作,除此之外,还有专门的AI ISP能力,芯片可以做AI超分、降噪、AI视频提亮,会有一整套的完整解决方案。

他举例说上图左边是用AIISP处理过的,右边是普通的,可以看到低噪度下图像几乎看不到。而AR9481有较好的图像和色彩还原能力。

上图是AR9481的核心参数,CPU为4核@2.4GHz,DMIPS在20K以上,NPU是业界集成度最高的8TOP等效算力;ISP是可见光/热成像ISP;DSP 为专用视觉处理加速器@1.2GHZ,支持必/SGBM深度图,工艺是12nm。最低工作电压可以到0.65V。

我们对热成像类的产品,分辨率的支持也做了全分辨率的支持,从非常低成本的120的分辨率,到1920的分辨率,都可以得到完整的支持。我们也功耗做的非常低,比如说做1080最高分辨率的红外的ISP,我们功耗可能叫100毫瓦量级可以搞定,在全球也是比较领先的。

他特别强调了该芯片在热成像领域的能力,该芯片热成像能力强,而且可以做到把可见光和热成像画面叠加起来,叠加以后有更好的分辨力(左图)。

据他介绍,AR9481 NPU是公司第四代的NPU,该芯片集成了8TOPS算力,可以满足很多机器人需求。也可以支持INT8、INT16的混合精度计算,同时也支持语音和视觉大模型,“可能有人觉得扫地机器人跑什么大模型呢?但是这个已经有非常多客户就提出这个要求,包括最近上市的一些产品,上面已经跑了视觉大模型,是用酷芯微上一代的芯片。”他指出,,可以在一个端侧的芯片上支持起来。

他指出AR9481支持很多典型的应用场景,如扫地机器人,一颗芯片里面要支持SLAM的导航、定位,双目深度图提取、避障、目标识别、语音大模型,“有些客户也希望跑一些语音大模型。包括在无人机的应用,无人机的应用首先影像输入的要求比较高,基本是4K起步。避障可能是4-6路视觉避障应还跑光流、多光谱影像支持等。”他举例说,“深度图提取有很多流派,一种是用传统的SV的方式来提取深度图,还有一种为了更高的精度用,我们的芯片是这两种模式都支持,如果对精度有极限需求,我们建议用深度学习的方法去做,我们认为机器人应用需求比较多元化,不是单独某一个方案就可以满足,需要融合其他技术。”

******直播预告******


FPGA开发圈 这里介绍、交流、有关FPGA开发资料(文档下载,技术解答等),提升FPGA应用能力。
评论
  • 构建巨量的驾驶场景时,测试ADAS和AD系统面临着巨大挑战,如传统的实验设计(Design of Experiments, DoE)方法难以有效覆盖识别驾驶边缘场景案例,但这些边缘案例恰恰是进一步提升自动驾驶系统性能的关键。一、传统解决方案:静态DoE标准的DoE方案旨在系统性地探索场景的参数空间,从而确保能够实现完全的测试覆盖范围。但在边缘案例,比如暴露在潜在安全风险的场景或是ADAS系统性能极限场景时,DoE方案通常会失效,让我们看一些常见的DoE方案:1、网格搜索法(Grid)实现原理:将
    康谋 2025-02-27 10:00 252浏览
  •         近日,广电计量在聚焦离子束(FIB)领域编写的专业著作《聚焦离子束:失效分析》正式出版,填补了国内聚焦离子束领域实践性专业书籍的空白,为该领域的技术发展与知识传播提供了重要助力。         随着芯片技术不断发展,芯片的集成度越来越高,结构也日益复杂。这使得传统的失效分析方法面临巨大挑战。FIB技术的出现,为芯片失效分析带来了新的解决方案。它能够在纳米尺度上对芯片进行精确加工和分析。当芯
    广电计量 2025-02-28 09:15 116浏览
  • 振动样品磁强计是一种用于测量材料磁性的精密仪器,广泛应用于科研、工业检测等领域。然而,其测量准确度会受到多种因素的影响,下面我们将逐一分析这些因素。一、温度因素温度是影响振动样品磁强计测量准确度的重要因素之一。随着温度的变化,材料的磁性也会发生变化,从而影响测量结果的准确性。因此,在进行磁性测量时,应确保恒温环境,以减少温度波动对测量结果的影响。二、样品制备样品的制备过程同样会影响振动样品磁强计的测量准确度。样品的形状、尺寸和表面处理等因素都会对测量结果产生影响。为了确保测量准确度,应严格按照规
    锦正茂科技 2025-02-28 14:05 134浏览
  • 在物联网领域中,无线射频技术作为设备间通信的核心手段,已深度渗透工业自动化、智慧城市及智能家居等多元场景。然而,随着物联网设备接入规模的不断扩大,如何降低运维成本,提升通信数据的传输速度和响应时间,实现更广泛、更稳定的覆盖已成为当前亟待解决的系统性难题。SoC无线收发模块-RFM25A12在此背景下,华普微创新推出了一款高性能、远距离与高性价比的Sub-GHz无线SoC收发模块RFM25A12,旨在提升射频性能以满足行业中日益增长与复杂的设备互联需求。值得一提的是,RFM25A12还支持Wi-S
    华普微HOPERF 2025-02-28 09:06 143浏览
  • 美国加州CEC能效跟DOE能效有什么区别?CEC/DOE是什么关系?美国加州CEC能效跟DOE能效有什么区别?CEC/DOE是什么关系?‌美国加州CEC能效认证与美国DOE能效认证在多个方面存在显著差异‌。认证范围和适用地区‌CEC能效认证‌:仅适用于在加利福尼亚州销售的电器产品。CEC认证的范围包括制冷设备、房间空调、中央空调、便携式空调、加热器、热水器、游泳池加热器、卫浴配件、光源、应急灯具、交通信号模块、灯具、洗碗机、洗衣机、干衣机、烹饪器具、电机和压缩机、变压器、外置电源、消费类电子设备
    张工nx808593 2025-02-27 18:04 120浏览
  • 应用趋势与客户需求,AI PC的未来展望随着人工智能(AI)技术的日益成熟,AI PC(人工智能个人电脑)逐渐成为消费者和企业工作中的重要工具。这类产品集成了最新的AI处理器,如NPU、CPU和GPU,并具备许多智能化功能,为用户带来更高效且直观的操作体验。AI PC的目标是提升工作和日常生活的效率,通过深度学习与自然语言处理等技术,实现更流畅的多任务处理、实时翻译、语音助手、图像生成等功能,满足现代用户对生产力和娱乐的双重需求。随着各行各业对数字转型需求的增长,AI PC也开始在各个领域中显示
    百佳泰测试实验室 2025-02-27 14:08 252浏览
  • 更多生命体征指标风靡的背后都只有一个原因:更多人将健康排在人生第一顺位!“AGEs,也就是晚期糖基化终末产物,英文名Advanced Glycation End-products,是存在于我们体内的一种代谢产物” 艾迈斯欧司朗亚太区健康监测高级市场经理王亚琴说道,“相信业内的朋友都会有关注,最近该指标的热度很高,它可以用来评估人的生活方式是否健康。”据悉,AGEs是可穿戴健康监测领域的一个“萌新”指标,近来备受关注。如果站在学术角度来理解它,那么AGEs是在非酶促条件下,蛋白质、氨基酸
    艾迈斯欧司朗 2025-02-27 14:50 400浏览
  • Matter 协议,原名 CHIP(Connected Home over IP),是由苹果、谷歌、亚马逊和三星等科技巨头联合ZigBee联盟(现连接标准联盟CSA)共同推出的一套基于IP协议的智能家居连接标准,旨在打破智能家居设备之间的 “语言障碍”,实现真正的互联互通。然而,目标与现实之间总有落差,前期阶段的Matter 协议由于设备支持类型有限、设备生态协同滞后以及设备通信协议割裂等原因,并未能彻底消除智能家居中的“设备孤岛”现象,但随着2025年的到来,这些现象都将得到完美的解决。近期,
    华普微HOPERF 2025-02-27 10:32 212浏览
  •           近日受某专业机构邀请,参加了官方举办的《广东省科技创新条例》宣讲会。在与会之前,作为一名技术工作者一直认为技术的法例都是保密和侵权方面的,而潜意识中感觉法律有束缚创新工作的进行可能。通过一个上午学习新法,对广东省的科技创新有了新的认识。广东是改革的前沿阵地,是科技创新的沃土,企业是创新的主要个体。《广东省科技创新条例》是广东省为促进科技创新、推动高质量发展而制定的地方性法规,主要内容包括: 总则:明确立法目
    广州铁金刚 2025-02-28 10:14 103浏览
  • 在2024年的科技征程中,具身智能的发展已成为全球关注的焦点。从实验室到现实应用,这一领域正以前所未有的速度推进,改写着人类与机器的互动边界。这一年,我们见证了具身智能技术的突破与变革,它不仅落地各行各业,带来新的机遇,更在深刻影响着我们的生活方式和思维方式。随着相关技术的飞速发展,具身智能不再仅仅是一个技术概念,更像是一把神奇的钥匙。身后的众多行业,无论愿意与否,都像是被卷入一场伟大变革浪潮中的船只,注定要被这股汹涌的力量重塑航向。01为什么是具身智能?为什么在中国?最近,中国具身智能行业的进
    艾迈斯欧司朗 2025-02-28 15:45 221浏览
  • 一、VSM的基本原理震动样品磁强计(Vibrating Sample Magnetometer,简称VSM)是一种灵敏且高效的磁性测量仪器。其基本工作原理是利用震动样品在探测线圈中引起的变化磁场来产生感应电压,这个感应电压与样品的磁矩成正比。因此,通过测量这个感应电压,我们就能够精确地确定样品的磁矩。在VSM中,被测量的样品通常被固定在一个震动头上,并以一定的频率和振幅震动。这种震动在探测线圈中引起了变化的磁通量,从而产生了一个交流电信号。这个信号的幅度和样品的磁矩有着直接的关系。因此,通过仔细
    锦正茂科技 2025-02-28 13:30 100浏览
  • RGB灯光无法同步?细致的动态光效设定反而成为产品客诉来源!随着科技的进步和消费者需求变化,电脑接口设备单一功能性已无法满足市场需求,因此在产品上增加「动态光效」的形式便应运而生,藉此吸引消费者目光。这种RGB灯光效果,不仅能增强电脑周边产品的视觉吸引力,还能为用户提供个性化的体验,展现独特自我风格。如今,笔记本电脑、键盘、鼠标、鼠标垫、耳机、显示器等多种电脑接口设备多数已配备动态光效。这些设备的灯光效果会随着音乐节奏、游戏情节或使用者的设置而变化。想象一个画面,当一名游戏玩家,按下电源开关,整
    百佳泰测试实验室 2025-02-27 14:15 137浏览
  • 1,微软下载免费Visual Studio Code2,安装C/C++插件,如果无法直接点击下载, 可以选择手动install from VSIX:ms-vscode.cpptools-1.23.6@win32-x64.vsix3,安装C/C++编译器MniGW (MinGW在 Windows 环境下提供类似于 Unix/Linux 环境下的开发工具,使开发者能够轻松地在 Windows 上编写和编译 C、C++ 等程序.)4,C/C++插件扩展设置中添加Include Path 5,
    黎查 2025-02-28 14:39 140浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦