机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业等等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多,因此,对底层的芯片处理要求也越来越高,那么机器人怎样才能做到更高效、更智能、更安全呢?6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,安谋科技高级产品经理柴卫华从机器人底层处理器的角度分享了前端采集、处理、后端AI分析以及安全等一系列技术和产品。

机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业等等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多,因此,对底层的芯片处理要求也越来越高,那么机器人怎样才能做到更高效、更智能、更安全呢?

6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,安谋科技高级产品经理柴卫华从机器人底层处理器的角度分享了前端采集、处理、后端AI分析以及安全等一系列技术和产品。

虽然现在行业中有HPC高性能处理器,有NPU、CPU、GPU,但是仅仅有强大的处理还不够,还需要数据,这就需要前端传感器系统,同时如果没有可靠的安全机制,也可能对我们的生活造成不可预估的破坏。

针对这三个方面,安谋科技提出了全场景全域全栈解决方案,包括前端视觉处理器LINLONG“玲珑”,高性能AI处理器Zhouyi(周易)NPU、以及安全处理器Shanhai(山海)。

高效视频处理器:LINLON“玲珑”

现在的视觉处理系统与过去传统的影像完全不一样,以前(十年前)的影像系统主要是捕捉到的图像好不好看,是不是真实没有关系,主要是好看。但今天的影像系统发生了一些翻天覆地的变化,不仅仅要好看,还要看得清、看得远、看得透。整个视觉系统已经从观看转变到感知,譬如像机器人、大型汽车等等都呈现出这样的趋势。

安谋科技的 “玲珑”处理器非常强大,视频源头主流是4K,未来将看到8K甚至8K60这样高吞吐率的产品。

360°视角的挑战

人只有前面两个眼睛,但要让机器人更灵活、更聪明,需要更多摄像头,可能从前到后需要360度的视角。现在的自动驾驶汽车,也是典型的机器人,它从车内、车外到整个车身都布满了摄像头(或者激光雷达),未来机器人可能都是这个趋势。

这对ISP处理器提出了一个很高的挑战,需要同时接入多路的输入源并进行处理。同时因为场景不确定,可能在户外,窗户以及逆光等提出了更高的要求。

这方面,“玲珑”ISP具有8K60FPS处理能力,支持16路摄像头,支持140dB甚至更高的HDR,可以很好的适应各种场景。

全栈解决方案

机器人的覆盖场景非常多,从玩具机器人到专业机器人,对性能方面的要求也完全不一样。

玩具机器人,更多的是考虑能耗和成本,可能一些比较低端、高能效的方案比较合适。

但还有要求高画质的机器人,还有要求高性能的专业机器人,这需要更强劲的高端处理器。

针对这些情况,“玲珑”处理器开发了3系列、5系列、7系列,i3x针对高效能,i5x针对高画质,i7x针对高性能,这三个系列覆盖了整个视觉影像处理的全场景全栈解决方案。

高效视频处理

前面是感知采集数据,有了数据后,海量数据怎么处理?这就同时需要一个比较高效的视频处理器。

这方面,“玲珑”VPU具有2倍的解码性能,减少了30%的带宽,编码效率提升了20%,同时可以做到8K120的高视频支撑,关键产品上面能够支持非常好的性能,除了性能带宽方面,它对图像的质量或者画质也有非常高的提升。

高性能AI处理器:Zhouyi“周易”

除了视频前端的感知和处理,后端还需要强大的数据处理和分析能力。

这方面安谋科技有强大的Zhouyi(周易)NPU,它的性能非常高,从0.2-1000TOPS都可以支持。

ARM在汽车、服务器等方面对NPU性能要求非常高的场景都部署了。低端的譬如小型扫地机器人、智能音箱,覆盖场景非常广,而且对网络的支持也非常友好。小型网络和大型网络的需求不一样,网络方面的特性也不一样,要求处理器能比较好的全面的支持。

机器人的场景跨度比较大,有一些不同的低端场景或者高性能要求场景,对处理器要求也是不一样的,所以安谋科技的处理器设计时,对性能配置和性能编程的划分非常灵活。除了标准的Core,还可以分不同集群,多核、多集群,配置都非常灵活。

机器人的有些领域,特别是工业领域,对安全的要求也非常高。

ARM的“玲珑”ISP和Zhouyi NPU都有认证,可以确保在开发时有很好的安全支持。

Zhouyi NPU的架构非常领先,NPU内部除了特别为神经网络处理的处理器之外,还有行为模式专用加速器,以及标量处理器。这些是一个超长指令集处理器,对视频、声音的处理非常友好。

目前的场景对神经网络的挑战越来越大,更新越来越快,对于处理器的设计要求比较全面,要求支持各种数据格式。Zhouyi NPU支持int4、int8、int12、int16以及fp16、bf16,还支持Winograd。

安全处理器:Shanhai“山海”

当前,对安全可靠性的要求越来越高,特别是与人交互的场景,不能带来误判,给人带来威胁。Shanhai系列处理器的底层有硬件加速器,整个安全架构包括了底层软件以及上层软件全套保驾护航解决方案,可以达到安全可使用的标准。

开发生态

做处理器研发,还要考虑能否快速部署,因此,在开发生态系统时也要做到比较全面。

安谋科技的系列处理器支持现在主流的TensorFlow框架、PYTORCH、Caffe、MXNET、ONNX都要支持,还有一整套软件,包括Compiler等都非常成熟。

在AI时代,对神经网络的处理非常重要,不同的客户要求不一样,安谋科技的编程模式比较灵活,可以支持高层的指令集,也可以支持低层的指令集,能够给客户更大的灵活性。

灵活性带来的一个是高效,一个是性能的提升。 

责编:Challey
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
阅读全文,请先
您可能感兴趣
今年初的GTC上,黄仁勋就说机器人的“ChatGPT时刻”要来了。也就是说这波AI驱动的机器人热潮要来了...最近的ROSCon China 2024大会似乎也能看到这种迹象...
石头科技董事长昌敬频繁出现在社交媒体上推广其创立的极石汽车品牌,活跃表现与石头科技股价的下跌形成了鲜明对比,加剧了投资者的不满情绪……
自1984年,意法半导体首次进入中国,成为首批在中国开展业务的半导体公司。意法半导体CEO Jean-Marc Chery日前表示,中国市场是不可或缺的,是电动汽车规模最大、最具创新性的市场,与中国本地的制造工厂达成合作,具有至关重要的作用。他还表示,意法半导体正在采用在中国市场学到的最佳实践和技术,并将其应用于西方市场,“传教士的故事结束了”。
纵目科技方面回应称,公司目前运营正常,员工社保公积金也在正常缴纳。由于业务资金调整,公司对员工整体薪资进行了短期调整,预计在1至2个月后,随着营收款入账,会对员工的薪资进行补偿。
美国亿万富翁埃隆·马斯克在社交平台X上对F-35战斗机项目发出强烈批评,称在无人机技术迅速发展的时代,继续制造有人驾驶的战斗机是“傻子”的行为。
黄仁勋于2024年11月23日被中国香港科技大学授予工程学荣誉博士学位,在演讲中深入探讨了人工智能(AI)对科学和产业的变革性影响,并预测未来三种机器人有望实现大规模生产:汽车、无人机和人形机器人......
目前,智能终端NFC功能的使用频率越来越高,面对新场景新需求,ITMA多家成员单位一起联合推动iTAP(智能无感接近式协议)标准化项目,预计25年上半年发布1.0标准,通过功能测试、兼容性测试,确保新技术产业应用。
中科院微电子所集成电路制造技术重点实验室刘明院士团队提出了一种基于记忆交叉阵列的符号知识表示解决方案,首次实验演示并验证了忆阻神经-模糊硬件系统在无监督、有监督和迁移学习任务中的应用……
C&K Switches EITS系列直角照明轻触开关提供表面贴装 PIP 端子和标准通孔配置,为电信、数据中心和专业音频/视频设备等广泛应用提供创新的多功能解决方案。
投身国产浪潮向上而行,英韧科技再获“中国芯”认可
今日,长飞先进武汉基地建设再次迎来新进展——项目首批设备搬入仪式于光谷科学岛成功举办,长飞先进总裁陈重国及公司主要领导、嘉宾共同出席见证。对于半导体行业而言,厂房建设一般主要分为四个阶段:设备选型、设
点击蓝字 关注我们安森美(onsemi)在2024年先后推出两款超强功率半导体模块新贵,IGBT模块系列——SPM31 IPM,QDual 3。值得注意的是,背后都提到采用了最新的FS7技术,主要性能
近期,多个储能电站项目上新。■ 乐山电力:募资2亿建200MWh储能电站12月17日晚,乐山电力(600644.SH)公告,以简易程序向特定对象发行A股股票申请已获上交所受理,募集资金总额为2亿元。发
来源:观察者网12月18日消息,自12月2日美国发布新一轮对华芯片出口禁令以来,不断有知情人士向外媒透露拜登政府在卸任前将采取的下一步动作。美国《纽约时报》12月16日报道称,根据知情人士以及该报查阅
对于华为来说,今年的重磅机型都已经发完了,而明年的机型已经在研发中,Pura 80就是期待很高的一款。有博主爆料称,华为Pura 80将会用上了豪威OV50K传感器,同时电池容量达到5600毫安时。至
万物互联的时代浪潮中,以OLED为代表的新型显示技术,已成为人机交互、智能联结的重要端口。维信诺作为中国OLED赛道的先行者和引领者,凭借自主创新,实现了我国OLED技术的自立自强,成为中国新型显示产
2024年度PlayStation游戏奖今日公布,《宇宙机器人》获得年度最佳PS5游戏,《使命召唤:黑色行动6》获得年度最佳PS4游戏。在这次评选中,《宇宙机器人》获得多个奖项,包括最佳艺术指导奖、最
近期,高科视像、新视通、江苏善行智能科技等企业持续扩充COB产能。插播:加入LED显示行业群,请加VX:hangjia188■ 高科视像:MLED新型显示面板生产项目(二期)招标12月18日,山西高科
极越汽车闪崩,留下一地鸡毛,苦的是供应商和车主。很多人都在关心,下一个倒下的新能源汽车品牌,会是谁?我们都没有未卜先知的超能力,但可以借助数据管中窥豹。近日,有媒体统计了15家造车新势力的销量、盈亏情
上个月,亿万富翁埃隆·马斯克谈到了年轻一代的生育问题。他强调生育的紧迫性,认为无论面临何种困难,生育后代都是必要的,否则人类可能会在无声中走向消亡。他认为人们对于生育的担忧有些过头,担心经济压力等问题