机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业等等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多,因此,对底层的芯片处理要求也越来越高,那么机器人怎样才能做到更高效、更智能、更安全呢?6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,安谋科技高级产品经理柴卫华从机器人底层处理器的角度分享了前端采集、处理、后端AI分析以及安全等一系列技术和产品。

机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业等等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多,因此,对底层的芯片处理要求也越来越高,那么机器人怎样才能做到更高效、更智能、更安全呢?

6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,安谋科技高级产品经理柴卫华从机器人底层处理器的角度分享了前端采集、处理、后端AI分析以及安全等一系列技术和产品。

虽然现在行业中有HPC高性能处理器,有NPU、CPU、GPU,但是仅仅有强大的处理还不够,还需要数据,这就需要前端传感器系统,同时如果没有可靠的安全机制,也可能对我们的生活造成不可预估的破坏。

针对这三个方面,安谋科技提出了全场景全域全栈解决方案,包括前端视觉处理器LINLONG“玲珑”,高性能AI处理器Zhouyi(周易)NPU、以及安全处理器Shanhai(山海)。

高效视频处理器:LINLON“玲珑”

现在的视觉处理系统与过去传统的影像完全不一样,以前(十年前)的影像系统主要是捕捉到的图像好不好看,是不是真实没有关系,主要是好看。但今天的影像系统发生了一些翻天覆地的变化,不仅仅要好看,还要看得清、看得远、看得透。整个视觉系统已经从观看转变到感知,譬如像机器人、大型汽车等等都呈现出这样的趋势。

安谋科技的 “玲珑”处理器非常强大,视频源头主流是4K,未来将看到8K甚至8K60这样高吞吐率的产品。

360°视角的挑战

人只有前面两个眼睛,但要让机器人更灵活、更聪明,需要更多摄像头,可能从前到后需要360度的视角。现在的自动驾驶汽车,也是典型的机器人,它从车内、车外到整个车身都布满了摄像头(或者激光雷达),未来机器人可能都是这个趋势。

这对ISP处理器提出了一个很高的挑战,需要同时接入多路的输入源并进行处理。同时因为场景不确定,可能在户外,窗户以及逆光等提出了更高的要求。

这方面,“玲珑”ISP具有8K60FPS处理能力,支持16路摄像头,支持140dB甚至更高的HDR,可以很好的适应各种场景。

全栈解决方案

机器人的覆盖场景非常多,从玩具机器人到专业机器人,对性能方面的要求也完全不一样。

玩具机器人,更多的是考虑能耗和成本,可能一些比较低端、高能效的方案比较合适。

但还有要求高画质的机器人,还有要求高性能的专业机器人,这需要更强劲的高端处理器。

针对这些情况,“玲珑”处理器开发了3系列、5系列、7系列,i3x针对高效能,i5x针对高画质,i7x针对高性能,这三个系列覆盖了整个视觉影像处理的全场景全栈解决方案。

高效视频处理

前面是感知采集数据,有了数据后,海量数据怎么处理?这就同时需要一个比较高效的视频处理器。

这方面,“玲珑”VPU具有2倍的解码性能,减少了30%的带宽,编码效率提升了20%,同时可以做到8K120的高视频支撑,关键产品上面能够支持非常好的性能,除了性能带宽方面,它对图像的质量或者画质也有非常高的提升。

高性能AI处理器:Zhouyi“周易”

除了视频前端的感知和处理,后端还需要强大的数据处理和分析能力。

这方面安谋科技有强大的Zhouyi(周易)NPU,它的性能非常高,从0.2-1000TOPS都可以支持。

ARM在汽车、服务器等方面对NPU性能要求非常高的场景都部署了。低端的譬如小型扫地机器人、智能音箱,覆盖场景非常广,而且对网络的支持也非常友好。小型网络和大型网络的需求不一样,网络方面的特性也不一样,要求处理器能比较好的全面的支持。

机器人的场景跨度比较大,有一些不同的低端场景或者高性能要求场景,对处理器要求也是不一样的,所以安谋科技的处理器设计时,对性能配置和性能编程的划分非常灵活。除了标准的Core,还可以分不同集群,多核、多集群,配置都非常灵活。

机器人的有些领域,特别是工业领域,对安全的要求也非常高。

ARM的“玲珑”ISP和Zhouyi NPU都有认证,可以确保在开发时有很好的安全支持。

Zhouyi NPU的架构非常领先,NPU内部除了特别为神经网络处理的处理器之外,还有行为模式专用加速器,以及标量处理器。这些是一个超长指令集处理器,对视频、声音的处理非常友好。

目前的场景对神经网络的挑战越来越大,更新越来越快,对于处理器的设计要求比较全面,要求支持各种数据格式。Zhouyi NPU支持int4、int8、int12、int16以及fp16、bf16,还支持Winograd。

安全处理器:Shanhai“山海”

当前,对安全可靠性的要求越来越高,特别是与人交互的场景,不能带来误判,给人带来威胁。Shanhai系列处理器的底层有硬件加速器,整个安全架构包括了底层软件以及上层软件全套保驾护航解决方案,可以达到安全可使用的标准。

开发生态

做处理器研发,还要考虑能否快速部署,因此,在开发生态系统时也要做到比较全面。

安谋科技的系列处理器支持现在主流的TensorFlow框架、PYTORCH、Caffe、MXNET、ONNX都要支持,还有一整套软件,包括Compiler等都非常成熟。

在AI时代,对神经网络的处理非常重要,不同的客户要求不一样,安谋科技的编程模式比较灵活,可以支持高层的指令集,也可以支持低层的指令集,能够给客户更大的灵活性。

灵活性带来的一个是高效,一个是性能的提升。 

责编:Challey
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
您可能感兴趣
随着全球数字化转型市场蓬勃发展,云计算、人工智能、大数据、5G等技术的应用范围不断扩大,全球企业的数字化转型已经来到了持续发展阶段,这也促使了企业不断加大其在数字化转型的投入。其中 AI、机器视觉和 RFID 等先进技术在实现高效生产物流方面发挥着关键作用。
该标准旨在为养老机器人的设计、制造、测试和认证提供统一规范,推动全球养老机器人产业的健康发展,通过明确养老机器人的功能与性能分类,确保其在互联家居环境中的有效应用。
2月以来,一些人形机器人头部企业高薪案例值得关注。其中,宇树科技招聘机器人感知算法工程师、机器人控制算法专家等岗位,月薪可达7万元至10万元。智元机器人SLAM算法专家月薪4-7万元,年薪超百万(15薪制)。
这一激励机制在消费电子行业堪称“天花板级”,也折射出公司对核心人才的重视。在消费电子市场竞争激烈的当下,安克创新是如何实现如此亮眼的成绩?这笔巨额分红背后又有着怎样的故事?
前空翻对人类而言已属高难度动作,对机器人更是挑战重重。前空翻动作比奔跑更能展现这款机器人的本体硬件潜力和算法团队的实力;相比后空翻,前空翻需要更高的动态平衡能力、瞬间加速度控制以及精准的落地姿态调整……
世界各地的先进晶圆厂现在都有机器人帮助优化晶圆制造设备的关键维护任务。
TEL宣布自2025年3月1日起,现任TEL中国区地区总部——东电电子(上海)有限公司高级执行副总经理赤池昌二正式升任为集团副总裁,同时兼任东电电子(上海)有限公司总裁和东电光电半导体设备(昆山)有限公司总裁。
预计在2025年,以下七大关键趋势将塑造物联网的格局。
领域新成果领域新成果4月必逛电子展!AI、人形机器人、低空飞行、汽车、新能源、半导体六大热门新赛道,来NEPCON China 2025一展全看,速登记!
本次股东大会将采取线上和线下相结合的混合形式召开,股东们可选择现场出席或线上参会。
小米宣布全球首发光学预研技术——小米模块光学系统,同时发布官方宣传视频。简单来说,该系统是一个磁吸式可拆卸镜头,采用定制M4/3传感器+全非球面镜组,带来完整一亿像素,等效35mm焦段,配备f/1.4
点击上方蓝字谈思实验室获取更多汽车网络安全资讯3 月 5 日,据中国经济网报道,近日有传言毛京波即将卸任莲花中国总裁,调整至海外市场。莲花汽车内部人士证实了此事:“毛总(毛京波)已经有几天没有出现在办
插播:历时数月深度调研,9大系统性章节、超百组核心数据,行家说储能联合天合光能参编,发布工商业储能产业首份调研级报告,为行业提供从战略决策到产品方向、项目资源的全维参考!点击下方“阅读原文”订阅又一地
倒计时1天,『2025年行家说开年盛会(第8届)取势行远·LED显示屏及MLED产业链2025年蓝图峰会』明天正式启幕。本届开年盛会特设「2025年产品/技术/市场蓝图计划」、「COB」、「MiP及玻
今日光电     有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。追光逐电,光引未来...欢迎来到今日光电!----追光逐电 光引未来----图1 采用自上而下方法实
今日光电     有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。追光逐电,光引未来...欢迎来到今日光电!----追光逐电 光引未来----编者荐语特征提取是计算机
从上表可知,2024年前三季度全球40强PCB企业总营收约416.7亿美元,同比增长7.6%。其中,营收排名第一位的是臻鼎科技(36.05亿美元),排名第2~5位的分别是欣兴电子(26.85亿美元)、
据报道,小米集团总裁卢伟冰在西班牙巴塞隆纳的全球发表会上表示,小米汽车计划于2027年进军海外市场。小米的立足之本在于深耕本土市场,作为一家中国车企,唯有在国内市场站稳脚跟,方能谈及海外扩张。因此,小
如果说华为代表了国产手机芯片的最高水平,那么紫光展锐无疑就是国产中低端芯片最大的依持了。3月3日,巴塞罗那MWC世界移动通信大会上,紫光展锐正式发布手机芯片T8300。据了解,T8300采用的是6nm
 点击上方蓝字➞右上「· · ·」设为星标➞更新不错过★2025 年 3 月 12 日至 14 日  连续 3 晚 19:00 - 20:30德州仪器电力全开 为您带来 “高效 DC-DC 转换器的设