机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业等等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多。当前环境下,怎样利用实时控制技术和先进的信号处理开拓机器人和其他工业应用,加快向智能生产系统的过渡呢?6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,TI中国区处理器技术资深支持工程师杨宇先生从感知、控制、智能、安全以及能源和成本效益方面分享了机器人的创新技术。

机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业等等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多。当前环境下,怎样利用实时控制技术和先进的信号处理开拓机器人和其他工业应用,加快向智能生产系统的过渡呢?

6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,TI中国区处理器技术资深支持工程师杨宇先生从感知、控制、智能、安全以及能源和成本效益方面分享了机器人的创新技术。

工业市场,一直是TI非常注重的市场,TI自1986年进入中国以来,已经在本土建立了非常完善的支持体系:在成都有一个封装一体化流程工厂,在香港和上海也有相应的产品分布中心,在上海、深圳、北京有相应的研发中心,在全国大部分一二线城市也有相应的销售机构和技术支持机构,能够更快、更实时的响应本土客户的需求。

TI是一家芯片公司,在模拟和数字产品上都有比较完备的产品线,从模拟上的电源、时钟、信号链到高性能异构处理器,TI都可以给大家提供一个比较多样化的选择,同时现在TI在本土也有相应的中文版技术支持论坛,也有相应的网上商店。

机器人技术是当今非常热门的技术,也是工业应用上一个非常重要的领域。下面首先介绍机器人的分类以及当前最热门的感知和实时控制技术。

机器人行业及技术概况

机器人分类

主要分成四大类:第一类是工业机器人,更多的是工业机器臂,机器臂的主要功能些操作。

第二类是家用机器人,比如扫地机器人、除草机器人。

第三类是无人移动机器人,分两类:AGV、AMR。AGV是按照既定轨迹运行,而AMR可以根据路径环境不同重新进行路径修改,AMR机器人相对于AGV机器人,系统设计会更加复杂。

第四类是协作机器人,有很多和人之间相互交互的场景,需要和人交互,对安全性的要求特别高。

感知技术

当前,边缘计算应用越来越广,在机器人的应用上,为了让机器人有更多自主决策权利,越来越多的功能和应用放在边缘侧,机器人上需要实现信息感知、信息处理、信息执行,需要集这三个功能为一体,因此对机器人系统提出了更高的要求,不仅仅是高性能、低功耗,同时需要机器人能够集成丰富的传感器接口,同时需要集成图像视觉压缩器、工业网络通信等来满足不同场景的要求。

因此,机器人需要一个比较重要的环境感知技术。

现在环境感知技术更多的还是视觉,但机器人的环境感知技术要实现质的飞跃,不仅仅是机器视觉,还需要听觉、触觉等各种方式的感知技术融合在一起,才能够实现机器人对周边环境全方位的感知。

实时控制

机器人系统是对实时响应要求非常高的系统,从信息入口到计算再到执行,整个过程中对于整体传输数据的处理和执行需要具备一个低延时、低抖动、高可靠性的要求。

融合

机器人更多的是模拟人类的行为,人类的信息获取80%都是来自于视觉,11%来自于听觉,剩下的9%是来自于触觉、嗅觉、味觉。而在所有的感知体系里,视觉处理是最为复杂的,以至于人需要休息时必须要闭上眼睛来达到主动隔离的目的。机器人也一样,目前应用最广泛的还是视觉感知,现在视觉感知在工业、安防、消费电子、交通等领域已经应用非常广泛,很多摄像头都带有AI的图像识别能力。

除了视觉感知之外另外比较重要的是听觉感知和触觉感知,听觉感知主要是语音识别、语音交互,而触觉感知是机器人抓握抬举等功能。

如何把多个感知系统融合到一起,实现多模式识别的功能,这是机器人感知系统能够提升一个台阶的关键。

以工业机器人为例,传统工业机器人进行抓取时,是通过视觉感知,通过视觉读取到被抓取图像的形态,计算出距离,进行抓取算法的确定,再进行抓取。在有些场景下,紧紧依靠机器视觉是不够的,在一些更高阶的应用里,需要知道被抓取物体的材质、软硬度来确定抓取的力度。在这种场景下,机器视觉不够用,必须用到触觉传感器。机器视觉和触觉的应用可以让机器人的感知力得到质的飞跃。除此之外还有听觉甚至神经元结合的传感器形态,也可以更好的提升机器人的感知能力。

机器人三大特点及技术

机器人的应用主要需要注重三个特点:实时控制,实时通信,功能安全。针对机器人应用的这三特点,TI都有相应的不同产品,能够提供比较好的选择。

实时控制

TI有经典的C2000 MCU,可以提供高性能、高精度、低延时的实时控制,为了针对实时控制MCU领域的多样化选择,TI去年推出了一条新的产品线Sitara MCU:M2X系列,可以更好的满足实时响应控制的需求。

实时通信

实时通信是机器人系统里一个非常重要的通信要求,比如现在比较流行TSN时间敏感网络、工业实时以太网通信。

TI的处理器和MCU都可以支持这些工业实时以太网通信。同时TI的工业实时以太网模块可以通过单个硬件以及其他不同部件来实现不同协议的支持,很大程度上节省硬件设计的成本。

功能安全

TI非常注重工业市场上的功能安全特性,专门推出了针对功能安全的MCU,在MCU里有一个主控内核,有一个影子内核,通过这两个核的协助、操作,可以极大的提升整个机器人系统的功能安全。

配送机器人

现在物流行业发展如火如荼,中国已经成为世界第一大快递大国。据统计,在整个快递成本里,超过28%的成本处在最后一公里的配送上。

基于经济效益的考虑,配送机器人是现在物流机器人里非常热门的一个应用。

最后一公里配送机器人的要求比较高,除了需要有感知技术,还需要路径规划,避障能力、智能控制驱动能力,基于这四个能力为一体的配送机器人,TI提供从传感器到处理器整个链路的解决方案,并且这个解决方案已经在亚马逊的物流体系里得到成功应用。

机器人领域的机会

机器人领域的技术发展迅猛,怎样为客户和用户提供优秀的产品至关重要,能否在成本控制、人机交互与安全、传感器融合方面具有优势将是机器人领域的机会。

1、减少成本

机器人系统造价高昂,维护成本和开发成本都会比较贵,所以机器人的小型化和集成化将是以后的发展方向。

在这方面,TI能够减少成本支出。

TI提供的机器人系统的中央处理器,可以支持异构多核的模式。在一颗处理器里,既有A核,上面可以借助一些形态运行高级应用,可以做系统管理,管理整体的通信、任务调度等等;同时还有R核,可以通过R核驱动需要实时控制要求比较高的场景,在一系列处理器上,也会集成通信等模块,可以更好的进行工业实施的拓展。在TI的工业处理器里还有功能安全MCU,单颗MCU可以通过安全认证,TI也可以协助客户完成从芯片到系统级的功能安全等级认证。基于这种种技术,TI可以把小型化的集成度最大程度上体现在一颗芯片里实现。

2、人机交互和安全

传统的人机交互,更多的是单方面的交互,是人对机器。比如传统不管是视觉、触觉还是听觉,都是基于一些物理特性的交互,现在强调的更多交互是双向性和安全性。双向性指的是机器也会反馈给操作人员,除了传统的物理交互方式外,脑电结合、机电结合的方式,也在某些领域得到越来越多的应用,比如医疗骨骼机器人。

在功能安全方面,TI有单颗的功能安全MCU,可以支持多核功能,也可以在复杂的NPU里集成公共安全,来实现整颗NPU系统级功能安全设计。

3、传感器融合

机器人技术应用较多的机器视觉,更多的会受限于环境,对恶劣复杂的环境,分辨率和清晰度不高的场景,机器视觉无法识别,比如雨雾天气可能看不清楚前方的物体,机器视觉就很难捕捉到一些有用的信息。

基于这种视觉处理问题,TI在传感器上推出了66GHz和77GHz的雷达传感器,可以在黑暗或者低分辨率场景下很好的捕捉到物理的距离、速度和角度,针对隐私保护场景,比如卧室或者卫生间,TI提供毫米波雷达作为视觉传感的辅助。

TI Jacinto 7多核异构处理器和文档资料

Jacinto 7是TI集成了机器学习,整体算力达到32TOPS的最新处理器。

工业机器人里,除了算力之外,工业实时以太网通信功能非常重要的。TI的SoC的特点是集算力、功能安全和实时以太网通信这些机器人应用里必备要素为一体的应用。

在TDA4处理器里是基于Cortex-A72再加上Cortex R内核,除此之外还有深度学习加速器,有TI独特的CD6 DSP核和C7x DSP核,可以提供除了标准NPU处理之外的差异化选择。

在软件上,TI可以支持深度学习库,针对深度学习库,TI处理器基于相应的加速器做了优化,在使用方面,和典型的TensorFlow的库调用的API完全一致。

下面是通过TI深度学习库做了一些相应的性能优化,同时可以实现和其他深度学习加速器代码上的无缝衔接。

在机器人的系统设计上,TI有非常丰富的技术储备,官网上有专门的机器人学习手册,这个手册从模拟到MCU、到处理器、到通信等方面,都有一个完整详细的介绍,并且提供中文版。

责编:Challey
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
阅读全文,请先
您可能感兴趣
今年初的GTC上,黄仁勋就说机器人的“ChatGPT时刻”要来了。也就是说这波AI驱动的机器人热潮要来了...最近的ROSCon China 2024大会似乎也能看到这种迹象...
石头科技董事长昌敬频繁出现在社交媒体上推广其创立的极石汽车品牌,活跃表现与石头科技股价的下跌形成了鲜明对比,加剧了投资者的不满情绪……
自1984年,意法半导体首次进入中国,成为首批在中国开展业务的半导体公司。意法半导体CEO Jean-Marc Chery日前表示,中国市场是不可或缺的,是电动汽车规模最大、最具创新性的市场,与中国本地的制造工厂达成合作,具有至关重要的作用。他还表示,意法半导体正在采用在中国市场学到的最佳实践和技术,并将其应用于西方市场,“传教士的故事结束了”。
纵目科技方面回应称,公司目前运营正常,员工社保公积金也在正常缴纳。由于业务资金调整,公司对员工整体薪资进行了短期调整,预计在1至2个月后,随着营收款入账,会对员工的薪资进行补偿。
美国亿万富翁埃隆·马斯克在社交平台X上对F-35战斗机项目发出强烈批评,称在无人机技术迅速发展的时代,继续制造有人驾驶的战斗机是“傻子”的行为。
黄仁勋于2024年11月23日被中国香港科技大学授予工程学荣誉博士学位,在演讲中深入探讨了人工智能(AI)对科学和产业的变革性影响,并预测未来三种机器人有望实现大规模生产:汽车、无人机和人形机器人......
目前,智能终端NFC功能的使用频率越来越高,面对新场景新需求,ITMA多家成员单位一起联合推动iTAP(智能无感接近式协议)标准化项目,预计25年上半年发布1.0标准,通过功能测试、兼容性测试,确保新技术产业应用。
中科院微电子所集成电路制造技术重点实验室刘明院士团队提出了一种基于记忆交叉阵列的符号知识表示解决方案,首次实验演示并验证了忆阻神经-模糊硬件系统在无监督、有监督和迁移学习任务中的应用……
C&K Switches EITS系列直角照明轻触开关提供表面贴装 PIP 端子和标准通孔配置,为电信、数据中心和专业音频/视频设备等广泛应用提供创新的多功能解决方案。
投身国产浪潮向上而行,英韧科技再获“中国芯”认可
投资界传奇人物沃伦·巴菲特,一位94岁的亿万富翁,最近公开了他的遗嘱。其中透露了一个惊人的决定:他计划将自己99.5%的巨额财富捐赠给慈善机构,而只将0.5%留给自己的子女。这引起了大众对于巴菲特家庭
来源:观察者网12月18日消息,自12月2日美国发布新一轮对华芯片出口禁令以来,不断有知情人士向外媒透露拜登政府在卸任前将采取的下一步动作。美国《纽约时报》12月16日报道称,根据知情人士以及该报查阅
‍‍12月18日,深圳雷曼光电科技股份有限公司(下称“雷曼光电”)与成都辰显光电有限公司(下称“辰显光电”)在成都正式签署战略合作协议。双方将充分发挥各自在技术创新、产品研发等方面的优势,共同推进Mi
有博主基于曝光的信息绘制了iPhone 17系列渲染图,对比iPhone 16系列,17系列最大变化是采用横置相机模组,背部DECO为条形跑道设计,神似谷歌Pixel 9系列,这是iPhone六年来的
12月18 日,据报道,JNTC与印度Welspun BAPL就车载盖板玻璃的开发及量产签订了投资引进业务合作备忘录(MOU)。资料显示,JNTC是韩国的一家盖板玻璃厂商。Welspun的总部位于印度
万物互联的时代浪潮中,以OLED为代表的新型显示技术,已成为人机交互、智能联结的重要端口。维信诺作为中国OLED赛道的先行者和引领者,凭借自主创新,实现了我国OLED技术的自立自强,成为中国新型显示产
阿里资产显示,随着深圳柔宇显示技术有限公司(下称:“柔宇显示”)旗下资产一拍以流拍告终,二拍将于12月24日开拍,起拍价为9.8亿元。拍卖标的包括位于深圳市龙岗区的12套不动产和一批设备类资产,其中不
 “ 担忧似乎为时过早。 ”作者 | RichardSaintvilus编译 | 华尔街大事件由于担心自动驾驶汽车可能取消中介服务,Uber ( NYSE: UBER ) 的股价在短短几周内从 202
LG Display  12月18日表示,为加强OLED制造竞争力,自主开发并引进了“AI(人工智能)生产体系”。“AI生产体系”是AI实时收集并分析OLED工艺制造数据的系统。LG Display表
极越汽车闪崩,留下一地鸡毛,苦的是供应商和车主。很多人都在关心,下一个倒下的新能源汽车品牌,会是谁?我们都没有未卜先知的超能力,但可以借助数据管中窥豹。近日,有媒体统计了15家造车新势力的销量、盈亏情