在智能工厂里,AGV/ARM机器人通过三维视觉感知,精准识别并拾取货架上的物品,它们还可以与人类同事进行协同互动,安全将货物送至生产车间。生产线上,配备智能摄像头的机器如同拥有智慧的眼睛,可以读取标签和解释标识。通过机器深度学习,机器视觉系统可以理解物品形状、计算体积,并以最节省空间的方式将其完美装箱。
这听起来或许像科幻小说里的场景,但在今天的智能工厂里,人工智能正在重塑工业生产与智能制造,从质量控制到预测性维护,从协作机器人到数字孪生……结合人工智能技术的机器视觉系统通过摄像头和传感器采集数据,让工业设备能够“看见”并分析生产制造流程、控制生产质量,并确保工人安全,是引领工业制造向工业4.0过渡的关键技术。
随着边缘计算与AI大模型的进一步发展成熟,工业制造在迎来新一轮转型改革的同时,也对机器视觉系统提出了更高的要求。传统执行单一重复性任务的机器视觉系统已无法满足未来工业生产与智能制造的需求,我们需要机器视觉系统更加智能、能够进行独立自主的决策。
在工业制造领域,传统机器视觉系统使用基于帧的摄像头捕捉连续的图像数据流,然后通过人工智能算法进行处理和分析。然而,这种传统方法具有局限性,难以应对机器快速增长的算力要求以及处理大量数据的带宽需求。
与传统基于帧的图像传感技术不同,事件视觉传感(event-based vision sensing)技术的灵感来源于人类视觉系统,它模仿人眼视觉的工作模式,只关注视觉场景中发生的变化或“事件(event)”,这种独特的方法不仅大大减少了机器视觉系统所需的数据量和计算负荷,还显著优化了数据传输和处理流程,实现了前所未有的效率。
此外,人工智能算法与事件视觉传感技术的结合,为工业自动化带来了全新的自主性和适应性。通过利用深度学习技术,机器可以从大量数据中学习,不断提高决策能力。事件视觉传感与人工智能之间的这种共生关系使机器能够进行智能、实时的调整,优化流程并最大限度地减少停机时间。
为加速事件视觉技术在边缘机器视觉及工业领域的深度融合与应用步伐,Prophesee 近期宣布与AMD携手推出业界首款兼容 AMD Kria 平台的事件视觉开发套件,旨在为机器视觉系统设计师与开发者打造一座高效桥梁,助力他们迅速评估并部署面向智慧城市、机器视觉、安全监控、零售分析等领域的尖端工业级解决方案,无缝衔接研发与生产流程。
图:Prophesee Metavision 入门套件 – AMD Kria KV260 和主动光通信( Active Marker)LED 板
AMD Kria SOM 适用于边缘 AI 应用,配备数量丰富的 I/O 接口,高能效且具有成本效益,可加速视觉和机器人任务处理。结合 Prophesee 突破性的事件视觉技术,机器视觉系统开发者可利用 Metavision 平台的低延迟和低功耗优势,创建出传统基于帧的视觉方案无法实现且更高效的应用。Prophesee还提供全面的事件视觉软件套件、优化工具、事件视觉数据集以及开源平台支持,全方位赋能开发者。
“事件视觉传感解决方案是嵌入式视觉应用的理想之选“,Prophesee产品市场总监Gareth Powell介绍说。“我们基于Kria平台可以实现的一个典型用例是港口集装箱的精准放置,通过在集装箱上设置主动光源(Active marker),我们的事件视觉系统能在三维空间内实现对悬挂集装箱的精确定位与追踪,确保每一次操作都安全无误。”
图:Prophesee 事件视觉传感技术在工业自动化领域的应用场景示例
“另一个典型的应用场景是高速移动物体的计数与分类,例如谷物或药丸,使用Prophesee的事件传感器可以实现高达99%的检测准确率”,Powell补充说。
目前,已经有一些开发人员和公司在Prophesee与AMD Kria 视觉套件上开发创新的机器视觉应用,譬如专注于开发机器学习软件的公司LogicTronix,已成功开发出用于检测和跟踪车辆和人员的应用程序。该应用程序即将在Kria应用商店上线。
Powell表示:“在工业自动化领域,Prophesee的事件视觉技术以其快速响应、低算力需求及高效节能的特性,为嵌入式视觉与AI功能的深度融合提供了独特的优势。”
事件视觉技术让机器能够快速识别和响应环境中的关键事件,从而提高了生产力。无论是检测生产线上的异常、实时识别质量缺陷,还是监控工人安全,事件视觉传感技术都能为智能工厂提供无与伦比的效率和准确度。在汽车制造、电子零配件生产、食品加工、医疗制药等多个行业中,事件视觉传感技术均展现出广阔的应用前景,为工业4.0时代的新质生产力注入了源源不断的创新活力与强劲动力。
了解业界首款兼容 AMD Kria KV260 入门套件的 Prophesee Metavision® 事件视觉解决方案,欢迎访问:https://www.prophesee-cn.com/event-based-metavision-amd-kria-starter-kit-imx636/