机器人“3D之眼”设计痛点,一文掌握

安森美 2024-12-02 18:59

点击蓝字 关注我们

注:本文转载自电子产品世界


视觉技术正经历着从2D到3D的转变。实际上,3D空间计算的概念早在15至20年前就已经被提出。近年来,随着3D传感器、人工智能(AI)、大数据以及机器人过程自动化等领域的快速发展,现在我们能够实现更加实时且精确的3D目标检测。这不仅极大地提升了机器人在物体识别、检测、分拣等方面的能力,还加强了它们在视觉定位/导航及有效避障等方面的性能。安森美(onsemi)推出的iToF(间接飞行时间)产品,为3D应用领域带来了革新性的选择。




3D相机的设计难点


过去数十年中,2D成像技术有了长足的发展,分辨率从几十万像素发展到现在的上亿像素,色彩还原更真实,逆光环境下也能通过HDR技术提升图像质量。


然而,2D图像仅能够提供纹理(色彩)信息,无法提供实现更精准识别、追踪等功能所需的空间形貌、几何尺寸、位姿等信息。


3D视觉技术相对于2D技术提供了更丰富的被摄目标信息,可以在六个自由度(x、y、z、旋转、俯仰、横摆)上定位被摄目标,还原人眼视角的三维立体世界。基于3D视觉传感器采集的信息,不但有纹理(色彩)信息,还增加深度信息,也就是视场内的空间几何尺寸信息。这样围绕着物体、空间扫描一圈,就能得到点云图和精准的1∶1还原的3D模型。而有了这些信息作为输入,应用场景会大为增多,性能也会大幅提升。



目前市场上的3D相机产品主要是双目相机、结构光相机、ToF相机,每种设计都有其局限性。例如,双目相机在低照度下精度不佳,面对特征点少的平坦墙壁也存在挑战,对计算能力要求较高;结构光则需要复杂的光源系统,测量距离偏短;ToF则存在多路径反射,分辨率普遍较低,在室外阳光下存在挑战。各种挑战归纳如下:

  • 工程师在开发过程中会遇到镜头选型设计的难点,比如景深、光圈、角度、畸变、MTF、成本之间的平衡,往往为了一个最佳的产品需要进行镜头的定制。

  • 在AGV/AMR等移动设备上,双目相机的设计往往还需要考虑体积,需要选择芯片封装较小且高性能的GS图像传感器芯片,2颗芯片的控制和输出需要严格同步。同时双目相机在组装精度方面也有较高的要求。同时因为是电池应用,对于低功耗的需求也是非常重要的。

  • 在进行ToF产品设计的时候,电源设计以及VCSEL驱动电路设计往往会存在挑战,如何能确保VCSEL能达到满意的反光功率是需要重点考虑,存在一版不成功需要改版的风险;iToF相机的内参校正硬件治具设计和方案往往也是工程师比较头疼的地方。




ToF技术的特点


由发射和反射光信号之间的时间延迟来测量,给定固定的光速。为了精确地测量时延,经常使用短光脉冲。这种技术与3D激光传感器原理基本类似,只不过3D激光传感器是逐点扫描,而ToF相机则是同时得到整幅图像的深度信息。


特点是:和结构光方式相比,ToF并不需要对光的图案做复杂解析,只需要反射回来即可,这大大提高了鲁棒性,深度信息还原度比结构光好很多,点云的完整性更好。主要表现在:深度图质量要高于结构光,抗强光的干扰能力也更强一些,精度也要更高一些。但对于玻璃,是光技术的死穴,只能靠其他技术来弥补了。ToF速度高,但精度只有毫米级。ToF技术的难度较高,成本也较高。


ToF分为dToF和iToF。dToF和iToF在传感器原件上的区别是:iToF是使用CMOS工艺开发的图像传感器,而dToF需要使用单光子雪崩二极管(SPAD)的传感器。dToF有长距离与抗干扰性的特点,较适用于长距离的量测。而iToF由于有成本与空间图像分辨率的优势,很适合AI应用。由于iToF除了对于距离与空间的重现具有高度的可靠度外,还有分辨率的优势,近年发展很快。iToF之所以流行,因为相比于结构光、多目等3D感知方案,iToF是相对简单的。




安森美的解决方案


安森美提供了一套全面的解决方案,以支持3D视觉技术的发展。对于每款传感器,安森美都会提供一份推荐镜头选型表,涵盖了市场上常用的镜头选项,并且能够根据客户需求进行镜头定制及性能测试评估。除了提供高性能的图像传感器芯片外,安森美还提供了详尽的参考设计文档和应用手册,帮助客户简化设计流程,缩短产品开发周期。安森美的图像传感器支持多种相机同步模式,并且在功耗控制方面优于同类产品。特别地,针对主流应用场景,安森美都进行了PRISM模组的设计与生产,使得客户可以直接采购这些预先集成好的模组,从而大大节省了开发成本和时间。


此外,为了解决市场上iToF产品普遍存在的分辨率低、测量距离短以及抗阳光干扰能力弱的问题,安森美推出了全新的1.2 M 像素的iToF产品AF0130。这款小尺寸(1/3英寸)的背照式(BSI)全局快门传感器内置了深度计算模块,可以直接输出深度信息。内部缓存机制有效减少了运动物体产生的伪影。其特有的Smart iToF模式加上940nm波长下超过40%的QE,即使在室外强光条件下也能保持良好的测量精度。更重要的是,AF0130采用了简化的校准方法,无需复杂的移动治具即可完成校正,这不仅降低了开发成本,也提高了生产效率。


在3D传感技术的加持下,未来机器视觉将朝向3D视觉方向不断发展和精进。安森美将通过不断更新的创新性解决方案,为3D视觉技术的应用提供强有力的支持。



⭐点个星标,茫茫人海也能一眼看到我⭐

别着急走,记得点赞在看

安森美 安森美(onsemi, 纳斯达克股票代码:ON)专注于汽车和工业终端市场,包括汽车功能电子化和安全、可持续能源网、工业自动化以及5G和云基础设施等。以高度差异化的创新产品组合,创造智能电源和感知技术,解决最复杂的挑战,帮助建设更美好的未来。
评论
  • 物联网(IoT)的快速发展彻底改变了从智能家居到工业自动化等各个行业。由于物联网系统需要高效、可靠且紧凑的组件来处理众多传感器、执行器和通信设备,国产固态继电器(SSR)已成为满足中国这些需求的关键解决方案。本文探讨了国产SSR如何满足物联网应用的需求,重点介绍了它们的优势、技术能力以及在现实场景中的应用。了解物联网中的固态继电器固态继电器是一种电子开关设备,它使用半导体而不是机械触点来控制负载。与传统的机械继电器不同,固态继电器具有以下优势:快速切换:确保精确快速的响应,这对于实时物联网系统至
    克里雅半导体科技 2025-01-03 16:11 165浏览
  • 根据Global Info Research项目团队最新调研,预计2030年全球封闭式电机产值达到1425百万美元,2024-2030年期间年复合增长率CAGR为3.4%。 封闭式电机是一种电动机,其外壳设计为密闭结构,通常用于要求较高的防护等级的应用场合。封闭式电机可以有效防止外部灰尘、水分和其他污染物进入内部,从而保护电机的内部组件,延长其使用寿命。 环洋市场咨询机构出版的调研分析报告【全球封闭式电机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球封闭式电机总体规
    GIRtina 2025-01-06 11:10 26浏览
  • 随着市场需求不断的变化,各行各业对CPU的要求越来越高,特别是近几年流行的 AIOT,为了有更好的用户体验,CPU的算力就要求更高了。今天为大家推荐由米尔基于瑞芯微RK3576处理器推出的MYC-LR3576核心板及开发板。关于RK3576处理器国产CPU,是这些年的骄傲,华为手机全国产化,国人一片呼声,再也不用卡脖子了。RK3576处理器,就是一款由国产是厂商瑞芯微,今年第二季推出的全新通用型的高性能SOC芯片,这款CPU到底有多么的高性能,下面看看它的几个特性:8核心6 TOPS超强算力双千
    米尔电子嵌入式 2025-01-03 17:04 16浏览
  • 自动化已成为现代制造业的基石,而驱动隔离器作为关键组件,在提升效率、精度和可靠性方面起到了不可或缺的作用。随着工业技术不断革新,驱动隔离器正助力自动化生产设备适应新兴趋势,并推动行业未来的发展。本文将探讨自动化的核心趋势及驱动隔离器在其中的重要角色。自动化领域的新兴趋势智能工厂的崛起智能工厂已成为自动化生产的新标杆。通过结合物联网(IoT)、人工智能(AI)和机器学习(ML),智能工厂实现了实时监控和动态决策。驱动隔离器在其中至关重要,它确保了传感器、执行器和控制单元之间的信号完整性,同时提供高
    腾恩科技-彭工 2025-01-03 16:28 161浏览
  • 光耦合器,也称为光隔离器,是一种利用光在两个隔离电路之间传输电信号的组件。在医疗领域,确保患者安全和设备可靠性至关重要。在众多有助于医疗设备安全性和效率的组件中,光耦合器起着至关重要的作用。这些紧凑型设备经常被忽视,但对于隔离高压和防止敏感医疗设备中的电气危害却是必不可少的。本文深入探讨了光耦合器的功能、其在医疗应用中的重要性以及其实际使用示例。什么是光耦合器?它通常由以下部分组成:LED(发光二极管):将电信号转换为光。光电探测器(例如光电晶体管):检测光并将其转换回电信号。这种布置确保输入和
    腾恩科技-彭工 2025-01-03 16:27 158浏览
  •     为控制片内设备并且查询其工作状态,MCU内部总是有一组特殊功能寄存器(SFR,Special Function Register)。    使用Eclipse环境调试MCU程序时,可以利用 Peripheral Registers Viewer来查看SFR。这个小工具是怎样知道某个型号的MCU有怎样的寄存器定义呢?它使用一种描述性的文本文件——SVD文件。这个文件存储在下面红色字体的路径下。    例:南京沁恒  &n
    电子知识打边炉 2025-01-04 20:04 23浏览
  • 在快速发展的能源领域,发电厂是发电的支柱,效率和安全性至关重要。在这种背景下,国产数字隔离器已成为现代化和优化发电厂运营的重要组成部分。本文探讨了这些设备在提高性能方面的重要性,同时展示了中国在生产可靠且具有成本效益的数字隔离器方面的进步。什么是数字隔离器?数字隔离器充当屏障,在电气上将系统的不同部分隔离开来,同时允许无缝数据传输。在发电厂中,它们保护敏感的控制电路免受高压尖峰的影响,确保准确的信号处理,并在恶劣条件下保持系统完整性。中国国产数字隔离器经历了重大创新,在许多方面达到甚至超过了全球
    克里雅半导体科技 2025-01-03 16:10 121浏览
  • 车身域是指负责管理和控制汽车车身相关功能的一个功能域,在汽车域控系统中起着至关重要的作用。它涵盖了车门、车窗、车灯、雨刮器等各种与车身相关的功能模块。与汽车电子电气架构升级相一致,车身域发展亦可以划分为三个阶段,功能集成愈加丰富:第一阶段为分布式架构:对应BCM车身控制模块,包含灯光、雨刮、门窗等传统车身控制功能。第二阶段为域集中架构:对应BDC/CEM域控制器,在BCM基础上集成网关、PEPS等。第三阶段为SOA理念下的中央集中架构:VIU/ZCU区域控制器,在BDC/CEM基础上集成VCU、
    北汇信息 2025-01-03 16:01 173浏览
  • PLC组态方式主要有三种,每种都有其独特的特点和适用场景。下面来简单说说: 1. 硬件组态   定义:硬件组态指的是选择适合的PLC型号、I/O模块、通信模块等硬件组件,并按照实际需求进行连接和配置。    灵活性:这种方式允许用户根据项目需求自由搭配硬件组件,具有较高的灵活性。    成本:可能需要额外的硬件购买成本,适用于对系统性能和扩展性有较高要求的场合。 2. 软件组态   定义:软件组态主要是通过PLC
    丙丁先生 2025-01-06 09:23 29浏览
  • 本文介绍Linux系统更换开机logo方法教程,通用RK3566、RK3568、RK3588、RK3576等开发板,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。制作图片开机logo图片制作注意事项(1)图片必须为bmp格式;(2)图片大小不能大于4MB;(3)BMP位深最大是32,建议设置为8;(4)图片名称为logo.bmp和logo_kernel.bmp;开机
    Industio_触觉智能 2025-01-06 10:43 21浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦