机器人“3D之眼”设计痛点,一文掌握

安森美 2024-12-02 18:59

点击蓝字 关注我们

注:本文转载自电子产品世界


视觉技术正经历着从2D到3D的转变。实际上,3D空间计算的概念早在15至20年前就已经被提出。近年来,随着3D传感器、人工智能(AI)、大数据以及机器人过程自动化等领域的快速发展,现在我们能够实现更加实时且精确的3D目标检测。这不仅极大地提升了机器人在物体识别、检测、分拣等方面的能力,还加强了它们在视觉定位/导航及有效避障等方面的性能。安森美(onsemi)推出的iToF(间接飞行时间)产品,为3D应用领域带来了革新性的选择。




3D相机的设计难点


过去数十年中,2D成像技术有了长足的发展,分辨率从几十万像素发展到现在的上亿像素,色彩还原更真实,逆光环境下也能通过HDR技术提升图像质量。


然而,2D图像仅能够提供纹理(色彩)信息,无法提供实现更精准识别、追踪等功能所需的空间形貌、几何尺寸、位姿等信息。


3D视觉技术相对于2D技术提供了更丰富的被摄目标信息,可以在六个自由度(x、y、z、旋转、俯仰、横摆)上定位被摄目标,还原人眼视角的三维立体世界。基于3D视觉传感器采集的信息,不但有纹理(色彩)信息,还增加深度信息,也就是视场内的空间几何尺寸信息。这样围绕着物体、空间扫描一圈,就能得到点云图和精准的1∶1还原的3D模型。而有了这些信息作为输入,应用场景会大为增多,性能也会大幅提升。



目前市场上的3D相机产品主要是双目相机、结构光相机、ToF相机,每种设计都有其局限性。例如,双目相机在低照度下精度不佳,面对特征点少的平坦墙壁也存在挑战,对计算能力要求较高;结构光则需要复杂的光源系统,测量距离偏短;ToF则存在多路径反射,分辨率普遍较低,在室外阳光下存在挑战。各种挑战归纳如下:

  • 工程师在开发过程中会遇到镜头选型设计的难点,比如景深、光圈、角度、畸变、MTF、成本之间的平衡,往往为了一个最佳的产品需要进行镜头的定制。

  • 在AGV/AMR等移动设备上,双目相机的设计往往还需要考虑体积,需要选择芯片封装较小且高性能的GS图像传感器芯片,2颗芯片的控制和输出需要严格同步。同时双目相机在组装精度方面也有较高的要求。同时因为是电池应用,对于低功耗的需求也是非常重要的。

  • 在进行ToF产品设计的时候,电源设计以及VCSEL驱动电路设计往往会存在挑战,如何能确保VCSEL能达到满意的反光功率是需要重点考虑,存在一版不成功需要改版的风险;iToF相机的内参校正硬件治具设计和方案往往也是工程师比较头疼的地方。




ToF技术的特点


由发射和反射光信号之间的时间延迟来测量,给定固定的光速。为了精确地测量时延,经常使用短光脉冲。这种技术与3D激光传感器原理基本类似,只不过3D激光传感器是逐点扫描,而ToF相机则是同时得到整幅图像的深度信息。


特点是:和结构光方式相比,ToF并不需要对光的图案做复杂解析,只需要反射回来即可,这大大提高了鲁棒性,深度信息还原度比结构光好很多,点云的完整性更好。主要表现在:深度图质量要高于结构光,抗强光的干扰能力也更强一些,精度也要更高一些。但对于玻璃,是光技术的死穴,只能靠其他技术来弥补了。ToF速度高,但精度只有毫米级。ToF技术的难度较高,成本也较高。


ToF分为dToF和iToF。dToF和iToF在传感器原件上的区别是:iToF是使用CMOS工艺开发的图像传感器,而dToF需要使用单光子雪崩二极管(SPAD)的传感器。dToF有长距离与抗干扰性的特点,较适用于长距离的量测。而iToF由于有成本与空间图像分辨率的优势,很适合AI应用。由于iToF除了对于距离与空间的重现具有高度的可靠度外,还有分辨率的优势,近年发展很快。iToF之所以流行,因为相比于结构光、多目等3D感知方案,iToF是相对简单的。




安森美的解决方案


安森美提供了一套全面的解决方案,以支持3D视觉技术的发展。对于每款传感器,安森美都会提供一份推荐镜头选型表,涵盖了市场上常用的镜头选项,并且能够根据客户需求进行镜头定制及性能测试评估。除了提供高性能的图像传感器芯片外,安森美还提供了详尽的参考设计文档和应用手册,帮助客户简化设计流程,缩短产品开发周期。安森美的图像传感器支持多种相机同步模式,并且在功耗控制方面优于同类产品。特别地,针对主流应用场景,安森美都进行了PRISM模组的设计与生产,使得客户可以直接采购这些预先集成好的模组,从而大大节省了开发成本和时间。


此外,为了解决市场上iToF产品普遍存在的分辨率低、测量距离短以及抗阳光干扰能力弱的问题,安森美推出了全新的1.2 M 像素的iToF产品AF0130。这款小尺寸(1/3英寸)的背照式(BSI)全局快门传感器内置了深度计算模块,可以直接输出深度信息。内部缓存机制有效减少了运动物体产生的伪影。其特有的Smart iToF模式加上940nm波长下超过40%的QE,即使在室外强光条件下也能保持良好的测量精度。更重要的是,AF0130采用了简化的校准方法,无需复杂的移动治具即可完成校正,这不仅降低了开发成本,也提高了生产效率。


在3D传感技术的加持下,未来机器视觉将朝向3D视觉方向不断发展和精进。安森美将通过不断更新的创新性解决方案,为3D视觉技术的应用提供强有力的支持。



⭐点个星标,茫茫人海也能一眼看到我⭐

别着急走,记得点赞在看

安森美 安森美(onsemi, 纳斯达克股票代码:ON)专注于汽车和工业终端市场,包括汽车功能电子化和安全、可持续能源网、工业自动化以及5G和云基础设施等。以高度差异化的创新产品组合,创造智能电源和感知技术,解决最复杂的挑战,帮助建设更美好的未来。
评论
  • 在电子技术快速发展的今天,KLV15002光耦固态继电器以高性能和强可靠性完美解决行业需求。该光继电器旨在提供无与伦比的电气隔离和无缝切换,是现代系统的终极选择。无论是在电信、工业自动化还是测试环境中,KLV15002光耦合器固态继电器都完美融合了效率和耐用性,可满足当今苛刻的应用需求。为什么选择KLV15002光耦合器固态继电器?不妥协的电压隔离从本质上讲,KLV15002优先考虑安全性。输入到输出隔离达到3750Vrms(后缀为V的型号为5000Vrms),确保即使在高压情况下,敏感的低功耗
    克里雅半导体科技 2024-11-29 16:15 119浏览
  • 最近几年,新能源汽车愈发受到消费者的青睐,其销量也是一路走高。据中汽协公布的数据显示,2024年10月,新能源汽车产销分别完成146.3万辆和143万辆,同比分别增长48%和49.6%。而结合各家新能源车企所公布的销量数据来看,比亚迪再度夺得了销冠宝座,其10月新能源汽车销量达到了502657辆,同比增长66.53%。众所周知,比亚迪是新能源汽车领域的重要参与者,其一举一动向来为外界所关注。日前,比亚迪汽车旗下品牌方程豹汽车推出了新车方程豹豹8,该款车型一上市就迅速吸引了消费者的目光,成为SUV
    刘旷 2024-12-02 09:32 54浏览
  • RDDI-DAP错误通常与调试接口相关,特别是在使用CMSIS-DAP协议进行嵌入式系统开发时。以下是一些可能的原因和解决方法: 1. 硬件连接问题:     检查调试器(如ST-Link)与目标板之间的连接是否牢固。     确保所有必要的引脚都已正确连接,没有松动或短路。 2. 电源问题:     确保目标板和调试器都有足够的电源供应。     检查电源电压是否符合目标板的规格要求。 3. 固件问题: &n
    丙丁先生 2024-12-01 17:37 53浏览
  • 戴上XR眼镜去“追龙”是种什么体验?2024年11月30日,由上海自然博物馆(上海科技馆分馆)与三湘印象联合出品、三湘印象旗下观印象艺术发展有限公司(下简称“观印象”)承制的《又见恐龙》XR嘉年华在上海自然博物馆重磅开幕。该体验项目将于12月1日正式对公众开放,持续至2025年3月30日。双向奔赴,恐龙IP撞上元宇宙不久前,上海市经济和信息化委员会等部门联合印发了《上海市超高清视听产业发展行动方案》,特别提到“支持博物馆、主题乐园等场所推动超高清视听技术应用,丰富线下文旅消费体验”。作为上海自然
    电子与消费 2024-11-30 22:03 66浏览
  • 艾迈斯欧司朗全新“样片申请”小程序,逾160种LED、传感器、多芯片组合等产品样片一触即达。轻松3步完成申请,境内免费包邮到家!本期热荐性能显著提升的OSLON® Optimal,GF CSSRML.24ams OSRAM 基于最新芯片技术推出全新LED产品OSLON® Optimal系列,实现了显著的性能升级。该系列提供五种不同颜色的光源选项,包括Hyper Red(660 nm,PDN)、Red(640 nm)、Deep Blue(450 nm,PDN)、Far Red(730 nm)及Ho
    艾迈斯欧司朗 2024-11-29 16:55 152浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2024-12-02 10:40 48浏览
  • 光耦合器作为关键技术组件,在确保安全性、可靠性和效率方面发挥着不可或缺的作用。无论是混合动力和电动汽车(HEV),还是军事和航空航天系统,它们都以卓越的性能支持高要求的应用环境,成为现代复杂系统中的隐形功臣。在迈向更环保技术和先进系统的过程中,光耦合器的重要性愈加凸显。1.混合动力和电动汽车中的光耦合器电池管理:保护动力源在电动汽车中,电池管理系统(BMS)是最佳充电、放电和性能监控背后的大脑。光耦合器在这里充当守门人,将高压电池组与敏感的低压电路隔离开来。这不仅可以防止潜在的损坏,还可以提高乘
    腾恩科技-彭工 2024-11-29 16:12 117浏览
  • 学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&
    youyeye 2024-11-30 14:30 61浏览
  • 国产光耦合器因其在电子系统中的重要作用而受到认可,可提供可靠的电气隔离并保护敏感电路免受高压干扰。然而,随着行业向5G和高频数据传输等高速应用迈进,对其性能和寿命的担忧已成为焦点。本文深入探讨了国产光耦合器在高频环境中面临的挑战,并探索了克服这些限制的创新方法。高频性能:一个持续关注的问题信号传输中的挑战国产光耦合器传统上利用LED和光电晶体管进行信号隔离。虽然这些组件对于标准应用有效,但在高频下面临挑战。随着工作频率的增加,信号延迟和数据保真度降低很常见,限制了它们在电信和高速计算等领域的有效
    腾恩科技-彭工 2024-11-29 16:11 105浏览
  • 国产光耦合器正以其创新性和多样性引领行业发展。凭借强大的研发能力,国内制造商推出了适应汽车、电信等领域独特需求的专业化光耦合器,为各行业的技术进步提供了重要支持。本文将重点探讨国产光耦合器的技术创新与产品多样性,以及它们在推动产业升级中的重要作用。国产光耦合器创新的作用满足现代需求的创新模式新设计正在满足不断变化的市场需求。例如,高速光耦合器满足了电信和数据处理系统中快速信号传输的需求。同时,栅极驱动光耦合器支持电动汽车(EV)和工业电机驱动器等大功率应用中的精确高效控制。先进材料和设计将碳化硅
    克里雅半导体科技 2024-11-29 16:18 157浏览
  • 《高速PCB设计经验规则应用实践》+PCB绘制学习与验证读书首先看目录,我感兴趣的是这一节;作者在书中列举了一条经典规则,然后进行详细分析,通过公式推导图表列举说明了传统的这一规则是受到电容加工特点影响的,在使用了MLCC陶瓷电容后这一条规则已经不再实用了。图书还列举了高速PCB设计需要的专业工具和仿真软件,当然由于篇幅所限,只是介绍了一点点设计步骤;我最感兴趣的部分还是元件布局的经验规则,在这里列举如下:在这里,演示一下,我根据书本知识进行电机驱动的布局:这也算知行合一吧。对于布局书中有一句:
    wuyu2009 2024-11-30 20:30 80浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦