这种传感器,非常重要

原创 电子工程世界 2024-06-25 07:03
有这样一个传感器,自2015年ToF传感器首次应用在iPhone X前置摄像头方案中,就迅速掀起了其在手机中应用的热潮,这几年仅在手机上年出货量就已经超亿颗。
而后开始逐渐深入整个消费电子,包括扫地机避障、投影仪辅助对焦、相机辅助对焦、智能灯具、智能卫浴如自动水龙头、自动皂液器、智能马桶、机器人、无人机等。现在,在自动驾驶汽车甚至美国宇航局建造的太空探测器中,都使用了它。它就是ToF(Time of Flight),中文翻译“飞行时间”。
上周,英飞凌宣布,石头科技(Roborock)最新智能扫拖一体机器人V20黑武士内部搭载英飞凌全新的hToF,取代传统的LDS模组和避障模组,提升了扫地机器人的灵活性和可靠性。
所以,ToF究竟有多神奇,未来又会如何改变世界?以下进行详细介绍。

付斌|作者

电子工程世界(ID:EEWorldbbs)|出品

 ToF的优势和不足 


ToF的概念很容易理解,其实有点工作原理和声纳探测很像,通过红外光从物体上反射回传感器后,根据光的发射与反射的时间差,就可以计算出传感器与测量物体之间的距离。
学术界对其的定义为基于时差测距法的三维(3D)成像技术,现已被广泛应用于无人驾驶、卫星测距、生物医学成像、智能机器人等领域。
而用ToF制造的传感器,又称深度相机、ToF相机。ToF传感器主要分为dToF(Direct ToF,直接飞行时间)传感器和iToF(Indirect ToF,间接飞行时间)传感器,苹果使用的LiDAR(激光雷达)就属于dToF,荣耀V20、Galaxy S20 Ultra与索尼Xepria 1 II等产品使用的则是iToF。
iToF在芯片工艺和产业链已趋于成熟,但效果并不完美,其精度会受测量距离影响,距离限制在5米以内,从而导致其应用体验不佳。dToF技术在激光功耗、抗干扰、远距离精度等方面有着明显优势,是远距离应用的绝佳候选,但对芯片设计、系统设计、制造工艺要求较高。
既然激光雷达也是一种ToF,为什么苹果不叫ToF?这因为LiDar使用光脉冲来测量飞行时间,ToF传感器则利用连续波从反射和相移得到飞行时间。ToF需要较少的专用设备,因此可以与更小、更便宜的设备一起使用。随着技术不断拓展,ToF与LiDar协同应用越来越多。
任何一项技术都会有其独特的优势,也会存在一些不足,ToF亦如此。其优势在于低功耗、小尺寸、精确快速的测量、远距离测量、安全性、成本效益上,但也受到散射光、环境光、拐角凹面的影响。

ToF的优势和局限性,信源|贸泽电子

 三种深度相机,有何优劣? 


所谓深度相机也被称为3D摄像头,它和普通2D相机的区别在于可以获取物体到相机的距离信息,加之2D平面的X,Y坐标,计算出每个点的三维坐标,以此推断深度相机的应用,如三维重建、目标定位、导航避障等。
目前,构建3D摄像头拥有三类主流技术——双目、结构光、ToF,三种技术在基础原理和成本、精度上存在很大差别。
双目由于不主动对外发射光源,因此称为“被动深度相机”,应用场景主要包括机器人导航、人脸识别、手势识别等。它通过左右两个摄像头同时拍摄同一物体,然后利用计算机算法计算两个摄像头之间的视差,从而得出物体的深度信息。
因为双目不需要结构光、ToF的发射器和接收器,因此结构简单硬件成本低,适合成本敏感的应用场景。
成也自然光,败也自然光,虽然依靠自然光,可在室内外使用,但强光、暗光的影响都会比较大。同时双目对无纹理的物体或表面影响较大,如纯色墙。
结构光是一种通过投影仪主动发射的主动投影技术,应用场景包括3D扫描、机器视觉、机器人导航等。它通过计算结构化光斑照射到物品表面的畸变,从而生成深度图,主要硬件有投射仪、相机。
结构光在近距离(1米内)的精度达到毫米级,测量范围也比较广、对光线和颜色的敏感度低等,同时因为是主动投影,所以适合弱光照使用。
不过它不太适合在强光环境适用,容易干扰投影光,同时测量距离和分辨率存在一定的局限性。
由于主动发射脉冲光,所以ToF属于主动测量方式,主要应用场景包括客流统计、无人零售、虚拟现实、机器人导航等领域。相机通过发送一束光到目标物体上,这个光的波长通常为红外线。当这束光被目标物体反射回来时,相机的光电二极管(PD)阵列接收反射光,并测量光的时间飞行(ToF)。基于ToF的测量技术可以计算光从相机到物体然后返回相机的时间,从而确定物体的距离。
ToF不需要任何外部光源,即便没有光线情况下也能工作,深度距离计算不会随距离变化而变化,而且测量距离远至百米,不受表面灰度和特征影响,可用于无人驾驶。更重要的是,ToF不像双目相机、结构光需要经过算法处理才能输出三维数据,TOF可以直接输出被测物体三维数据。
与结构光相同,ToF对于环境光照的干扰也很敏感,室外强光基本无法使用,同时反光的表面(在不同方向反射光),或者角落(产生多次反射)也都会使得ToF传感器很难工作。
总之,ToF是一种经济高效、机械紧凑的深度成像解决方案,不受环境照明变化的影响,相比来说也是一种比较平衡的选择,所以ToF传感器适合大部分应用,应用更广泛。

 哪些厂商在推进ToF 


ST的三合一智能光学模块VL6180X是较早用于智能手机中的ToF产品,该芯片整合了接近传感器、环境光传感器以及VCSEL光源。接下来的5年里,ST陆续推出了VL6180X、VL53L0、VL53L1、VL53L3、VL53L5等四代ToF产品。
ST的VL53L5产品也能应用在工业机器人领域,是第一款能够监测64个不同区域的ToF传感器。它与VL53L1X相似,都具有相同的量程,并采用了940nm VCSEL。不过,VL53L5尺寸稍大一些,为6.4mm x 3mm x 1.5mm。但视野范围扩大到61º(水平和垂直方向43º),而不是上一代的27º。
英飞凌则在最近与合作伙伴pmd及欧菲光携手开发并推出经济高效的深度感知技术hToF,面向消费类应用。特别是消费类机器人,与配备激光距离传感器(LDS)+避障模块的机器人相比,超小的hToF传感器有助于设计更加纤薄的机器人。
独特的hToF技术采用英飞凌的高分辨率REAL3 ToF传感器,辅以均匀的泛光光源和强大的多点网格光源(spot grid illumination),提供经济高效的解决方案。hToF摄像头具有110°超宽水平视野(FoV),是SLAM和避障的理想之选。
ADI公司的ToF模块在汽车领域具备很强大的优势,其开发的ToF模块结合影像传感器和VGA ToF传感器模块与内建图像处理器方案,比传统音波检测具备更佳的检测角度,也更能准确测量物体跟汽车的距离。因此可为汽车倒车系统、开门防护系统、停车辅助系统及盲点侦测等应用提供更大范围的碰撞侦测预防。
作为ToF方案的核心器件之一,ADI的ToF前端芯片ADDI903x系列支持CCD红外光ToF传感器,分辨率可达640 x 480。ADDI903x可将影像信号转换为数字信号,并提供高精确度的脉波时间控制器,闭回路设计,让激光二极管控制的脉波宽度更准确,进而可以得到更精准的深度数据。
ams OSRAM拥有全球最小的集成式1D ToF距离测量和接近传感模块。这款传感器非常适合实施存在监测,例如,当用户脸部位于识别范围内时,即可触发人脸识别系统操作。最新款TMF8701传感器采用2.2mm x 3.6mm x 1.0mm封装,有助于智能手机制造商实现具有高显示屏占比的宽屏手机设计。
TMF8701集成了VCSEL红外发射器、多个SPAD(单光子雪崩光电二极管)光探测器、时间-数字转换器和直方图处理内核。设备在芯片上实现基于直方图的全占位监测、距离测量和接近传感算法。TMF8701独立识别显示屏上的指纹污染以及盖玻片范围以外物体(例如用户脸部)的光反射,即使在传感器孔径脏污时,也能保持可靠性能。在正常照明条件下测量距离为20~60cm范围时,模块实现了±5%准确度。即使在明亮太阳光(100klux)下,也可以在高达35cm的范围内保持±5%准确度。
索尼的ToF图像传感器将背照式CMOS图像传感器的像素技术,与读取反射光信号、提升精度的索尼独创像素技术相融合,实现了3D ToF摄像头模组的小型化,并且还发挥背照式结构的优点,大幅提升了测距的处理速度和高效将光转换成电子信号的距离分辨率。另外,传统ToF方式难以测量约10m的远距离,而新产品通过搭载提升感光度的驱动模式,实现了高检测率。在约30cm到1m的近距离范围内,则能凭借VGA分辨率,获取高精度的距离图像。
TI早在2013年就发布过3D ToF手势技术但是用于控制领域。2017年发布的OPT8241算是一款经典产品,这颗芯片属于3D TOF图像传感器系列。它将ToF感应功能与经优化设计的模数转换器(ADC)和通用可编程定时发生器(TG)相结合,以高达150帧/秒的帧速率提供四分之一的视频图形阵列(QVGA 320x240)分辨率数据。主要的应用是深度感测,例如3D扫描、手势控制等等,其终端应用在ATM、人数统计等等。
Teledyne e2v研发的第一个3D飞行时间法解决方案,具有130万像素分辨率深度与1英寸光学尺寸。在可见光与近红外光谱850nm波长出量子效率大50%,高动态范围可实现实现夜间和日夜视觉;可获取快速移动的目标3D图像:速度高达120帧/秒,全分辨率30帧/秒深度图像,全局快门效率高。
迈来芯Melexis在2017年推出了MLX75023 1/3英寸光学格式ToF传感器,其提供当时世界上最小的QVGA分辨率像素,并具有63dB线性动态范围和日光鲁棒性。MLX75123配套芯片将传感器IC直接连接到主机MCU,可以从传感器快速读取数据。
ToF虽然在这几年好像存在感没有2020年左右那么强了,但实际上,依然有很大潜力。Yole曾经预测,2025年ToF将会拥有150亿美元的市场,2024年应用于智能手机的后置3D摄像头市场规模将增长到每年5亿多颗。
总之这个市场还在继续成长,厂商们也在不断进化,包括英飞凌的hToF,未来这个市场的竞争也会越来越激烈。

参考文献

[1] 牛洪星, 高静, 聂凯明. 飞行时间图像传感器的建模和运动误差分析[J]. Laser & Optoelectronics Progress, 2021, 58(24): 2428001.
[2] 英飞凌官微:苹果等大厂都在关注的ToF是什么?几张图帮你get重点.2020.4.3.https://mp.weixin.qq.com/s/RBup-tZkr5vn-CZP9S5tBg
[3] 三易生活:大家都在用的ToF,为何只有苹果敢叫“激光雷达”.2020.9.4.https://new.qq.com/rain/a/20200914A0GWZ000
[4] 贸泽电子:ToF传感器究竟有多神奇?本文告诉你!.https://www.mouser.cn/blog/cn-sensor-tof-advantage-application
[5] OAKChina:双目、结构光、tof,三种深度相机的原理区别看这一篇就够了!.2023.5.16.https://www.oakchina.cn/2023/05/16/3_depth_cams/
[6] 点云PCL博主:TOF飞行时间深度相机介绍.2022.9.13.https://cloud.tencent.com/developer/article/2104734
[7] 3d tof:ST/TI/ams/Melexis,TOF技术哪家强?.2023.3.13.https://mp.weixin.qq.com/s/x-EmYhv--7Myw8A0hGNqWw


· END ·








电子工程世界 关注EEWORLD电子工程世界,即时参与讨论电子工程世界最火话题,抢先知晓电子工程业界资讯。
评论
  • 天问Block和Mixly是两个不同的编程工具,分别在单片机开发和教育编程领域有各自的应用。以下是对它们的详细比较: 基本定义 天问Block:天问Block是一个基于区块链技术的数字身份验证和数据交换平台。它的目标是为用户提供一个安全、去中心化、可信任的数字身份验证和数据交换解决方案。 Mixly:Mixly是一款由北京师范大学教育学部创客教育实验室开发的图形化编程软件,旨在为初学者提供一个易于学习和使用的Arduino编程环境。 主要功能 天问Block:支持STC全系列8位单片机,32位
    丙丁先生 2024-12-11 13:15 47浏览
  • 我的一台很多年前人家不要了的九十年代SONY台式组合音响,接手时只有CD功能不行了,因为不需要,也就没修,只使用收音机、磁带机和外接信号功能就够了。最近五年在外地,就断电闲置,没使用了。今年9月回到家里,就一个劲儿地忙着收拾家当,忙了一个多月,太多事啦!修了电气,清理了闲置不用了的电器和电子,就是一个劲儿地扔扔扔!几十年的“工匠式”收留收藏,只能断舍离,拆解不过来的了。一天,忽然感觉室内有股臭味,用鼻子的嗅觉功能朝着臭味重的方向寻找,觉得应该就是这台组合音响?怎么会呢?这无机物的东西不会腐臭吧?
    自做自受 2024-12-10 16:34 136浏览
  • 近日,搭载紫光展锐W517芯片平台的INMO GO2由影目科技正式推出。作为全球首款专为商务场景设计的智能翻译眼镜,INMO GO2 以“快、准、稳”三大核心优势,突破传统翻译产品局限,为全球商务人士带来高效、自然、稳定的跨语言交流体验。 INMO GO2内置的W517芯片,是紫光展锐4G旗舰级智能穿戴平台,采用四核处理器,具有高性能、低功耗的优势,内置超微高集成技术,采用先进工艺,计算能力相比同档位竞品提升4倍,强大的性能提供更加多样化的应用场景。【视频见P盘链接】 依托“
    紫光展锐 2024-12-11 11:50 47浏览
  • 智能汽车可替换LED前照灯控制运行的原理涉及多个方面,包括自适应前照灯系统(AFS)的工作原理、传感器的应用、步进电机的控制以及模糊控制策略等。当下时代的智能汽车灯光控制系统通过车载网关控制单元集中控制,表现特殊点的有特斯拉,仅通过前车身控制器,整个系统就包括了灯光旋转开关、车灯变光开关、左LED前照灯总成、右LED前照灯总成、转向柱电子控制单元、CAN数据总线接口、组合仪表控制单元、车载网关控制单元等器件。变光开关、转向开关和辅助操作系统一般连为一体,开关之间通过内部线束和转向柱装置连接为多,
    lauguo2013 2024-12-10 15:53 78浏览
  • RK3506 是瑞芯微推出的MPU产品,芯片制程为22nm,定位于轻量级、低成本解决方案。该MPU具有低功耗、外设接口丰富、实时性高的特点,适合用多种工商业场景。本文将基于RK3506的设计特点,为大家分析其应用场景。RK3506核心板主要分为三个型号,各型号间的区别如下图:​图 1  RK3506核心板处理器型号场景1:显示HMIRK3506核心板显示接口支持RGB、MIPI、QSPI输出,且支持2D图形加速,轻松运行QT、LVGL等GUI,最快3S内开
    万象奥科 2024-12-11 15:42 66浏览
  • 习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-10 16:13 105浏览
  • 一、SAE J1939协议概述SAE J1939协议是由美国汽车工程师协会(SAE,Society of Automotive Engineers)定义的一种用于重型车辆和工业设备中的通信协议,主要应用于车辆和设备之间的实时数据交换。J1939基于CAN(Controller Area Network)总线技术,使用29bit的扩展标识符和扩展数据帧,CAN通信速率为250Kbps,用于车载电子控制单元(ECU)之间的通信和控制。小北同学在之前也对J1939协议做过扫盲科普【科普系列】SAE J
    北汇信息 2024-12-11 15:45 74浏览
  • 概述 通过前面的研究学习,已经可以在CycloneVGX器件中成功实现完整的TDC(或者说完整的TDL,即延时线),测试结果也比较满足,解决了超大BIN尺寸以及大量0尺寸BIN的问题,但是还是存在一些之前系列器件还未遇到的问题,这些问题将在本文中进行详细描述介绍。 在五代Cyclone器件内部系统时钟受限的情况下,意味着大量逻辑资源将被浪费在于实现较大长度的TDL上面。是否可以找到方法可以对此前TDL的长度进行优化呢?本文还将探讨这个问题。TDC前段BIN颗粒堵塞问题分析 将延时链在逻辑中实现后
    coyoo 2024-12-10 13:28 101浏览
  • 【萤火工场CEM5826-M11测评】OLED显示雷达数据本文结合之前关于串口打印雷达监测数据的研究,进一步扩展至 OLED 屏幕显示。该项目整体分为两部分: 一、框架显示; 二、数据采集与填充显示。为了减小 MCU 负担,采用 局部刷新 的方案。1. 显示框架所需库函数 Wire.h 、Adafruit_GFX.h 、Adafruit_SSD1306.h . 代码#include #include #include #include "logo_128x64.h"#include "logo_
    无垠的广袤 2024-12-10 14:03 69浏览
  • 时源芯微——RE超标整机定位与解决详细流程一、 初步测量与问题确认使用专业的电磁辐射测量设备,对整机的辐射发射进行精确测量。确认是否存在RE超标问题,并记录超标频段和幅度。二、电缆检查与处理若存在信号电缆:步骤一:拔掉所有信号电缆,仅保留电源线,再次测量整机的辐射发射。若测量合格:判定问题出在信号电缆上,可能是电缆的共模电流导致。逐一连接信号电缆,每次连接后测量,定位具体哪根电缆或接口导致超标。对问题电缆进行处理,如加共模扼流圈、滤波器,或优化电缆布局和屏蔽。重新连接所有电缆,再次测量
    时源芯微 2024-12-11 17:11 70浏览
  • 全球知名半导体制造商ROHM Co., Ltd.(以下简称“罗姆”)宣布与Taiwan Semiconductor Manufacturing Company Limited(以下简称“台积公司”)就车载氮化镓功率器件的开发和量产事宜建立战略合作伙伴关系。通过该合作关系,双方将致力于将罗姆的氮化镓器件开发技术与台积公司业界先进的GaN-on-Silicon工艺技术优势结合起来,满足市场对高耐压和高频特性优异的功率元器件日益增长的需求。氮化镓功率器件目前主要被用于AC适配器和服务器电源等消费电子和
    电子资讯报 2024-12-10 17:09 84浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦