ToF:智能手机摄像头的下一个风口

EDN电子技术设计 2020-08-04 00:00



在最近发布的iPad Pro中,苹果宣布使用dToF LiDAR技术,让飞行时间(time-of-flight, ToF)这个略显小众的“黑科技”再次成为2020年厂商展示技术实力当仁不让的筹码。根据咨询机构Yole Développement的最新预测,包括ToF技术在内的全球3D成像与传感市场,将以20%的年均复合成长率(CAGR)从2019年的50亿美元成长至2025年的150亿美元。其中,摄像头后置3D成像应用将超过前置,市场渗透率将在2025年接近42%。


2019-2025年全球3D成像与传感市场收入预测 (来自Yole Développement)


目前,包括OPPO R17 Pro、vivo NEX双屏版、荣耀V20、LG G8、三星S10 Pro、华为P30 Pro、华为Mate 30 Pro和华为P40 Pro/Pro+在内的中高端旗舰智能手机,纷纷将基于ToF技术的后置3D成像方案列为标配。而国盛证券的报告也显示,从2020年开始,ToF手机的出货量将进一步爆发,在整体3D感应中占比有望达到40%。预计2019/2020年ToF手机的出货量为7760万,同比大幅增长747%;成本方面,ToF的BOM成本大约为12-15美元,而芯片的成本大约占到整体BOM的28%-30%。

3D后置传感应用多元化

ToF与结构光、双目视觉技术(Stereo Vision)一起,共同组成了当前3D摄像头的三条主流技术路线。其基本原理与3D激光传感器类似,只不过3D激光传感器是逐点扫描,而ToF相机则是同时得到整幅图像的深度信息。这就好比是ToF镜头发射出了一整面平整的“光墙”,这面光墙打到物体表面发生了形变并带着3D信息反射回来,根据激光往返的时间长短和其固定的飞行速度,就能计算出物体表面上的点与手机之间的距离。当发射的激光足够多时,就可以触达物体表面的每一个点,当所有的点连成一个3D立体面时,我们就能获得物体的形状信息。


和ToF相比,结构光在短距离(<80cm)范围内具有高精度和强抗干扰能力的优势,所以在前置3D应用中,结构光性能优势比较明显。但在后置3D应用中,由于ToF工作距离比结构光更远,因此它的应用范围可以变得更广。从应用层面对比而言,结构光技术功耗更小,技术更成熟,但由于应用距离受限,所以更适合解锁以及安全支付等静态场景;而ToF方案拥有更高的帧率(FPS),在远距离下噪声较低,更适合智能机后置摄影、AR/VR(包括3D拍照、体感游戏)等动态场景。

主流3D视觉方案对比


这意味着,随着增强现实内容市场的蓬勃发展,内容厂商不断推动AR/VR开发平台的发展,ToF有望接力结构光,从生物感知到虚拟现实,从人脸识别到3D建模,带来产业端升级和用户体验优化,前置人脸识别+后置虚拟现实功能可能成为手机的下一个形态,ToF有望成为智能手机摄像头的下一个风口。


但需要指出的是,其实除了智能手机领域,ToF技术在智能家居、智能安防、智能零售、自动驾驶等领域迎来爆发将成为大概率事件,有着很大的发展前景。例如扫地机器人将从传统的单线机械扫描式激光雷达转向ToF激光雷达测距,用于识别跟踪人体,让人类生活各方面变得更加智能;在自动驾驶/车内感知监控/AGV领域,ToF 3D传感技术可以应用于车载激光雷达、车内人体识别、车内手势识别等相关技术的实现。

如何用ToF进行“思考”?

很多人认为iPhone 7是ToF测距传感器首度现身智能手机市场的标志,但其实这是一个误解。该技术最先在Blackberry Passport智能手机中得到采用,它当时使用了意法半导体(ST)三合一智能光学模块VL6180X,整合了接近传感器、环境光传感器以及VCSEL光源。很快,在随后推出的几款LG手机中也发现了这款组件。


2017年1月,ST推出其第二代ToF传感器——VL53L0X,一经推出,就有6家来自亚太地区的手机制造商宣布采用这款传感器芯片。相较于VL6180,VL53L0省去了环境光传感器,而其SPAD模组也加以了改善。而在iphone 7,包括后来的iPhone X中,ST将VCSEL接合在ToF芯片顶端,进一步实现了更精巧的模块。


5年来,ST已经陆续推出了VL6180X、VL53L0)、VL53L1、VL53L3、VL53L5四代FlightSense产品。其中VL53L5是ST第四代产品,将于今年正式推出。与普通ToF产品25-27度的视场角(FOV)不同,VL53L5的FOV最大能够达到61度,由此带来的好处一是覆盖范围更广,更适合大家电、大屏幕产品使用;二是客户可根据自己的需求,通过算法缩小、中间变化等方式对FOV角度进行编程,弹性更大。


ADI也是国内被选择最多的ToF芯片商之一。其CCD ToF 前端芯片ADDI903x系列产品可支持CCD红外光ToF传感器,分辨率达 640x480。ADDI903x可将影像信号转换为数字信号,并提供高精确度的脉波时间控制器,闭回路设计,让激光二极管控制的脉波宽度更准确,进而可以得到更精准的深度数据。


ADI公司CCD ToF前端芯片ADDI903x提供的功能


以传感器和前端芯片ADDI903x 为核心的ToF技术方案,拥有超高帧率和实时性,相比3D激光传感器的逐点扫描,能快速而又准确的获取整体图像的深度信息。在其它3D技术中,距离的计算要通过复杂算法进行,而ToF图像传感器芯片可直接测量到对象的距离。另外,该方案在户外性能方面非常出色,可支持940 nm光源,并且每个像素都有独特的背景照明抑制电路。即使有两倍的照明峰值功率,该方案也能提供未被干扰的深度数据。


VIVO与ADI合作开发的ToF 3D超感应技术vivo NEX系列手机就是一个很好的代表,ToF 3D立体摄像头的加入大大提升了手机支付的安全性,更丰富的美颜功能以及其他便利功能。通过ToF红外景深镜头,能更准确地识别用户面部巨大数量的立体特征,不仅可以实现解锁,更能实现“刷脸”支付;通过 3D 面部建模的方式,实现3D级别的捏脸效果,能细致的调整脸型;ToF相机支持3D测量仪功能,该功能可以测量物体尺寸,为用户日常使用提供更多便利。


TI 第二代3D ToF方案—Tintin双芯片则由传感器芯片OPT8241(包含模拟前端)和控制处理器芯片OPT9221组成,典型应用包括机器人避障和自动导航、三维扫描、安全监控、人数统计、VR人机互动等等。其中,OPT8241是分辨率为QVGA 320x240的光传感器,控制光源发射和反射光接受和处理;OPT9221是ToF控制器,负责整个系统时序和控制,并把原始数字相位信息处理并输出景深数据。



Tintin套片解决方案


消费与专业市场的 “双轮驱动” 效应

从技术层面来说,ToF技术在消费电子(虚拟现实、人脸识别、体感交互)等应用上面临的性能挑战难度通常要更小一些,关注重点主要集中在低成本、低功耗和小尺寸等方面,对于测量速度、寿命和分辨率等方面的要求并不强烈。但对于汽车(辅助驾驶、人脸识别、手势识别)、工业级自动化(自动避障、测量测距、感知定位)、医疗电子(增强现实、远程交互)、新零售(手势识别、客流统计、行为识别)、智能安防(人脸识别、行为分析)等专业级场景来说,ToF传感系统的设计不仅需要在精度、范围、响应时间、分辨率、成本、功耗、封装之间取得平衡,还需要针对不同情况中出现的各种不可控因素、传感系统的灵活性与抗干扰性等方面进行定制化的冗余设计,比如添加一些高可靠性的滤波和抗干扰器件/模块,并加载相关的软件算法,从而保证系统有足够的能力去应对不同类型的突发状况。


以汽车应用为例,目前市场上的倒车雷达只能感应是否有障碍物,但一些“身材”矮小的障碍物就达不到感应范围的要求。如果采用ToF技术,倒车系统就可以同时侦测多个不同距离的行人或障碍物,当有行人或者障碍物靠近时,就算是视线死角车顶的树枝,透过软件处理后,也能以影像或声音警示距离,以帮助驾驶人员了解车后相关路况。


在智能建筑领域,以具备人脸识别的ToF 3D立体影像自动门解决方案为例,传统自动门采用红外线反射原理,只能检测到是否有物体出现在感测范围,导致动物也能自由进出商场,造成了管理上的困扰。基于ToF的方案则可识别空间中的人类特征以及人与物体相对位置距离,避免非人类进入商场。此外,商业空间的3D人流自动统计过去有成熟方案,但如何有效利用影像技术,以最低的成本精准分辨进出者的身高、体重、出入时间和低于1%的高度误差,就有相当的技术门槛了。


除了完成物体的3D深度拍照外,ToF技术在工业领域还能为机器人带来视觉效应,使之能像人类一样具有方向感。但如果用激光雷达来解决机器人自主避障问题,成本需要增加数万元;用双摄像头方案,需要大量的运算和双摄像头精准位置的调教。 


结语

作为一种新型的视觉传感技术,无论是针对消费级还是专业级应用领域,当前仍需解决的基础性问题还很多,未来如何通过技术手段去真正实现成本、功耗、体积、速度、寿命、稳定性以及抗干扰能力等多方面的平衡,达到一个相对目前来说更为优化的水平,进而实现ToF视觉传感技术实际应用中可靠性的成倍提升,是技术方案提供商们应当考虑的重点,也是ToF技术普及乃至整个市场健康发展的前提。


特色产品



ST VL53L1

ADI ADDI903x









长按二维码关注艾睿电子,得88折优惠码

在线采购 | 本地客服 | 海量库存




人民币交易:www.arrow.cn
美金交易:www.arrow.com

Arrow.cn客户服务电话:400-920-1555

Arrow.com客户服务电话:400-920-0628


EDN电子技术设计 EDN China电子技术设计为电子设计工程师和设计经理人提供前沿深度的电子资讯、设计实例应用方案。
评论
  • 概述 说明(三)探讨的是比较器一般带有滞回(Hysteresis)功能,为了解决输入信号转换速率不够的问题。前文还提到,即便使能滞回(Hysteresis)功能,还是无法解决SiPM读出测试系统需要解决的问题。本文在说明(三)的基础上,继续探讨为SiPM读出测试系统寻求合适的模拟脉冲检出方案。前四代SiPM使用的高速比较器指标缺陷 由于前端模拟信号属于典型的指数脉冲,所以下降沿转换速率(Slew Rate)过慢,导致比较器检出出现不必要的问题。尽管比较器可以使能滞回(Hysteresis)模块功
    coyoo 2024-12-03 12:20 108浏览
  • 戴上XR眼镜去“追龙”是种什么体验?2024年11月30日,由上海自然博物馆(上海科技馆分馆)与三湘印象联合出品、三湘印象旗下观印象艺术发展有限公司(下简称“观印象”)承制的《又见恐龙》XR嘉年华在上海自然博物馆重磅开幕。该体验项目将于12月1日正式对公众开放,持续至2025年3月30日。双向奔赴,恐龙IP撞上元宇宙不久前,上海市经济和信息化委员会等部门联合印发了《上海市超高清视听产业发展行动方案》,特别提到“支持博物馆、主题乐园等场所推动超高清视听技术应用,丰富线下文旅消费体验”。作为上海自然
    电子与消费 2024-11-30 22:03 98浏览
  • 最近几年,新能源汽车愈发受到消费者的青睐,其销量也是一路走高。据中汽协公布的数据显示,2024年10月,新能源汽车产销分别完成146.3万辆和143万辆,同比分别增长48%和49.6%。而结合各家新能源车企所公布的销量数据来看,比亚迪再度夺得了销冠宝座,其10月新能源汽车销量达到了502657辆,同比增长66.53%。众所周知,比亚迪是新能源汽车领域的重要参与者,其一举一动向来为外界所关注。日前,比亚迪汽车旗下品牌方程豹汽车推出了新车方程豹豹8,该款车型一上市就迅速吸引了消费者的目光,成为SUV
    刘旷 2024-12-02 09:32 119浏览
  • 11-29学习笔记11-29学习笔记习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-02 23:58 71浏览
  •         温度传感器的精度受哪些因素影响,要先看所用的温度传感器输出哪种信号,不同信号输出的温度传感器影响精度的因素也不同。        现在常用的温度传感器输出信号有以下几种:电阻信号、电流信号、电压信号、数字信号等。以输出电阻信号的温度传感器为例,还细分为正温度系数温度传感器和负温度系数温度传感器,常用的铂电阻PT100/1000温度传感器就是正温度系数,就是说随着温度的升高,输出的电阻值会增大。对于输出
    锦正茂科技 2024-12-03 11:50 106浏览
  • RDDI-DAP错误通常与调试接口相关,特别是在使用CMSIS-DAP协议进行嵌入式系统开发时。以下是一些可能的原因和解决方法: 1. 硬件连接问题:     检查调试器(如ST-Link)与目标板之间的连接是否牢固。     确保所有必要的引脚都已正确连接,没有松动或短路。 2. 电源问题:     确保目标板和调试器都有足够的电源供应。     检查电源电压是否符合目标板的规格要求。 3. 固件问题: &n
    丙丁先生 2024-12-01 17:37 100浏览
  • TOF多区传感器: ND06   ND06是一款微型多区高集成度ToF测距传感器,其支持24个区域(6 x 4)同步测距,测距范围远达5m,具有测距范围广、精度高、测距稳定等特点。适用于投影仪的无感自动对焦和梯形校正、AIoT、手势识别、智能面板和智能灯具等多种场景。                 如果用ND06进行手势识别,只需要经过三个步骤: 第一步&
    esad0 2024-12-04 11:20 50浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2024-12-02 10:40 120浏览
  • 当前,智能汽车产业迎来重大变局,随着人工智能、5G、大数据等新一代信息技术的迅猛发展,智能网联汽车正呈现强劲发展势头。11月26日,在2024紫光展锐全球合作伙伴大会汽车电子生态论坛上,紫光展锐与上汽海外出行联合发布搭载紫光展锐A7870的上汽海外MG量产车型,并发布A7710系列UWB数字钥匙解决方案平台,可应用于数字钥匙、活体检测、脚踢雷达、自动泊车等多种智能汽车场景。 联合发布量产车型,推动汽车智能化出海紫光展锐与上汽海外出行达成战略合作,联合发布搭载紫光展锐A7870的量产车型
    紫光展锐 2024-12-03 11:38 101浏览
  • 遇到部分串口工具不支持1500000波特率,这时候就需要进行修改,本文以触觉智能RK3562开发板修改系统波特率为115200为例,介绍瑞芯微方案主板Linux修改系统串口波特率教程。温馨提示:瑞芯微方案主板/开发板串口波特率只支持115200或1500000。修改Loader打印波特率查看对应芯片的MINIALL.ini确定要修改的bin文件#查看对应芯片的MINIALL.ini cat rkbin/RKBOOT/RK3562MINIALL.ini修改uart baudrate参数修改以下目
    Industio_触觉智能 2024-12-03 11:28 84浏览
  • 作为优秀工程师的你,已身经百战、阅板无数!请先醒醒,新的项目来了,这是一个既要、又要、还要的产品需求,ARM核心板中一个处理器怎么能实现这么丰富的外围接口?踌躇之际,你偶阅此文。于是,“潘多拉”的魔盒打开了!没错,USB资源就是你打开新世界得钥匙,它能做哪些扩展呢?1.1  USB扩网口通用ARM处理器大多带两路网口,如果项目中有多路网路接口的需求,一般会选择在主板外部加交换机/路由器。当然,出于成本考虑,也可以将Switch芯片集成到ARM核心板或底板上,如KSZ9897、
    万象奥科 2024-12-03 10:24 68浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦