电动车纷纷走向传感器融合,图像传感器依然是yyds

安森美 2021-10-12 19:00

点击蓝字 关注我们


当前的自动驾驶和辅助驾驶系统中,激光雷达和毫米波雷达等传感器已经屡见不鲜,但图像传感器主攻的摄像头视觉系统依然未被任何一家车厂抛弃。反观特斯拉,更是一直坚持纯视觉方案。那么图像传感器究竟有何优势,又是如何解决自动驾驶带来的挑战的?


不同位置的汽车图像传感器


车身上不同位置的图像传感器


单从传感器数量上来看,图像传感器无疑是ADAS和AD应用中用在车身上最多的传感器,遍布车身各个位置。但在像素、动态范围等参数上,这些图像传感器往往不会统一,那么它们的位置是如何决定其配置的呢?


安森美(onsemi)中国汽车市场现场应用经理陈力答道,远距离摄像头例如前视/后视,要求高灵敏度,高动态范围,抑制LED闪烁和高像素数,以满足长距离小障碍物探测需要,目前常用8百万像素;而近距离摄像头例如环视,要求高灵敏度,中等动态范围和中等像素数,主要探测车身周围的场景,目前常用到2~3百万像素;如果是抓拍高速运动场景的摄像头,则需要考虑采用全局快门图像传感器。


安森美中国汽车市场现场应用经理陈力


除了车外用于ADAS和AD的图像传感器外,用于环视和监控的传统摄像头应用也要用到图像传感器,但它们的参数需求同样存在差异。环视摄像头为人眼视觉+低速应用,ADAS是机器视觉+高速应用。后者强调传感器的功能安全,低照性能,动态范围,空间解析力和抗LED闪烁功能要求。

车内监控也分驾驶员监控(DMS)和乘客监控(OMS),出于安全考虑,欧盟和中国均出台了相关政策,强制要求部分商用车型中装配DMS系统。OMS系统虽然面世不算久,但在安全带检测、车内乘客滞留提醒等应用上同样起到至关重要的作用。这两大车内监控系统中,DMS侧重于机器视觉,需要时刻关注驾驶员的状态,因此往往用到黑白的全局快门图像传感器。而OMS则侧重于记录功能,可用彩色或RGB-IR的滚动快门传感器。


LED闪烁问题如何抑制


汽车图像传感器最常见的挑战之一就是LED闪烁抑制(LFM),就像人眼对于LED屏幕的闪烁的感知一样,如今的手机常常用到DC调光和PWM的方案。而汽车图像传感器就像是车上的眼睛,对车外的LED光线同样会有所感应,那么汽车图像传感器又是如何解决LFM问题,改变车灯的频率有没有可能改善LED闪烁呢?


有无LFM的对比


陈力给出了这一问题的解释:采用DC调光方式的LED没有闪烁的问题,此时LED一直常亮,仅通过调幅来调节亮度,整个过程中灯并没有熄灭的状态;而另外一种更常见的LED灯是PWM调频驱动方式,即以一种一明一暗的光脉冲方式在照明,脉冲闪烁频率从几十到几百赫兹都有可能,这种闪烁是照明场景客观存在的现象,虽然人眼通常看不到,但能被图像传感器所感知。从某种角度来说,图像传感器输出的结果更客观真实,而眼睛反倒欺骗了你。


光脉冲的闪烁频率取决于PWM频率,其亮度取决于占空比,不同LED灯通常频率也不同。抑制LED闪烁常见的方法是增大曝光时间,曝光时间越长,每行像素能抓到更多光脉冲,从而削弱了闪烁的强度,但曝光时间越长,带来的运动模糊也越明显。同理,增加LED灯的频率也可以减小LED闪烁,但LED灯频率往往不可控,实际场景中,LED闪烁不仅仅出现在车灯上,环境中的LED照明都存在类似闪烁,例如信号灯,广告灯等等。


高动态范围(HDR)和超级曝光


动态范围在汽车图像传感器上有着非常高的要求,真实世界场景下的动态范围极端情况下可以达到140 dB,所以这类产品往往都要做到120 dB以上,目前传统HDR采用的多重曝光合并方式会产生高速运动伪影的现象,这对ADAS应用中的算法提出了一定要求。


超级曝光像素与大小像素的对比


为了解决同时做到LFM和HDR又能保证成像质量的挑战,安森美的Hayabusa系列汽车图像传感器采用了超级曝光像素的技术。通过扩展像素容量,可以做到长时间曝光捕捉脉冲光而不会过饱和,并将动态范围扩展至线性像素容量的5倍。Hayabusa只需单次曝光就能在兼顾LFM的情况下实现95 dB的动态范围。


陈力提到,在多次曝光合并技术基础上,传统像素需要3次曝光来实现120 dB的动态范围,而Hayabusa只需要两次曝光合并就可以实现120 dB的动态范围,大大改善了运动伪影问题。与大小像素技术相比,超级曝光没有两种像素结构带来的巨大的光学设计挑战,即边缘像素性能急剧恶化和严重的像素间串扰,也不会因为校准和去噪而导致细节与分辨率的损失。


结语


面对其他高性能传感器的竞争,图像传感器凭借其成本、大小等优势依然牢牢占据着汽车市场。这一视觉方案凭借LFM和HDR等特性,以及超级曝光等技术的创新,依然在其弱项上进行突破,适配更多的驾驶场景。


点击阅读原文,了解更多

安森美 安森美(onsemi, 纳斯达克股票代码:ON)专注于汽车和工业终端市场,包括汽车功能电子化和安全、可持续能源网、工业自动化以及5G和云基础设施等。以高度差异化的创新产品组合,创造智能电源和感知技术,解决最复杂的挑战,帮助建设更美好的未来。
评论
  • 戴上XR眼镜去“追龙”是种什么体验?2024年11月30日,由上海自然博物馆(上海科技馆分馆)与三湘印象联合出品、三湘印象旗下观印象艺术发展有限公司(下简称“观印象”)承制的《又见恐龙》XR嘉年华在上海自然博物馆重磅开幕。该体验项目将于12月1日正式对公众开放,持续至2025年3月30日。双向奔赴,恐龙IP撞上元宇宙不久前,上海市经济和信息化委员会等部门联合印发了《上海市超高清视听产业发展行动方案》,特别提到“支持博物馆、主题乐园等场所推动超高清视听技术应用,丰富线下文旅消费体验”。作为上海自然
    电子与消费 2024-11-30 22:03 86浏览
  • 遇到部分串口工具不支持1500000波特率,这时候就需要进行修改,本文以触觉智能RK3562开发板修改系统波特率为115200为例,介绍瑞芯微方案主板Linux修改系统串口波特率教程。温馨提示:瑞芯微方案主板/开发板串口波特率只支持115200或1500000。修改Loader打印波特率查看对应芯片的MINIALL.ini确定要修改的bin文件#查看对应芯片的MINIALL.ini cat rkbin/RKBOOT/RK3562MINIALL.ini修改uart baudrate参数修改以下目
    Industio_触觉智能 2024-12-03 11:28 45浏览
  • 作为优秀工程师的你,已身经百战、阅板无数!请先醒醒,新的项目来了,这是一个既要、又要、还要的产品需求,ARM核心板中一个处理器怎么能实现这么丰富的外围接口?踌躇之际,你偶阅此文。于是,“潘多拉”的魔盒打开了!没错,USB资源就是你打开新世界得钥匙,它能做哪些扩展呢?1.1  USB扩网口通用ARM处理器大多带两路网口,如果项目中有多路网路接口的需求,一般会选择在主板外部加交换机/路由器。当然,出于成本考虑,也可以将Switch芯片集成到ARM核心板或底板上,如KSZ9897、
    万象奥科 2024-12-03 10:24 41浏览
  • 《高速PCB设计经验规则应用实践》+PCB绘制学习与验证读书首先看目录,我感兴趣的是这一节;作者在书中列举了一条经典规则,然后进行详细分析,通过公式推导图表列举说明了传统的这一规则是受到电容加工特点影响的,在使用了MLCC陶瓷电容后这一条规则已经不再实用了。图书还列举了高速PCB设计需要的专业工具和仿真软件,当然由于篇幅所限,只是介绍了一点点设计步骤;我最感兴趣的部分还是元件布局的经验规则,在这里列举如下:在这里,演示一下,我根据书本知识进行电机驱动的布局:这也算知行合一吧。对于布局书中有一句:
    wuyu2009 2024-11-30 20:30 106浏览
  • RDDI-DAP错误通常与调试接口相关,特别是在使用CMSIS-DAP协议进行嵌入式系统开发时。以下是一些可能的原因和解决方法: 1. 硬件连接问题:     检查调试器(如ST-Link)与目标板之间的连接是否牢固。     确保所有必要的引脚都已正确连接,没有松动或短路。 2. 电源问题:     确保目标板和调试器都有足够的电源供应。     检查电源电压是否符合目标板的规格要求。 3. 固件问题: &n
    丙丁先生 2024-12-01 17:37 86浏览
  •         温度传感器的精度受哪些因素影响,要先看所用的温度传感器输出哪种信号,不同信号输出的温度传感器影响精度的因素也不同。        现在常用的温度传感器输出信号有以下几种:电阻信号、电流信号、电压信号、数字信号等。以输出电阻信号的温度传感器为例,还细分为正温度系数温度传感器和负温度系数温度传感器,常用的铂电阻PT100/1000温度传感器就是正温度系数,就是说随着温度的升高,输出的电阻值会增大。对于输出
    锦正茂科技 2024-12-03 11:50 70浏览
  • 艾迈斯欧司朗全新“样片申请”小程序,逾160种LED、传感器、多芯片组合等产品样片一触即达。轻松3步完成申请,境内免费包邮到家!本期热荐性能显著提升的OSLON® Optimal,GF CSSRML.24ams OSRAM 基于最新芯片技术推出全新LED产品OSLON® Optimal系列,实现了显著的性能升级。该系列提供五种不同颜色的光源选项,包括Hyper Red(660 nm,PDN)、Red(640 nm)、Deep Blue(450 nm,PDN)、Far Red(730 nm)及Ho
    艾迈斯欧司朗 2024-11-29 16:55 171浏览
  • 当前,智能汽车产业迎来重大变局,随着人工智能、5G、大数据等新一代信息技术的迅猛发展,智能网联汽车正呈现强劲发展势头。11月26日,在2024紫光展锐全球合作伙伴大会汽车电子生态论坛上,紫光展锐与上汽海外出行联合发布搭载紫光展锐A7870的上汽海外MG量产车型,并发布A7710系列UWB数字钥匙解决方案平台,可应用于数字钥匙、活体检测、脚踢雷达、自动泊车等多种智能汽车场景。 联合发布量产车型,推动汽车智能化出海紫光展锐与上汽海外出行达成战略合作,联合发布搭载紫光展锐A7870的量产车型
    紫光展锐 2024-12-03 11:38 68浏览
  • 最近几年,新能源汽车愈发受到消费者的青睐,其销量也是一路走高。据中汽协公布的数据显示,2024年10月,新能源汽车产销分别完成146.3万辆和143万辆,同比分别增长48%和49.6%。而结合各家新能源车企所公布的销量数据来看,比亚迪再度夺得了销冠宝座,其10月新能源汽车销量达到了502657辆,同比增长66.53%。众所周知,比亚迪是新能源汽车领域的重要参与者,其一举一动向来为外界所关注。日前,比亚迪汽车旗下品牌方程豹汽车推出了新车方程豹豹8,该款车型一上市就迅速吸引了消费者的目光,成为SUV
    刘旷 2024-12-02 09:32 101浏览
  • 学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&
    youyeye 2024-11-30 14:30 73浏览
  • 11-29学习笔记11-29学习笔记习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-02 23:58 52浏览
  • 概述 说明(三)探讨的是比较器一般带有滞回(Hysteresis)功能,为了解决输入信号转换速率不够的问题。前文还提到,即便使能滞回(Hysteresis)功能,还是无法解决SiPM读出测试系统需要解决的问题。本文在说明(三)的基础上,继续探讨为SiPM读出测试系统寻求合适的模拟脉冲检出方案。前四代SiPM使用的高速比较器指标缺陷 由于前端模拟信号属于典型的指数脉冲,所以下降沿转换速率(Slew Rate)过慢,导致比较器检出出现不必要的问题。尽管比较器可以使能滞回(Hysteresis)模块功
    coyoo 2024-12-03 12:20 71浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2024-12-02 10:40 105浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦