光谱自适应视觉传感器,轻松应对各种照明环境

MEMS 2024-08-15 00:01

在夜间、阴影或多雾等不利照明条件下的物体探测能力,可以大大提高自动驾驶汽车和移动机器人系统的可靠性。然而,目前大部分广泛采用的计算机视觉方法,在光照不佳情况下的表现往往不尽如人意。


(a)光谱自适应视觉传感器的应用场景示意图;(b)光谱自适应视觉系统的运行方案。

据麦姆斯咨询介绍,香港理工大学的研究人员开发出一种受生物启发的新型视觉传感器,它能适应所处环境的光谱特征,从而在更广泛的照明条件下成功探测物体。该研究成果已发表于Nature Electronics期刊,研究人员在论文中介绍了这种基于背靠背排列光电二极管阵列的新型传感器。

该论文第一作者Bangsen Ouyang表示:“在之前的研究中,我们提出了一种简单的传感器内光强适应方法,以提高机器视觉系统的识别精度。基于过去的研究基础,我们将这一策略从光强维度扩展到了光谱维度。”

Ouyang及其同事最近的这项研究旨在设计一种在强光干扰或烟雾环境中,相比其它传感器具有更强物体识别能力的视觉传感器。此外,这种新型传感器在收集数据时还具有最小的时间延迟,且耗电量极低。

Ouyang解释说:“我们的目标是在不依赖光学配件或复杂算法资源的情况下实现这一目标,因为光学配件或复杂算法会增加系统的体积、功耗以及延迟。我们设计的视觉传感器基于背靠背光电二极管阵列,它们由具有不同光谱灵敏度的可切换结组成。”

具体来说,其浅结由TiO2/Sb2Se3组成,而深结由Sb2Se3/Si组成。这两个结的选择可以通过外部偏置电压来控制。

选择传感器中的浅结可提高传感器对短波长光的灵敏度,而选择深结则可提高传感器对长波长光的灵敏度。因此,该传感器的独特设计使其光电二极管能够调整匹配宽带可见光谱,以及窄带近红外光谱。

“光谱适应过程需要数十微秒,与最先进高速相机的帧频(约100 kHz)相当。”Ouyang说,“这种光谱自适应能力,有效增加了场景的韦伯对比度,从而提高了传感器暴露在可见光强眩光下的特征识别精度。”

在最初的测试中,Ouyang及其同事提出的传感器内光谱适应方法取得了非常可喜的成果。在应用于自动驾驶汽车的视觉系统时,发现这种方法可以实现低延迟、低功耗的防眩光功能,而且不需要额外的光学配件或复杂的计算算法。

“我们的研究引入了一种创新的传感器内光谱适应技术。”Ouyang说,“光谱适应过程非常快,与最先进高速相机的帧频(约100 kHz)相当。这种传感器内光谱适配方法的实际意义令人兴奋,因为它无需光学配件或复杂的算法资源。”

该研究小组开发的新型传感器可以提高自主机器人的系统能力,特别是在不增加功耗的情况下,提高它们在不同照明条件下的物体识别性能。这种传感器可以集成到多种技术应用中,包括自动驾驶汽车、医疗器械、工业或制造机器人以及监控系统等。

研究人员补充说:“我们在这一领域的未来研究计划包括提高视觉传感器的响应、动态范围、速度以及其他关键性能。我们还热衷于在视觉传感器中探索集成其它传感功能,例如偏振和三维深度。”

研究人员接下来的研究将聚焦制造大规模视觉传感器阵列,以及相应的外围电路和软件,以为实际应用开发成熟的人工视觉芯片。

论文信息:
DOI: 10.1038/s41928-024-01208-x

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论
  • 11-29学习笔记11-29学习笔记习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-02 23:58 71浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2024-12-02 10:40 120浏览
  • 遇到部分串口工具不支持1500000波特率,这时候就需要进行修改,本文以触觉智能RK3562开发板修改系统波特率为115200为例,介绍瑞芯微方案主板Linux修改系统串口波特率教程。温馨提示:瑞芯微方案主板/开发板串口波特率只支持115200或1500000。修改Loader打印波特率查看对应芯片的MINIALL.ini确定要修改的bin文件#查看对应芯片的MINIALL.ini cat rkbin/RKBOOT/RK3562MINIALL.ini修改uart baudrate参数修改以下目
    Industio_触觉智能 2024-12-03 11:28 84浏览
  • RDDI-DAP错误通常与调试接口相关,特别是在使用CMSIS-DAP协议进行嵌入式系统开发时。以下是一些可能的原因和解决方法: 1. 硬件连接问题:     检查调试器(如ST-Link)与目标板之间的连接是否牢固。     确保所有必要的引脚都已正确连接,没有松动或短路。 2. 电源问题:     确保目标板和调试器都有足够的电源供应。     检查电源电压是否符合目标板的规格要求。 3. 固件问题: &n
    丙丁先生 2024-12-01 17:37 100浏览
  • 当前,智能汽车产业迎来重大变局,随着人工智能、5G、大数据等新一代信息技术的迅猛发展,智能网联汽车正呈现强劲发展势头。11月26日,在2024紫光展锐全球合作伙伴大会汽车电子生态论坛上,紫光展锐与上汽海外出行联合发布搭载紫光展锐A7870的上汽海外MG量产车型,并发布A7710系列UWB数字钥匙解决方案平台,可应用于数字钥匙、活体检测、脚踢雷达、自动泊车等多种智能汽车场景。 联合发布量产车型,推动汽车智能化出海紫光展锐与上汽海外出行达成战略合作,联合发布搭载紫光展锐A7870的量产车型
    紫光展锐 2024-12-03 11:38 101浏览
  • 概述 说明(三)探讨的是比较器一般带有滞回(Hysteresis)功能,为了解决输入信号转换速率不够的问题。前文还提到,即便使能滞回(Hysteresis)功能,还是无法解决SiPM读出测试系统需要解决的问题。本文在说明(三)的基础上,继续探讨为SiPM读出测试系统寻求合适的模拟脉冲检出方案。前四代SiPM使用的高速比较器指标缺陷 由于前端模拟信号属于典型的指数脉冲,所以下降沿转换速率(Slew Rate)过慢,导致比较器检出出现不必要的问题。尽管比较器可以使能滞回(Hysteresis)模块功
    coyoo 2024-12-03 12:20 111浏览
  • 最近几年,新能源汽车愈发受到消费者的青睐,其销量也是一路走高。据中汽协公布的数据显示,2024年10月,新能源汽车产销分别完成146.3万辆和143万辆,同比分别增长48%和49.6%。而结合各家新能源车企所公布的销量数据来看,比亚迪再度夺得了销冠宝座,其10月新能源汽车销量达到了502657辆,同比增长66.53%。众所周知,比亚迪是新能源汽车领域的重要参与者,其一举一动向来为外界所关注。日前,比亚迪汽车旗下品牌方程豹汽车推出了新车方程豹豹8,该款车型一上市就迅速吸引了消费者的目光,成为SUV
    刘旷 2024-12-02 09:32 119浏览
  • TOF多区传感器: ND06   ND06是一款微型多区高集成度ToF测距传感器,其支持24个区域(6 x 4)同步测距,测距范围远达5m,具有测距范围广、精度高、测距稳定等特点。适用于投影仪的无感自动对焦和梯形校正、AIoT、手势识别、智能面板和智能灯具等多种场景。                 如果用ND06进行手势识别,只需要经过三个步骤: 第一步&
    esad0 2024-12-04 11:20 50浏览
  •         温度传感器的精度受哪些因素影响,要先看所用的温度传感器输出哪种信号,不同信号输出的温度传感器影响精度的因素也不同。        现在常用的温度传感器输出信号有以下几种:电阻信号、电流信号、电压信号、数字信号等。以输出电阻信号的温度传感器为例,还细分为正温度系数温度传感器和负温度系数温度传感器,常用的铂电阻PT100/1000温度传感器就是正温度系数,就是说随着温度的升高,输出的电阻值会增大。对于输出
    锦正茂科技 2024-12-03 11:50 106浏览
  • 作为优秀工程师的你,已身经百战、阅板无数!请先醒醒,新的项目来了,这是一个既要、又要、还要的产品需求,ARM核心板中一个处理器怎么能实现这么丰富的外围接口?踌躇之际,你偶阅此文。于是,“潘多拉”的魔盒打开了!没错,USB资源就是你打开新世界得钥匙,它能做哪些扩展呢?1.1  USB扩网口通用ARM处理器大多带两路网口,如果项目中有多路网路接口的需求,一般会选择在主板外部加交换机/路由器。当然,出于成本考虑,也可以将Switch芯片集成到ARM核心板或底板上,如KSZ9897、
    万象奥科 2024-12-03 10:24 68浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦