可重构神经形态视觉传感器,可用于运动目标监测

MEMS 2025-01-14 00:01

来源:深科技

近日,香港理工大学郝建华教授团队将铁电与二维材料进行融合,设计出新型的可重构神经形态视觉传感器来实现对运动目标的监测。

图 | 郝建华

铁电门的特性源于双向完全极化的状态之间,存在多个中间级别,使其能够灵活调节。这种特性有助于精确控制原子超薄二维材料的掺杂程度和电子输运行为。

这种方法增强了对神经形态突出权重的准确编程的灵活性和可调性,能够实现优异的线性度和多态下均匀的步长变化,从而抵消难以控制的方法和不可预测的波动限制。

并且,基于铁电与二维材料的可重构神经形态视觉传感器具有可连续逐渐调节的正负光电导,因此可以成功模拟视网膜中信号接收感知、转换传导、信息处理和修改的过程。

运动目标的检测与识别已成为智能场景中的核心需求,如智能家居、人工视觉、安全监控、无人驾驶汽车和军事防御。

铁电材料是一种非中心对称晶体材料,由于形成稳定的电偶极子而表现出非易失可调节的电极化的能力,其优异的特性可以用作存储单元。

未来结合大规模材料生长和器件制备手段,有望代替基于互补金属氧化物半导体的图像传感器平台。

(来源:ACS Nano

谈及开展本次研究的原因,该团队表示传统的基于每一帧的图像传感器,以固定的帧率传递绝对光强度,忽视了被探测主题的主要变化,因此生成大量冗余的视觉数据并且传递的有效信息有限。

受生物视网膜的启发,神经节细胞对不同的运动表现出选择性响应,所以可以基于事件驱动,仅响应场景中的相关变化。

传统的图像传感器芯片在不同模块之间需要大量额外的块和复杂的数据转换、传输、存储和处理操作,与智能应用所追求的便携性和高效率的目标相悖。

此外他们还发现,在推断和学习神经形态应用的背景下,具有高准确性和能量效率的神经网络发挥着至关重要的作用。

具有多态可区分和高线性突触权重更新影响了视觉传感器系统的均一性和准确性的表现。同时,提高整体能量效率并建立自供电系统对于视觉传感器至关重要。

基于此,他们定下本次课题并根据要实现的性能和特征,确定基本的器件结构,进行一系列的表征和测试。

在时域算法的实现部分,他们与香港理工大学同在应用物理系的柴扬教授课题组合作。

感存算一体架构由于运动目标的驱动特性,在光照强度变化时触发并输出信息,避免了静态背景导致的冗余信息,因此适合用于处理动态场景任务。

再结合时域算法,他们发现每读取一个图片的像素值阵列,铁电器件的正负响应的范围会生成两个新的像素值阵列,根据时间顺序进行叠加,便可以突出运动的事件。

与此同时,生物视觉系统可以在复杂环境中高效地感知运动。这种自然特征带动了高效硬件资源的设计以及机器视觉系统的推进。

而用于动作识别的传统机器视觉系统通常涉及复杂的人工神经网络,因此近几年来他们也逐渐进入神经形态器件和人工视觉领域。

本次研究中,他们探讨了重要一个问题:即是否可以利用传感器感知动态运动,并且将感知存储和信息的处理集合在同一个器件单元中?基于这一讨论,他们在本次研究中结合铁电的非易失性和多级中间态以及二维材料易受外场控制的特性,借助人工神经网络识别出了运动目标的特征。

受到人类视网膜的运动感知启发,这项研究在机器视觉系统中以智能方式显著提高了对于静态信息和动态信息的区分和处理。

至此,研究正式完成。日前,相关论文以《基于铁电调制的可重构神经形态视觉传感器实现目标运动检测》(Object Motion Detection Enabled by Reconfigurable Neuromorphic Vision Sensor under Ferroelectric Modulation)为题发在 ACS Nano,党兆盈是第一作者,香港理工大学郝建华教授担任通讯作者。

图 | 相关论文(来源:ACS Nano

研究人员表示,利用他们之前研究中使用的仿生视觉传感器为基础,他们成功模拟了类似于生物视觉系统中发现的一系列感知和预处理功能。

这些功能包括适应不同的光强度、在传感器内执行神经网络处理、检测运动和编码视觉信息。

为了促进视觉传感器的实际实施,整合多模感知变得至关重要。这突显了改进特定视觉传感器以捕捉更广泛的与光相关的数据的重要性。

延伸阅读:

《汽车红外摄像头技术及市场-2024版》

《新兴图像传感器技术及市场-2024版》

《量子点光电传感器专利态势分析-2024版》
《苹果在量子点光电传感器领域的发明专利与产业布局分析》
《光谱成像市场和趋势-2022版》
《小型、微型和芯片级光谱仪技术及市场-2020版》

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论
  • 随着全球向绿色能源转型的加速,对高效、可靠和环保元件的需求从未如此强烈。在这种背景下,国产固态继电器(SSR)在实现太阳能逆变器、风力涡轮机和储能系统等关键技术方面发挥着关键作用。本文探讨了绿色能源系统背景下中国固态继电器行业的前景,并强调了2025年的前景。 1.对绿色能源解决方案日益增长的需求绿色能源系统依靠先进的电源管理技术来最大限度地提高效率并最大限度地减少损失。固态继电器以其耐用性、快速开关速度和抗机械磨损而闻名,正日益成为传统机电继电器的首选。可再生能源(尤其是太阳能和风能
    克里雅半导体科技 2025-01-10 16:18 153浏览
  • 随着通信技术的迅速发展,现代通信设备需要更高效、可靠且紧凑的解决方案来应对日益复杂的系统。中国自主研发和制造的国产接口芯片,正逐渐成为通信设备(从5G基站到工业通信模块)中的重要基石。这些芯片凭借卓越性能、成本效益及灵活性,满足了现代通信基础设施的多样化需求。 1. 接口芯片在通信设备中的关键作用接口芯片作为数据交互的桥梁,是通信设备中不可或缺的核心组件。它们在设备内的各种子系统之间实现无缝数据传输,支持高速数据交换、协议转换和信号调节等功能。无论是5G基站中的数据处理,还是物联网网关
    克里雅半导体科技 2025-01-10 16:20 199浏览
  • 随着数字化的不断推进,LED显示屏行业对4K、8K等超高清画质的需求日益提升。与此同时,Mini及Micro LED技术的日益成熟,推动了间距小于1.2 Pitch的Mini、Micro LED显示屏的快速发展。这类显示屏不仅画质卓越,而且尺寸适中,通常在110至1000英寸之间,非常适合应用于电影院、监控中心、大型会议、以及电影拍摄等多种室内场景。鉴于室内LED显示屏与用户距离较近,因此对于噪音控制、体积小型化、冗余备份能力及电气安全性的要求尤为严格。为满足这一市场需求,开关电源技术推出了专为
    晶台光耦 2025-01-13 10:42 210浏览
  • ARMv8-A是ARM公司为满足新需求而重新设计的一个架构,是近20年来ARM架构变动最大的一次。以下是对ARMv8-A的详细介绍: 1. 背景介绍    ARM公司最初并未涉足PC市场,其产品主要针对功耗敏感的移动设备。     随着技术的发展和市场需求的变化,ARM开始扩展到企业设备、服务器等领域,这要求其架构能够支持更大的内存和更复杂的计算任务。 2. 架构特点    ARMv8-A引入了Execution State(执行状
    丙丁先生 2025-01-12 10:30 213浏览
  • 根据Global Info Research(环洋市场咨询)项目团队最新调研,预计2030年全球无人机电池和电源产值达到2834百万美元,2024-2030年期间年复合增长率CAGR为10.1%。 无人机电池是为无人机提供动力并使其飞行的关键。无人机使用的电池类型因无人机的大小和型号而异。一些常见的无人机电池类型包括锂聚合物(LiPo)电池、锂离子电池和镍氢(NiMH)电池。锂聚合物电池是最常用的无人机电池类型,因为其能量密度高、设计轻巧。这些电池以输出功率大、飞行时间长而著称。不过,它们需要
    GIRtina 2025-01-13 10:49 97浏览
  • 流量传感器是实现对燃气、废气、生活用水、污水、冷却液、石油等各种流体流量精准计量的关键手段。但随着工业自动化、数字化、智能化与低碳化进程的不断加速,采用传统机械式检测方式的流量传感器已不能满足当代流体计量行业对于测量精度、测量范围、使用寿命与维护成本等方面的精细需求。流量传感器的应用场景(部分)超声波流量传感器,是一种利用超声波技术测量流体流量的新型传感器,其主要通过发射超声波信号并接收反射回来的信号,根据超声波在流体中传播的时间、幅度或相位变化等参数,间接计算流体的流量,具有非侵入式测量、高精
    华普微HOPERF 2025-01-13 14:18 195浏览
  • 01. 什么是过程能力分析?过程能力研究利用生产过程中初始一批产品的数据,预测制造过程是否能够稳定地生产符合规格的产品。可以把它想象成一种预测。通过历史数据的分析,推断未来是否可以依赖该工艺持续生产高质量产品。客户可能会要求将过程能力研究作为生产件批准程序 (PPAP) 的一部分。这是为了确保制造过程能够持续稳定地生产合格的产品。02. 基本概念在定义制造过程时,目标是确保生产的零件符合上下规格限 (USL 和 LSL)。过程能力衡量制造过程能多大程度上稳定地生产符合规格的产品。核心概念很简单:
    优思学院 2025-01-12 15:43 231浏览
  • 新年伊始,又到了对去年做总结,对今年做展望的时刻 不知道你在2024年初立的Flag都实现了吗? 2025年对自己又有什么新的期待呢? 2024年注定是不平凡的一年, 一年里我测评了50余块开发板, 写出了很多科普文章, 从一个小小的工作室成长为科工公司。 展望2025年, 中国香河英茂科工, 会继续深耕于,具身机器人、飞行器、物联网等方面的研发, 我觉得,要向未来学习未来, 未来是什么? 是掌握在孩子们生活中的发现,和精历, 把最好的技术带给孩子,
    丙丁先生 2025-01-11 11:35 200浏览
  • PNT、GNSS、GPS均是卫星定位和导航相关领域中的常见缩写词,他们经常会被用到,且在很多情况下会被等同使用或替换使用。我们会把定位导航功能测试叫做PNT性能测试,也会叫做GNSS性能测试。我们会把定位导航终端叫做GNSS模块,也会叫做GPS模块。但是实际上他们之间是有一些重要的区别。伴随着技术发展与越发深入,我们有必要对这三个词汇做以清晰的区分。一、什么是GPS?GPS是Global Positioning System(全球定位系统)的缩写,它是美国建立的全球卫星定位导航系统,是GNSS概
    德思特测试测量 2025-01-13 15:42 174浏览
  • 在不断发展的电子元件领域,继电器——作为切换电路的关键设备,正在经历前所未有的技术变革。固态继电器(SSR)和机械继电器之间的争论由来已久。然而,从未来发展的角度来看,固态继电器正逐渐占据上风。本文将从耐用性、速度和能效三个方面,全面剖析固态继电器为何更具优势,并探讨其在行业中的应用与发展趋势。1. 耐用性:经久耐用的设计机械继电器:机械继电器依靠物理触点完成电路切换。然而,随着时间的推移,这些触点因电弧、氧化和材料老化而逐渐磨损,导致其使用寿命有限。因此,它们更适合低频或对切换耐久性要求不高的
    腾恩科技-彭工 2025-01-10 16:15 81浏览
  • 电动汽车(EV)正在改变交通运输,为传统内燃机提供更清洁、更高效的替代方案。这种转变的核心是电力电子和能源管理方面的创新,而光耦合器在其中发挥着关键作用。这些不起眼的组件可实现可靠的通信、增强安全性并优化电动汽车系统的性能,使其成为正在进行的革命中不可或缺的一部分。光耦合器,也称为光隔离器,是一种使用光传输电信号的设备。通过隔离高压和低压电路,光耦合器可确保安全性、减少干扰并保持信号完整性。这些特性对于电动汽车至关重要,因为精确控制和安全性至关重要。 光耦合器在电动汽车中的作用1.电池
    腾恩科技-彭工 2025-01-10 16:14 60浏览
  • Snyk 是一家为开发人员提供安全平台的公司,致力于协助他们构建安全的应用程序,并为安全团队提供应对数字世界挑战的工具。以下为 Snyk 如何通过 CircleCI 实现其“交付”使命的案例分析。一、Snyk 的挑战随着客户对安全工具需求的不断增长,Snyk 的开发团队面临多重挑战:加速交付的需求:Snyk 的核心目标是为开发者提供更快、更可靠的安全解决方案,但他们的现有 CI/CD 工具(TravisCI)运行缓慢,无法满足快速开发和部署的要求。扩展能力不足:随着团队规模和代码库的不断扩大,S
    艾体宝IT 2025-01-10 15:52 155浏览
  • 说到福特,就要从亨利·福特(Henry Ford)这个人物说起。在发明大王爱迪生的电气工厂担任工程师的福特下班后,总是在自家仓库里努力研究和开发汽车。1896年,福特终于成功制造出一辆三轮车,开启了福特汽车的传奇。最初几年,福特都是独自制造汽车并同时进行销售。 (今天很多人都知道的精益管理中的5S方法,或多或少地受到了福特 CANDO方法的影响。)1903年,福特从牧师、律师、银行家、会计师等十一位股东那里筹集了十万美元,并在自家庭院成立了美国第五百零三家汽车公司——福特汽车公司(Fo
    优思学院 2025-01-10 11:21 35浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦