基于高光谱成像和边缘人工智能的相似昆虫物种快速准确鉴别

MEMS 2024-10-03 07:01

昆虫物种分类是生物多样性研究中的关键环节。传统分类方法多依赖于生态学家的主观经验或大型生化分析设备,难以取得准确性与实时性的两者兼顾。近年来,结合人工智能(AI)的计算机视觉成为物种分类任务的新质选择,但在处理外观相似的昆虫物种时,依然存在准确度不高的问题。高光谱成像技术能够同时获取目标的几何形态和光谱信息,已被广泛应用于科学研究和工业生产的众多领域。通过与边缘端的轻量级人工智能算法相结合,高光谱成像有望实现准确且实时的野外昆虫物种分类。

据麦姆斯咨询报道,近日,同济大学精密光学工程技术研究所和华东师范大学的联合科研团队在Royal Society Open Science期刊上发表了以“Rapid species discrimination of similar insects using hyperspectral imaging and lightweight edge artificial intelligence”为题的研究论文,报道了一种结合高光谱成像技术与边缘AI算法的相似昆虫物种鉴别方法。研究人员通过可见光-近红外高光谱相机和部署在神经网络芯片(NPU)上的轻量深度学习模型,成功区分了六种高度相似的青凤蝶属(Graphium)蝴蝶。与基于传统视觉信息的形态识别方法相比,基于光谱特征的轻量级网络在实现了更高精度的同时,降低了算法复杂性。该方法为昆虫物种的快速准确鉴别提供了新的思路,并为集成光谱微结构和AI芯片的便携式野外应用设备研发奠定了研究基础。该论文第一作者为同济大学的王绪泉和马志远,通讯作者为同济大学王绪泉副研究员和顿雄特聘研究员。

实验材料与设备

研究人员准备了极其相似的六种青凤蝶属物种,包括青凤蝶(G. Sarpedon)、蓝带青凤蝶(G. Milon)、木兰青凤蝶(G. Doson)、碎斑青凤蝶(G. Chironides)、银钩青凤蝶(G. Eurypylus)和条纹青凤蝶(G. Meyeri),如图1所示,样本总数为140个,均采用标准方法制作,包括软化、固定、拉伸和干燥,样品边界形状、光斑分布和颜色具有高度相似性。


图1 六种青凤蝶属相似物种样本

这项研究中使用的高光谱成像系统由三部分组成,如图2所示:安装在三脚架上的可见光-近红外便携式高光谱相机、两个卤素灯组成的专用照明系统和数据采集软件。为了最大限度地减少光漫反射干扰,将蝴蝶和标准白板平放在低反射率的黑色背景上,调整合适焦距和曝光时间获得样品的清晰光谱图像。


图2 高光谱数据采集系统示意图和实验图

实验获得的原始高光谱三维数据立方体如图3(a)所示,此处以青凤蝶(G. Sarpedon)为例,研究人员进一步研究了不同翅膀区域的光谱差异,如图3(c)所示,可知青凤蝶不同位置的光谱特性差异明显,相比底色区域,在斑点位置有更丰富的光谱信息。


图3 (a)高光谱数据立方体,(b)青凤蝶属蝴蝶翅室,(c)不同特征区域典型光谱

模型轻量化手段

模型轻量化方法的核心在于减小高光谱图像中空间和光谱维度的数据冗余,其中空间冗余来自样本的不相关和非特征区域,光谱冗余来自相邻光谱通道之间的相关性和物种的非特征光谱波段。因此,研究首先基于特定物种的感兴趣区域(ROI)和感兴趣波段(BOI)简化光谱图像数据立方体,并进一步结合网络压缩和量化实现了片上判别模型的轻量化。


图4 分析模型的轻量化手段

分析结果

采用图5(a)所示的一维CNN(1D-CNN-12)网络分别对全谱段光谱和特征光谱进行了训练和测试,六个物种识别结果的混淆矩阵为图5(b)和5(c)所示,波段选择后的模型基于更少的信息和参数量实现了相当的识别效果。为了对比所提出方法与传统计算机视觉的识别效果,研究人员使用Resnet-18和VGG-11模型对同步采集的样本RGB图像进行了测试,结果分别如图5(d)和5(e)所示。整体实验表明,基于高光谱特征的轻量级网络实现了约92.36%的识别准确率,优于传统机器视觉的纯形态识别精度,在外观极度相似的物种之间鉴别效果提升尤为明显。研究人员进一步验证了该方法在野外物种鉴定中的可行性,轻量化后的模型在RK3588芯片上的推理速度小于1毫秒,实现了准确性和实时性的两者兼顾。该方法为生物多样性研究中的野外物种鉴别提供了新的研究思路,为后续集成光谱微结构和AI芯片的便携式设备研发奠定了研究基础。


图5 建模和物种鉴别结果

该研究获得了国家自然科学基金和上海市科技重大专项的资助和支持。

论文链接:
https://doi.org/10.1098/rsos.240485

延伸阅读:
《光谱成像市场和趋势-2022版》 
《新兴图像传感器技术及市场-2024版》
《小型、微型和芯片级光谱仪技术及市场-2020版》

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论 (0)
  • 一、‌基础原理验证与分析‌1、‌理解霍尔效应基本机制‌通过实验观察磁场中导体或半导体材料的电荷偏转现象,验证霍尔电压与磁场强度、电流方向的关系,直观认识洛伦兹力对载流子的作用‌。2、‌探索磁电效应关联性‌研究霍尔效应与材料电学特性(如载流子类型、浓度)的关联,揭示半导体材料的导电机制(如N型/P型半导体)。二、‌参数测量与标定‌1、‌关键物理量测量‌掌握霍尔元件灵敏度(KH)、霍尔系数(RH)、电导率(σ)及载流子迁移率(μ)的测量方法,为半导体材料性能评估提供数据支持。2、‌磁场强度与分布测定
    锦正茂科技 2025-04-21 13:03 24浏览
  •   有效数据智能分拣系统平台深度解析   一、系统概述   北京华盛恒辉有效数据智能分拣系统平台融合人工智能、机器视觉、物联网及大数据分析技术,为物流包裹、数据信息等提供高效精准的智能化分拣处理方案。通过自动化设备与智能算法协同运作,取代传统人工分拣模式,显著提升分拣效率、降低错误率,满足电商、快递及供应链不断增长的业务需求。   应用案例   目前,已有多个有效数据智能分拣系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润有效数据智能分拣系统。这些成功案例为有效数据智能分
    华盛恒辉l58ll334744 2025-04-21 16:22 39浏览
  • 导读在汽车测试和现代工业领域,功耗控制与效率优化是工程师们不断追求的目标。虹科PCAN Router系列设备以其卓越的性能和灵活性,为CAN/CAN FD网络中的报文转换提供了高效解决方案。本文将探讨虹科PCAN Router系列设备如何在保持高效工作的同时,通过低功耗模式和高效唤醒功能,满足对能耗有严格要求的应用场景。虹科PCAN Router系列网关1 低功耗模式的优势与实现在实际的工作场景中,可能会出现一些对功耗要求存在限制的情况。鉴于此,可以灵活设置虹科PCAN Router系
    虹科汽车智能互联 2025-04-21 15:45 28浏览
  •   电磁信号模拟平台解析   北京华盛恒辉电磁信号模拟平台作为模拟复杂电磁环境的系统,在无线通信、电子对抗等多领域广泛应用。以下从功能、技术特性、应用场景及发展趋势展开详细解读。   应用案例   目前,已有多个电磁信号模拟平台在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润电磁信号模拟平台。这些成功案例为电磁信号模拟平台的推广和应用提供了有力支持。   一、核心功能   复杂电磁环境建模:构建贴近真实的电磁环境,涵盖各类干扰因素。   多通道信号模拟:模拟多通道电磁信号
    华盛恒辉l58ll334744 2025-04-21 15:10 45浏览
  •  霍尔效应自发现以来,已渗透至多个行业领域,其核心应用可归纳为以下几类:一、‌电子与半导体行业‌1、‌半导体器件开发与测试‌① 通过测量霍尔系数和电阻率,判断器件的导电类型(N型/P型)及载流子浓度分布,优化器件设计和制造工艺‌。② 监控晶圆掺杂水平和表面缺陷,提高集成电路良率‌。2、‌磁场传感器制造与校准‌测试霍尔传感器的灵敏度、线性度、响应时间等参数,确保其在汽车、工业控制等场景下的可靠性‌。3、‌电磁测量仪器‌基于霍尔电压与磁场强度的线性关系,开发高斯计、电流表、功率计等‌。二、
    锦正茂科技 2025-04-21 13:17 29浏览
  •   海上安全事件应急处置系统解析   北京华盛恒辉海上安全事件应急处置系统是为应对船舶碰撞、火灾等海上突发事件打造的综合管理体系,通过技术与协同机制,实现快速响应救援、优化资源配置,守护海上生命、财产与环境安全。以下从系统构成、功能、技术、应用及趋势展开阐述。   应用案例   目前,已有多个海上安全事件应急处置系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润海上安全事件应急处置系统。这些成功案例为海上安全事件应急处置系统的推广和应用提供了有力支持。   一、系统构成
    华盛恒辉l58ll334744 2025-04-21 15:50 40浏览
  • 精益生产咨询师证/精益管理专业人员证/精益生产工程师证虽然在名称上有一些差异,但其实实际区别并不大,目前类似的证书以ILSSI-CLMP较为得到国际上的认可,当然,你不会因为有一张精益生产咨询师证,而会有人马上请你做咨询师,因为除了知识之外,你还要有充足经验、热诚、沟通能力等等,这些也是我们招聘咨询师的基本要求。那么,有没有必要取得CLMP证书呢?这主要取决于你自己对职业发展的规划和自我提升的意志。CLMP是什么?CLMP的全称是Certified Lean Management Profess
    优思学院 2025-04-21 14:29 27浏览
  • 导读Linux驱动程序领域再添新成员,PLIN驱动程序现已正式发布。这一新驱动程序为使用LIN接口的用户提供了一个便捷、高效的解决方案。本文将展示如何安装PLIN驱动程序,以及如何在Linux环境下进行基本的PLIN通信操作,确保您能够快速掌握并应用这一新工具。继我们在Linux环境下成功推出CAN/CAN FD接口驱动程序后,现在我们为LIN接口带来了同样兼容Linux的驱动程序。免费软件包中不仅包含了驱动程序本身,还提供实用工具和一份易于理解的快速入门指南。用户下载后,需要根据当前使用的Li
    虹科汽车智能互联 2025-04-21 14:56 34浏览
  • 导读在智能汽车技术发展浪潮中,车辆控制系统的智能化、网络化已成为行业发展的必然趋势。虹科PEAK智行定位车控系统,集成了尖端科技,能够实现车辆全方位监控与控制。从实时GPS定位到CAN/CAN FD信号处理,虹科方案不仅提升了车辆的智能化水平,更在安全性和效率上迈出了革命性的一步。虹科PEAK智行定位车控系统,通过CAN/CAN FD信号实现车辆的精准控制,包括加减速、转弯、倒退等动作,模拟真实车辆平台的动态表现。该系统搭载了虹科各型号设备,通过紧密协作,实时反映车辆位置、总线报文等信息,实现车
    虹科汽车智能互联 2025-04-21 16:04 34浏览
  •   有效数据智能分拣系统详解   北京华盛恒辉有效数据智能分拣系统融合人工智能、大数据分析与机器学习等前沿技术,实现海量数据自动化分类、筛选、整理及分配。凭借强大的数据处理效能,助力企业精准提取关键信息,优化决策流程,提升运营效率。以下从系统架构、核心功能、技术特性、应用场景及发展趋势展开解读。   应用案例   目前,已有多个有效数据智能分拣系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润有效数据智能分拣系统。这些成功案例为有效数据智能分拣系统的推广和应用提供了有力支持。
    华盛恒辉l58ll334744 2025-04-21 16:46 21浏览
  •   海上安全事件应急处置系统平台深度解析   一、平台概述   北京华盛恒辉海上安全事件应急处置系统平台融合现代信息技术、通信技术、GIS、大数据分析及 AI 等技术,旨在快速响应船舶碰撞、火灾、溢油等海上突发事件,实现科学决策与高效资源调配,保障海上生命财产安全、减少环境污染。   应用案例   目前,已有多个海上安全事件应急处置系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润海上安全事件应急处置系统。这些成功案例为海上安全事件应急处置系统的推广和应用提供了有力支持
    华盛恒辉l58ll334744 2025-04-21 15:21 49浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦