高空间分辨率高可见度的太赫兹光谱成像研究

MEMS 2023-03-01 00:00

宽带太赫兹脉冲成像能够获得太赫兹频域光谱数据,其除了具有二维的空间信息外,还具有三维的光谱信息,利用太赫兹的光谱数据能够对物质进行识别分类,具有非常大的应用潜力。太赫兹光谱成像可分为时域信息成像和频域光谱成像,通常太赫兹光谱成像的极限分辨率体现在太赫兹频谱较高频区域光谱所成图像。由于受到系统中激发太赫兹波的飞秒激光器、斩波器、锁相器等硬件的影响,太赫兹频域中较高频段普遍存在能量低、噪声大的问题,直接导致了太赫兹较高频段的频谱成像图像模糊,噪声干扰大,影响图像的分辨率和对比度。通过优化系统硬件降低太赫兹成像中的噪声问题成本高昂,效果也很有限。因此,采用图像去噪算法解决太赫兹频谱图像的噪声污染问题,提高图像的边缘分辨率和整体质量尤为重要。

目前已知的太赫兹图像去噪方法大多采用传统图像去噪方法,并且缺乏针对太赫兹频域光谱高频区域成像的去噪方法。这类方法是基于空间域或变换域实现对太赫兹图像降噪。例如基于空间域的非局部均值滤波、中值滤波以及小波变换等基于变换域的太赫兹图像去噪算法。近年来深度学习技术的发展,越来越多的深度学习技术在图像去噪领域取得了良好的效果。基于深度学习的图像降噪技术相比于传统降噪算法能更好地将各像素点间的光谱信息相关联,进而实现在降低图像噪声和保存图像边缘细节上取得更优的效果。

据麦姆斯咨询报道,近期,天津大学精密测试技术及仪器国家重点实验室、天津大学精密仪器与光电子工程学院与的研究团队在《光谱学与光谱分析》期刊上发表了以“高空间分辨率高可见度的太赫兹光谱成像研究”为主题的文章。该文章第一作者为褚致弘,通讯作者为何明霞教授,致力于利用太赫兹光谱技术探测生物组织特性。

该文章搭建了太赫兹时域光谱成像系统,实现了对高分辨率板成像。并结合瑞利判据(Rayleigh Criterion)对成像系统的空间分辨率和景深进行标定,找到了极限分辨率和最佳成像范围。通过对采集得到的光谱数据进行多种方式成像分析,研究高空间分辨率的太赫兹光谱成像算法。最后训练出了针对太赫兹频域光谱信号中的高频区域所成图像的太赫兹深度去噪模型,实现了在保留高频边缘细节特征的基础上对图像进行降噪,并与传统太赫兹图像去噪算法的结果进行横向比较,为太赫兹频域光谱高频区域的图像降噪提供了一种新的解决方案。

实验过程

太赫兹成像系统的搭建及其景深、分辨率的标定

使用的太赫兹时域光谱成像系统由德国Menlo Systems公司生产的TeraSmart太赫兹时域光谱仪(THz-TDS)、电控二维平移台、手动一维平移台、离轴抛物面镜、分束镜、计算机等组成,成像系统实物图如图1所示。

图1 太赫兹时域光谱成像系统示意图

在进行太赫兹光谱成像实验前,首先需要对成像系统的瑞利距离(共焦参数)进行计算,并通过移动Z轴平移台对理论计算结果进行验证,找出最佳成像范围。太赫兹光谱成像系统分辨物体细节能力的重要表征指标参数就是空间分辨率,在本套太赫兹成像系统中由光导天线法产生的太赫兹波经离轴抛物面镜后会在成像中心处聚焦,但由于衍射的影响,所成的像是一个椭圆形的艾里斑,而不是理想状态下的一个“点”。因此,太赫兹光谱成像系统对物成像的艾里斑角半径决定了本系统的分辨极限,而在实际应用中,不同人对艾里斑的重叠有不同的评价,主观区分的说服力明显不足,为了科学的表征本成像系统的分辨率,需要给出一个公认的标准,瑞利判据就非常适合本套系统的分辨率表征。对于缝隙型光阑,其极限分辨率为两图样重叠区域的中点光强度约等于单个衍射图样中心光强度的81%(对于点状物光阑,约为73.5%)。

在此基础上对系统进行分辨率标定,采用了Edmund公司的USAF 1951高分辨率板分辨率测试目标板进行测定。测试卡由若干元素组成,每组元素分为三条水平线和三条竖直线组成,定义这些线的空格分隔为线宽。

实验通过调节Z轴的手动平移台, 每次步进为0.5mm进行二维扫描成像,计算出最佳成像范围景深。在最佳成像范围内得到的图像与高分辨率测试卡的查找表对比,得出系统扫描成像能分辨出的最大线对数(Frequency)和最小线宽(Line Width)。每毫米线对是成像分辨率的一种单位,表征成像系统在一毫米内能分辨出多少对线,而线宽就是每根线间的宽度,其中线对数越多、线宽越小代表成像系统的分辨率越高,线对数与线宽能够相互转换。

通过对Z轴相对距离2~11mm共19个位置进行太赫兹光谱反射式扫描成像,二维扫描平移台X轴、Y轴电机步进均为0.1mm,像素点136×161。由于空气中水分子对太赫兹信号质量的影响较大,实验环境由聚乙烯薄膜封闭,内部充干燥空气,使实验环境的空气湿度恒为10%,温度25℃。对各点时域信号进行快速傅里叶变换(FFT),获得其频域光谱数据,取各点的0~5THz范围频谱总强度值进行成像,并对每张图像中的各组条纹进行瑞利判据,对本成像系统的最佳成像景深范围进行标定。以高分辨率板的线宽表征Z轴平移台在不同位置处频域总强度成像的极限分辨率,进而得出系统最佳成像景深为2mm,如图2(a)所示。图2(b1)-(e2)分别展示的是Z轴平移台相对距离2,11,5.5和6.5mm的高分辨率板组别(0,5)的瑞利判据曲线及其对应的成像结果。

图2 太赫兹成像系统景深及分辨率标定示意图

通过瑞利判据对成像系统的景深进行标定可以得出系统对Z轴平移台的相对距离较为敏感,后续在扫描样品的时候可以根据待测样品的厚度等信息,通过调节Z轴平移台使系统达到硬件上的成像最佳状态。

太赫兹光谱成像流程

基于THz-TDS的二维扫描反射式光谱成像主要分为时域信息成像和频域光谱成像。在时域中主要有最大峰值成像、最小峰值成像、飞行时间差成像等,在频域中主要有相位差成像、频谱总强度成像、某一频点成像等。

以成像系统最佳景深范围内的Z轴相对距离6mm所扫描数据为例,分别采用时域最大峰值、频谱总强度成像、频域某特定频点成像,并对结果进行比对分析,研究太赫兹光谱成像中高空间分辨率的成像算法。

图3为太赫兹成像系统Z轴相对距离6mm时的二维扫描光谱数据及其所成图像。图3(a)所示的是高分辨率板的缝隙型光阑处太赫兹频谱曲线和背景处太赫兹频谱曲线,分别取其中较低频段处(0.89THz)和较高频段处(1.94THz)成像,所选频段均在光阑材料和背景材料的幅值有明显区分。图3(b)为太赫兹时域最大峰值成像,最高分辨率为397μm;图3(c)为频域总强度值成像,最高分辨率为315μm;图3(d)为频率为0.89THz处幅值成像,最高分辨率为397μm;图3(e)为频率为1.94THz处幅值成像,最高分辨率为157μm。利用瑞利判据应用在太赫兹波成像的空间分辨率计算式(1)进行理论值计算,以1.94THz处为例,其中λ≈154.5μm(f为1.94THz),l(反射焦距)=50.8mm,D(离轴抛物面镜直径)=50.8mm,计算结果约为188.49μm;频率为0.89THz成像的理论空间分辨率为411.14μm。理论计算结果与实测结果基本一致。

图3 标准分辨率板的太赫兹频谱及不同方式所成图像

由上述实验结果可知,太赫兹频域光谱成像的空间分辨率整体优于太赫兹时域相关参数成像。太赫兹频域较高频段数据所成图像的空间分辨率最高,但所含噪声也很高,整体信噪比低;频域较低频段数据所成图像的整体噪声较少,但空间分辨率较低。因为随着频率升高,太赫兹波长变短,分辨率提高,而受到THz-TDS的硬件限制,如图3(a)所示信号随着频率升高会迅速衰减,最终会淹没在系统噪声中。因此,为获取高空间分辨率高可见度的太赫兹图像需采用太赫兹频域较高频段光谱数据进行成像,并需要降低图像的无用噪声。

深度卷积神经网络在太赫兹频谱成像的去噪算法研究

本文所设计的太赫兹频域图像深度去噪网络借鉴了ResNet中的残差学习的理论以及DnCNN的思想,网络拟合的是残差而不是数据本身,将模型的训练结果设置为训练集中的标准图像和经对标准图像加噪后的重建图像之间的残差图像,并创新性地引入了成像系统内真实的太赫兹高频噪声。

本文所提出的太赫兹图像深度去噪网络是在DnCNN的基础上优化改进的。网络共设计了20层,激活函数全部采用ReLU,其计算简单能节省模型的运算时间并能克服一定的梯度消失问题。其中第1层为卷积+ReLU,卷积核的大小为3×3×1,其将图像映射成为64个特征图;中间第2至19层为卷积+Bn+ReLU,批量标准化(Bn)能加速网络收敛、提高泛化能力,其中每次的卷积核个数都为64个,卷积核的大小为3×3;最后1层为卷积层,包含64个3×3大小的卷积核,网络的最终输出为噪声图像中的噪声估计。

太赫兹频谱图像去噪问题属于盲去噪,其产生噪声的原因十分复杂,从硬件上的飞秒激光器、斩波器、机械延迟线、锁相器、光路传输再到信号采集每一步都会产生噪声,因此在训练数据的过程中对数据集进行合理的加噪十分重要,直接影响着深度去噪网络对太赫兹频谱图像盲去噪的效果。本模型所采用的训练集为Train400,包含400张大小为180×180的灰度图像,将原始图像分别进行不做处理、水平翻转、上下翻转、顺时针90°旋转、顺时针180°旋转和顺时针270°旋转共6种变换,将原始数据集扩大到2400张图像,将图像以大小50×50随机裁剪并生成批量干净图像块。

测试集为所搭建的太赫兹光谱成像系统对高分辨率板进行扫描得到的宽谱数据,对该数据中频域较高频段图像进行盲去噪实验。太赫兹频域深度去噪网络的训练和测试环境基于64位Windows10操作系统,采用Python语言基于Tensorflow框架训练,实验平台采用单块GeForce RTX 2080Ti显卡为模型训练进行加速。网络的初始学习率设置为0.1,每训练10个周期学习率降低10%,共训练90个周期。

系统性能表征

模型训练完成后,采用搭建的太赫兹光谱成像系统在Z轴相对距离6mm处光谱成像数据进行测试,取频域1.94THz处太赫兹频谱数据测试。为评价网络性能,对比了四种传统的太赫兹图像去噪方法,其结果如图4(a)-(f)。

图4 1.94 THz成像经不同算法的去噪效果对比及其组别(1,3)处瑞利判据

由于本研究的去噪图像是真实的太赫兹频谱图像,没有与其对应的干净图像作为参考,因此对太赫兹频谱图像经不同去噪算法处理后的重建图像进行评价时需要引入无参考图像评价体系。无参考图像评价分为主观评价和客观评价指标,选取了瑞利判据鞍-峰比表征图像中缝隙型光阑边缘细节的噪声程度、梯度;用对比度(CON)表征图像整体的清晰度、渐变层次。表1给出的是经不同算法处理后的太赫兹频谱图像与原图的图像质量客观评价对比表,经分析可知去噪算法在边缘细节的梯度、对比度均优于传统太赫兹图像的去噪算法,能够在保留局部细节特征的基础上,去除高频噪声,降噪效果显著。

表1 不同算法对太赫兹频谱图像去噪前后的图像质量评价对比

结论

搭建了三维可移动式太赫兹时域光谱成像系统,对高分辨率板进行的太赫兹反射式成像,分别在时域、频域进行重建成像,标定了成像系统的景深。通过不同方式的太赫兹成像,研究了高空间分辨率的太赫兹成像方式,发现在太赫兹频域较高频段成像的空间分辨率最高,极限空间分辨率可达157μm,景深在2mm左右。

针对太赫兹频域较高频段的图像整体信噪比低、对比度低的特点,在基于DnCNN网络设计思想的基础上,在训练集中引入成像系统内真实的“太赫兹残差噪声”,优化网络深度,提出了太赫兹深度去噪网络。通过与传统太赫兹图像去噪算法进行对比,分别从主观和客观两个方面评价了不同算法对太赫兹图像去噪后的结果。实验结果表明,本文算法能够在保留图像边缘细节特征的基础上去除高频噪声,并提高了太赫兹图像整体的清晰度,在瑞利判据鞍-峰比和对比度的图像客观评价指标中均优于传统太赫兹去噪算法,为太赫兹频域较高频段的图像去噪提供了一种新的思路。

这项研究获得国家自然科学基金项目(61675151、12174284)和海南省科技重大专项(ZDKJ2019013)的支持。

论文信息:

DOI: 10.3964/j.issn.1000-0593(2023)02-0356-07

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论
  • 嘿,咱来聊聊RISC-V MCU技术哈。 这RISC-V MCU技术呢,简单来说就是基于一个叫RISC-V的指令集架构做出的微控制器技术。RISC-V这个啊,2010年的时候,是加州大学伯克利分校的研究团队弄出来的,目的就是想搞个新的、开放的指令集架构,能跟上现代计算的需要。到了2015年,专门成立了个RISC-V基金会,让这个架构更标准,也更好地推广开了。这几年啊,这个RISC-V的生态系统发展得可快了,好多公司和机构都加入了RISC-V International,还推出了不少RISC-V
    丙丁先生 2025-01-21 12:10 513浏览
  • 现在为止,我们已经完成了Purple Pi OH主板的串口调试和部分配件的连接,接下来,让我们趁热打铁,完成剩余配件的连接!注:配件连接前请断开主板所有供电,避免敏感电路损坏!1.1 耳机接口主板有一路OTMP 标准四节耳机座J6,具备进行音频输出及录音功能,接入耳机后声音将优先从耳机输出,如下图所示:1.21.2 相机接口MIPI CSI 接口如上图所示,支持OV5648 和OV8858 摄像头模组。接入摄像头模组后,使用系统相机软件打开相机拍照和录像,如下图所示:1.3 以太网接口主板有一路
    Industio_触觉智能 2025-01-20 11:04 194浏览
  •  万万没想到!科幻电影中的人形机器人,正在一步步走进我们人类的日常生活中来了。1月17日,乐聚将第100台全尺寸人形机器人交付北汽越野车,再次吹响了人形机器人疯狂进厂打工的号角。无独有尔,银河通用机器人作为一家成立不到两年时间的创业公司,在短短一年多时间内推出革命性的第一代产品Galbot G1,这是一款轮式、双臂、身体可折叠的人形机器人,得到了美团战投、经纬创投、IDG资本等众多投资方的认可。作为一家成立仅仅只有两年多时间的企业,智元机器人也把机器人从梦想带进了现实。2024年8月1
    刘旷 2025-01-21 11:15 633浏览
  • Ubuntu20.04默认情况下为root账号自动登录,本文介绍如何取消root账号自动登录,改为通过输入账号密码登录,使用触觉智能EVB3568鸿蒙开发板演示,搭载瑞芯微RK3568,四核A55处理器,主频2.0Ghz,1T算力NPU;支持OpenHarmony5.0及Linux、Android等操作系统,接口丰富,开发评估快人一步!添加新账号1、使用adduser命令来添加新用户,用户名以industio为例,系统会提示设置密码以及其他信息,您可以根据需要填写或跳过,命令如下:root@id
    Industio_触觉智能 2025-01-17 14:14 142浏览
  • 随着消费者对汽车驾乘体验的要求不断攀升,汽车照明系统作为确保道路安全、提升驾驶体验以及实现车辆与环境交互的重要组成,日益受到业界的高度重视。近日,2024 DVN(上海)国际汽车照明研讨会圆满落幕。作为照明与传感创新的全球领导者,艾迈斯欧司朗受邀参与主题演讲,并现场展示了其多项前沿技术。本届研讨会汇聚来自全球各地400余名汽车、照明、光源及Tier 2供应商的专业人士及专家共聚一堂。在研讨会第一环节中,艾迈斯欧司朗系统解决方案工程副总裁 Joachim Reill以深厚的专业素养,主持该环节多位
    艾迈斯欧司朗 2025-01-16 20:51 310浏览
  •     IPC-2581是基于ODB++标准、结合PCB行业特点而指定的PCB加工文件规范。    IPC-2581旨在替代CAM350格式,成为PCB加工行业的新的工业规范。    有一些免费软件,可以查看(不可修改)IPC-2581数据文件。这些软件典型用途是工艺校核。    1. Vu2581        出品:Downstream     
    电子知识打边炉 2025-01-22 11:12 119浏览
  • 高速先生成员--黄刚这不马上就要过年了嘛,高速先生就不打算给大家上难度了,整一篇简单但很实用的文章给大伙瞧瞧好了。相信这个标题一出来,尤其对于PCB设计工程师来说,心就立马凉了半截。他们辛辛苦苦进行PCB的过孔设计,高速先生居然说设计多大的过孔他们不关心!另外估计这时候就跳出很多“挑刺”的粉丝了哈,因为翻看很多以往的文章,高速先生都表达了过孔孔径对高速性能的影响是很大的哦!咋滴,今天居然说孔径不关心了?别,别急哈,听高速先生在这篇文章中娓娓道来。首先还是要对各位设计工程师的设计表示肯定,毕竟像我
    一博科技 2025-01-21 16:17 153浏览
  • 本文介绍瑞芯微开发板/主板Android配置APK默认开启性能模式方法,开启性能模式后,APK的CPU使用优先级会有所提高。触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。源码修改修改源码根目录下文件device/rockchip/rk3562/package_performance.xml并添加以下内容,注意"+"号为添加内容,"com.tencent.mm"为AP
    Industio_触觉智能 2025-01-17 14:09 195浏览
  • 2024年是很平淡的一年,能保住饭碗就是万幸了,公司业绩不好,跳槽又不敢跳,还有一个原因就是老板对我们这些员工还是很好的,碍于人情也不能在公司困难时去雪上加霜。在工作其间遇到的大问题没有,小问题还是有不少,这里就举一两个来说一下。第一个就是,先看下下面的这个封装,你能猜出它的引脚间距是多少吗?这种排线座比较常规的是0.6mm间距(即排线是0.3mm间距)的,而这个规格也是我们用得最多的,所以我们按惯性思维来看的话,就会认为这个座子就是0.6mm间距的,这样往往就不会去细看规格书了,所以这次的运气
    wuliangu 2025-01-21 00:15 300浏览
  • 80,000人到访的国际大展上,艾迈斯欧司朗有哪些亮点?感未来,光无限。近日,在慕尼黑electronica 2024现场,ams OSRAM通过多款创新DEMO展示,以及数场前瞻洞察分享,全面展示自身融合传感器、发射器及集成电路技术,精准捕捉并呈现环境信息的卓越能力。同时,ams OSRAM通过展会期间与客户、用户等行业人士,以及媒体朋友的深度交流,向业界传达其以光电技术为笔、以创新为墨,书写智能未来的深度思考。electronica 2024electronica 2024构建了一个高度国际
    艾迈斯欧司朗 2025-01-16 20:45 880浏览
  • 日前,商务部等部门办公厅印发《手机、平板、智能手表(手环)购新补贴实施方案》明确,个人消费者购买手机、平板、智能手表(手环)3类数码产品(单件销售价格不超过6000元),可享受购新补贴。每人每类可补贴1件,每件补贴比例为减去生产、流通环节及移动运营商所有优惠后最终销售价格的15%,每件最高不超过500元。目前,京东已经做好了承接手机、平板等数码产品国补优惠的落地准备工作,未来随着各省市关于手机、平板等品类的国补开启,京东将第一时间率先上线,满足消费者的换新升级需求。为保障国补的真实有效发放,基于
    华尔街科技眼 2025-01-17 10:44 238浏览
  • 故障现象 一辆2007款日产天籁车,搭载VQ23发动机(气缸编号如图1所示,点火顺序为1-2-3-4-5-6),累计行驶里程约为21万km。车主反映,该车起步加速时偶尔抖动,且行驶中加速无力。 图1 VQ23发动机的气缸编号 故障诊断接车后试车,发动机怠速运转平稳,但只要换挡起步,稍微踩下一点加速踏板,就能感觉到车身明显抖动。用故障检测仪检测,发动机控制模块(ECM)无故障代码存储,且无失火数据流。用虹科Pico汽车示波器测量气缸1点火信号(COP点火信号)和曲轴位置传感器信
    虹科Pico汽车示波器 2025-01-23 10:46 61浏览
  • 数字隔离芯片是一种实现电气隔离功能的集成电路,在工业自动化、汽车电子、光伏储能与电力通信等领域的电气系统中发挥着至关重要的作用。其不仅可令高、低压系统之间相互独立,提高低压系统的抗干扰能力,同时还可确保高、低压系统之间的安全交互,使系统稳定工作,并避免操作者遭受来自高压系统的电击伤害。典型数字隔离芯片的简化原理图值得一提的是,数字隔离芯片历经多年发展,其应用范围已十分广泛,凡涉及到在高、低压系统之间进行信号传输的场景中基本都需要应用到此种芯片。那么,电气工程师在进行电路设计时到底该如何评估选择一
    华普微HOPERF 2025-01-20 16:50 119浏览
  •  光伏及击穿,都可视之为 复合的逆过程,但是,复合、光伏与击穿,不单是进程的方向相反,偏置状态也不一样,复合的工况,是正偏,光伏是零偏,击穿与漂移则是反偏,光伏的能源是外来的,而击穿消耗的是结区自身和电源的能量,漂移的载流子是 客席载流子,须借外延层才能引入,客席载流子 不受反偏PN结的空乏区阻碍,能漂不能漂,只取决于反偏PN结是否处于外延层的「射程」范围,而穿通的成因,则是因耗尽层的过度扩张,致使跟 端子、外延层或其他空乏区 碰触,当耗尽层融通,耐压 (反向阻断能力) 即告彻底丧失,
    MrCU204 2025-01-17 11:30 209浏览
  • 临近春节,各方社交及应酬也变得多起来了,甚至一月份就排满了各式约见。有的是关系好的专业朋友的周末“恳谈会”,基本是关于2025年经济预判的话题,以及如何稳定工作等话题;但更多的预约是来自几个客户老板及副总裁们的见面,他们为今年的经济预判与企业发展焦虑而来。在聊天过程中,我发现今年的聊天有个很有意思的“点”,挺多人尤其关心我到底是怎么成长成现在的多领域风格的,还能掌握一些经济趋势的分析能力,到底学过哪些专业、在企业管过哪些具体事情?单单就这个一个月内,我就重复了数次“为什么”,再辅以我上次写的:《
    牛言喵语 2025-01-22 17:10 162浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦