基于超构表面点云投影的单次曝光三维成像

原创 MEMS 2023-01-14 00:00

三维(3D)成像是一种用于光检测、自动驾驶汽车、手势识别、机器视觉和其他应用的关键信息获取技术。超构表面(Metasurface)作为一种亚波长尺度的二维阵列,具有丰富的设计自由度,可以灵活控制光学波前。超构表面具有较大的视场(FOV)和强大的功能,在光学器件方面具有广阔的应用前景。

据麦姆斯咨询报道,近日,北京理工大学和中国科学院物理研究所的研究人员组成的团队在Nature Communications期刊上发表了题为“Single-shot 3D imaging with point cloud projection based on metadevice”的论文,提出了一种基于单层超构表面的平面光学器件,以在傅里叶空间中投影编码点云,并探索了一种复杂的匹配算法来实现3D重建,为单次曝光(Single-shot)3D成像提供了完整的技术路线图。本文提出的方法降低了当前光学成像解决方案的对准复杂性、振动敏感性和制造复杂性。


图1 基于超构表面投影的单次曝光3D成像示意图

3D成像可以感知真实世界的3D物体,并重建空间信息的详细特征。由于3D成像的数字化描述能力,其在人工智能(AI)、虚拟现实(VR)、增强现实(AR)、机器人导航、文物保护以及工业设计和检测等众多应用中发挥着关键作用。近年来,结构光技术在科学界和工业界得到了迅速发展,在表面测量、快速中短距离测量和高精度方面具有出色的表现。

然而,由于折射透镜的存在,传统投影设备的尺寸受到限制,更多的组件给精确的3D成像系统构建带来了更多困难,这导致了实现紧凑型设备的技术和制造挑战。由于其像素尺寸比光波长大,因此衍射光学元件(DOE)只能在相对较小的视场内生成点云。同时,不同平台的3D重建算法需要根据精度、速度和数据容量的要求,并结合相应的硬件进行严格设计。因此,对于单次曝光3D成像技术来说,简单的设备和相应的重建算法都是必不可少的。

超构表面被认为是3D超构材料的2D等效物,是一种能够灵活调制光场的振幅、相位和偏振的人造光学表面。超构表面为全息显示、保形光学和光束整形等众多应用提供了新颖的平台,具有微型化尺寸、大数值孔径、全空间控制和多功能的特点,加快了其在3D成像技术中的应用。特别是,超构透镜阵列和双焦点超构透镜已被用于无源3D定位和成像技术,显示出毫米级、低功耗平台的巨大潜力。然而,上述基于超构透镜成像的技术仍存在一些困难,包括有限的视场、景深和图像分辨率。

研究人员已经提出了一些基于与主动3D成像技术相关的超构表面的器件,并且与受益于亚波长尺寸的DOE相比,它们都具有相对较大的视场。通过优化所选衍射级的强度均匀性,一种用于在大角度空间中生成点云的周期性超构表面已被研究人员证实,表明其具有偏振复用优势的潜在空间编码能力。同时,一种基于超构表面的大视场Dammann光栅已被证实可以取代DOE,但它只能提供有限的衍射阶数来扩大来自垂直腔面发射激光器(VCSEL)阵列的准直激光图像。因此,将超构表面与激光源集成可以大大提高紧凑性和可扩展性,为多功能片上光电器件的设计奠定基础。


图2 超构表面的设计、制造和检测

在这项研究工作中,作者们提出了一种基于单层超构表面的平面光学器件,以在傅里叶空间中投影编码点云,并探索了一种复杂的匹配算法来实现3D重建,为单次曝光3D成像提供了完整的技术路线图。超构表面被用于在傅里叶空间中投影精心设计的编码点云,并且他们提出了基于三角测量原理的3D重建操作。他们讨论了用于高性能成像的视场设计和投影点数量。他们还提出并分析了一个完整的算法架构,该架构可以有效地实现精确的单次曝光3D重建。通过实验,他们验证了本文提出的方法对不同场景的深度精度和3D重建效果,表明了亚毫米测量平台的可行性。本文提出的方法对于未来消费电子和工业视觉市场中的平面光学器件来说是一种有前景的方法;该方法降低了当前光学成像解决方案的对准复杂性、振动敏感性和制造复杂性。


图3 基于图像特征的搜索算法与策略


图4 硬纸板在三种变形状态下的3D成像


图5 用于手势采集的3D成像

综上所述,研究团队提出并演示了使用精心设计的超构表面作为结构光照明模块,以减轻装配困难并实现视场和投影点密度的灵活设计。他们提出了相应的重建策略和算法,并展示了其优越的灵活性、鲁棒性和通用性。随着消费电子产品对3D成像技术的需求日益增长,设备小型化的需求日益突出,这一进展具有重要意义;这项研究的结果可能会加速计算机视觉、个人认证、光检测和人工智能等各个领域的应用的发展。

论文链接:
https://doi.org/10.1038/s41467-022-35483-z

延伸阅读:
《光学和射频领域的超构材料和超构表面-2022版》
《光学和射频应用的超构材料-2022版》
《新兴图像传感器技术及市场-2023版》

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论 (0)
  • 随着智能驾驶时代到来,汽车正转变为移动计算平台。车载AI技术对存储器提出新挑战:既要高性能,又需低功耗和车规级可靠性。贞光科技代理的紫光国芯车规级LPDDR4存储器,以其卓越性能成为国产芯片产业链中的关键一环,为智能汽车提供坚实的"记忆力"支持。作为官方授权代理商,贞光科技通过专业技术团队和完善供应链,让这款国产存储器更好地服务国内汽车厂商。本文将探讨车载AI算力需求现状及贞光科技如何通过紫光国芯LPDDR4产品满足市场需求。 车载AI算力需求激增的背景与挑战智能驾驶推动算力需求爆发式
    贞光科技 2025-05-07 16:54 199浏览
  • 温度传感器的工作原理依据其类型可分为以下几种主要形式:一、热电阻温度传感器利用金属或半导体材料的电阻值随温度变化的特性实现测温:l ‌金属热电阻‌(如铂电阻 Pt100、Pt1000):高温下电阻值呈线性增长,稳定性高,适用于工业精密测温。l ‌热敏电阻‌(NTC/PTC):NTC 热敏电阻阻值随温度升高而下降,PTC 则相反;灵敏度高但线性范围较窄,常用于电子设备温控。二、热电偶传感器基于‌塞贝克效应‌(Seebeck effect):两种不同
    锦正茂科技 2025-05-09 13:31 194浏览
  • 后摄像头是长这个样子,如下图。5孔(D-,D+,5V,12V,GND),说的是连接线的个数,如下图。4LED,+12V驱动4颗LED灯珠,给摄像头补光用的,如下图。打开后盖,发现里面有透明白胶(防水)和白色硬胶(固定),用合适的工具,清理其中的胶状物。BOT层,AN3860,Panasonic Semiconductor (松下电器)制造的,Cylinder Motor Driver IC for Video Camera,如下图。TOP层,感光芯片和广角聚焦镜头组合,如下图。感光芯片,看着是玻
    liweicheng 2025-05-07 23:55 393浏览
  • 飞凌嵌入式作为龙芯合作伙伴,隆重推出FET-2K0300i-S全国产自主可控工业级核心板!FET-2K0300i-S核心板基于龙芯2K0300i工业级处理器开发设计,集成1个64位LA264处理器,主频1GHz,提供高效的计算能力;支持硬件ECC;2K0300i还具备丰富的连接接口USB、SDIO、UART、SPI、CAN-FD、Ethernet、ADC等一应俱全,龙芯2K0300i支持四路CAN-FD接口,具备良好的可靠性、实时性和灵活性,可满足用户多路CAN需求。除性价比超高的国产处理器外,
    飞凌嵌入式 2025-05-07 11:54 87浏览
  • Matter协议是一个由Amazon Alexa、Apple HomeKit、Google Home和Samsung SmartThings等全球科技巨头与CSA联盟共同制定的开放性标准,它就像一份“共生契约”,能让原本相互独立的家居生态在应用层上握手共存,同时它并非另起炉灶,而是以IP(互联网协议)为基础框架,将不同通信协议下的家居设备统一到同一套“语义规则”之下。作为应用层上的互通标准,Matter协议正在重新定义智能家居行业的运行逻辑,它不仅能向下屏蔽家居设备制造商的生态和系统,让设备、平
    华普微HOPERF 2025-05-08 11:40 343浏览
  • UNISOC Miracle Gaming奇迹手游引擎亮点:• 高帧稳帧:支持《王者荣耀》等主流手游90帧高画质模式,连续丢帧率最高降低85%;• 丝滑操控:游戏冷启动速度提升50%,《和平精英》开镜开枪操作延迟降低80%;• 极速网络:专属游戏网络引擎,使《王者荣耀》平均延迟降低80%;• 智感语音:与腾讯GVoice联合,弱网环境仍能保持清晰通话;• 超高画质:游戏画质增强、超级HDR画质、游戏超分技术,优化游戏视效。全球手游市场规模日益壮大,游戏玩家对极致体验的追求愈发苛刻。紫光展锐全新U
    紫光展锐 2025-05-07 17:07 311浏览
  • 这款无线入耳式蓝牙耳机是长这个样子的,如下图。侧面特写,如下图。充电接口来个特写,用的是卡座卡在PCB板子上的,上下夹紧PCB的正负极,如下图。撬开耳机喇叭盖子,如下图。精致的喇叭(HY),如下图。喇叭是由电学产生声学的,具体结构如下图。电池包(AFS 451012  21 12),用黄色耐高温胶带进行包裹(安规需求),加强隔离绝缘的,如下图。451012是电池包的型号,聚合物锂电池+3.7V 35mAh,详细如下图。电路板是怎么拿出来的呢,剪断喇叭和电池包的连接线,底部抽出PCB板子
    liweicheng 2025-05-06 22:58 593浏览
  • 二位半 5线数码管的驱动方法这个2位半的7段数码管只用5个管脚驱动。如果用常规的7段+共阳/阴则需要用10个管脚。如果把每个段看成独立的灯。5个管脚来点亮,任选其中一个作为COM端时,另外4条线可以单独各控制一个灯。所以实际上最多能驱动5*4 = 20个段。但是这里会有一个小问题。如果想点亮B1,可以让第3条线(P3)置高,P4 置低,其它阳极连P3的灯对应阴极P2 P1都应置高,此时会发现C1也会点亮。实际操作时,可以把COM端线P3设置为PP输出,其它线为OD输出。就可以单独控制了。实际的驱
    southcreek 2025-05-07 15:06 487浏览
  • 文/郭楚妤编辑/cc孙聪颖‍相较于一众措辞谨慎、毫无掌舵者个人风格的上市公司财报,利亚德的财报显得尤为另类。利亚德光电集团成立于1995年,是一家以LED显示、液晶显示产品设计、生产、销售及服务为主业的高新技术企业。自2016年年报起,无论业绩优劣,董事长李军每年都会在财报末尾附上一首七言打油诗,抒发其对公司当年业绩的感悟。从“三年翻番顺大势”“智能显示我第一”“披荆斩棘幸从容”等词句中,不难窥见李军的雄心壮志。2012年,利亚德(300296.SZ)在深交所创业板上市。成立以来,该公司在细分领
    华尔街科技眼 2025-05-07 19:25 408浏览
  • 硅二极管温度传感器是一种基于硅半导体材料特性的测温装置,其核心原理是利用硅二极管的电学参数(如正向压降或电阻)随温度变化的特性实现温度检测。以下是其工作原理、技术特点及典型应用:一、工作原理1、‌PN结温度特性‌硅二极管由PN结构成,当温度变化时,其正向电压 VF与温度呈线性负相关关系。例如,温度每升高1℃,VF约下降2 mV。2、‌电压—温度关系‌通过jing确测量正向电压的微小变化,可推算出环境温度值。部分型号(如SI410)在宽温域内(如1.4 K至475 K)仍能保持高线性度。
    锦正茂科技 2025-05-09 13:52 209浏览
  • 在过去的很长一段时间里,外卖市场呈现出美团和饿了么双寡头垄断的局面。美团凭借先发优势、强大的地推团队以及精细化的运营策略,在市场份额上长期占据领先地位。数据显示,截至2024年上半年,美团外卖以68.2%的市场份额领跑外卖行业,成为当之无愧的行业老大。其业务广泛覆盖,从一线城市的繁华商圈到二三线城市的大街小巷,几乎无处不在,为无数消费者提供便捷的外卖服务。饿了么作为阿里本地生活服务的重要一环,依托阿里强大的资金和技术支持,也在市场中站稳脚跟,以25.4%的份额位居第二。尽管市场份额上与美团有一定
    用户1742991715177 2025-05-06 19:43 92浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦