国内外光场相机应用案例对比

ittbank 2023-07-26 17:40

光场相机通过在主透镜与传感器元件间放置一块紧密排布的微透镜阵列,仅需单次曝光即可获得光线的空间、角度四维信息,经过后期算法处理可以得到场景处于不同视角和不同景深的图像以及深度信息,具有结构紧凑,体积小,采集效率高等优点。据笔者了解,目前在工业级光场相机制造供应上,主要有德国的Raytrix公司以及国内的VOMMA奕目(上海)科技有限公司。


Raytrix 成立于2008年,自2010年起销售用于专业应用和研究的3D光场相机。Raytrix专注于为工业应用开发光场相机,获得专利的微透镜阵列设计能够在高效分辨率和大景深之间实现最佳折中(trade-off)。Raytrix推出的光场相机已经在计算机摄影、PIV三维测速、工件视觉检测、三维立体显示、人脸辨识以及交通监控等领域均取得了较好的应用。


奕目(上海)科技有限公司则成立于2019年,为上海交通大学科技成果转化企业,计算成像领域的"专精特新"高新技术企业。核心产品光场相机结合计算成像技术,实现对多维度光线信息的瞬时记录,拥有单次拍摄、瞬时三维建模的能力,具有微纳级精度、毫秒级计算、被动式测量的特点。至今VOMMA推出了多台工业级光场相机,在屏幕缺陷分层检测以及芯片金线三维检测、虚拟像面等落地应用上都取得了较好的检测效果。


虽然Raytrix和VOMMA的核心产品——光场相机都是基于微透镜阵列对光场进行采集,但两者在成像原理上存在本质的差别。


如图1所示,Raytrix推出的光场相机为聚焦型光场相机,微透镜阵列(MLA)并不是放置在主透镜像侧焦平面位置,因此微透镜阵列实际上是对主透镜所成的像进行二次成像。根据聚焦型光场相机的成像原理,微透镜阵列的位置可以进行调整,因此对于Raytrix光场相机系统,微透镜阵列与传感器元件的间距为毫米尺度,封装要求较低,微透镜阵列易于封装。


 

图1 Raytrix光场相机及成像原理


如图2所示,VOMMA推出的光场相机大多为散焦型光场相机,微透镜阵列放置在主透镜像侧焦平面位置,因此微透镜阵列对主透镜所成的像直接成像。对于散焦型光场相机系统,微透镜阵列与传感器元件的间距为一个微透镜焦距,为微米尺度,封装要求极高。VOMMA采用高精度芯片级封装工艺,自主研发的光场封装机台可将封装误差控制在±1um,从而得到精度更高的深度计算结果。

 


图2 VOMMA光场相机及成像原理


光场相机应用案例


3.1 3D金线检测


随着半导体技术的快速发展,电子产品的封装集成度越来越高、实现功能越来越多,市场对高质量芯片的需求也相应增长。芯片生产制造过程中,各工艺流程环环相扣且技术复杂,导致芯片容易产生缺陷而被强制报废,因此芯片金线的缺陷检测至关重要。


芯片制造过程中产生的表面缺陷示例如图3所示,主要为金线产生多线、并线、塌线、断线、线高等缺陷。

 

图3芯片表面缺陷


芯片金线体积很小,且表面金属反光明显,目前对于芯片金线的检测基本采用人工检测的方式。人工在高倍显微镜下进行检测,效益低且检测精度不高,易出现疲劳导致生产效率低,无法满足芯片批量生产的检测需求。另外,单一工位检测容易出现漏判情况,从而无法实现全方位检测的目的。视觉测量技术的逐渐发展使得金线缺陷检测方式拥有了更多的可能性。图4和图5分别展示了Raytrix和VOMMA、对金线的3D检测应用案例效果。


 


图4 Raytrix芯片金线3D检测应用


 

图5 VOMMA 芯片金线3D检测应用


除了对芯片金线的三维形貌测量之外,为了提高检测效率,奕目科技还开发了成熟的AI视觉检测算法平台。该算法平台基于光场相机三维成像过程中得到的2D和3D结果,能够自动识别、定位芯片、金球和金线,从而完成对多种缺陷的识别与检测。图6展示了视觉检测算法平台自动完成了单个芯片的金球、金线识别,并且输出是否断线以及线高的测量数值。


 

图6 VOMMA开发的金线缺陷检测算法平台


3.2 人脸建模


3D人脸建模,在游戏、影视特效、VR等领域应用广泛,但是由于人脸的复杂性、易变性,如何建立逼真的3D 人脸模型成为了一道难题。软件建模是最常见的人脸建模方式,利用3Dmax、Maya和Blender等3D建模软件可以对人脸进行手工建模,但是该方式耗时耗力且对电脑显卡要求较高,很容易出现电脑系统延迟甚至崩掉的情况。


相比之下,仪器采集的建模方式要轻松的多,通过3D测量设备,对人脸进行多次、多角度的数据采集就能够获得人脸的三维信息。由于人类无法做到长时间保持动作一致,因此对采集仪器的效率和测量精度有着较高的要求。具有高采集率和高测量精度的光场相机不失为一种好选择。


图7和8分别展示了Raytrix和VOMMA人脸建模应用案例结果。在面部还原效果以及细节上,VOMMA丝毫不逊色于发展多年的Raytrix。


图7 Raytrix人脸建模应用案例


图8 VOMMA人脸建模应用案例


3.3 手机屏幕分层检测


现在的手机屏幕主要以触摸屏为主,组成部分有盖板玻璃、触控模组和显示模组。其中,显示模组通常分为LCD和OLED,其结构如图9所示。


LCD屏幕显示模组由偏光片、彩色滤光片、TFT、液晶、背板等构成,图像显色度好、画面柔和不伤眼。OLED屏幕显示模组由偏光片、有机发光层、玻璃、TFT等材料构成,屏幕可自发光,具有轻薄、可弯曲、低耗能的优点。


 

图9 LCD和OLED屏幕结构组成


手机屏幕在生产过程中可能出现亮点、划痕、崩边或附着异物等多种缺陷,并且这些缺陷可能会以分层的形式出现,导致其百分百强制报废。因此对手机屏幕检测相当有必要。VOMMA提供的手机屏幕缺陷3D检测方案(见图10和图11)可通过单次拍摄(<100ms)获得三维信息,通过成熟的AI视觉检测算法平台,能自动识别、定位点状灰尘、亮点、暗点,并完成检测、测量和分层判断。


图10 VOMMA屏幕缺陷3D检测方案成像效果展示


图11 VOMMA开发的手机屏幕缺陷检测算法平台


3.4 虚拟像面三维检测


VR眼镜之所以能给人以沉浸式体验,主要归功于:(1)大FOV使人视线范围内都沉浸于VR图像中;(2)单目成像的分辨率高、畸变小等;(3)双目图像的合像特性好,左右图像一致性高、融合程度好。其中,合像特性尤为重要,它影响着虚拟物体显示的立体感,融合程度差会让使用者产生视觉疲劳(大脑会尝试将左右眼得到的图像经过旋转平移来重合,如有差异就容易视觉疲劳,见图12)。因此,左右眼画面和虚拟像面距离(Virtual image distance,VID)的一致性,对VR眼镜的使用体验有较大影响。

图12 VR眼镜合像特性


由于VR眼镜投射的是光线而非实物,无法使用接触式三维测量技术以及依赖主动光源的结构光、TOF、线激光等测量方式。而在被动式三维测量技术中, 双目视觉技术由于基线距离、双相机光轴无法与VR眼镜统一等原因,也无法完成虚拟像面距离测量。因此,光场成像测量方式在VID测量上具有绝对优势。VOMMA首次运用光场成像技术对VR眼镜左右眼形成的虚拟像面分别进行了测量,测量效果如图13所示。

图13 VOMMA虚拟像面测量应用案例


四、总结


光场相机应用场景广泛,特别是在工业检测领域,其独特优势使得这项技术具备相当大的发展潜力,光场相机的出现为工业检测领域注入了新的活力。国内的光场技术研发公司,如VOMMA,一直致力于光场相机的研发和创新。他们不断提升光场相机的分辨率和成像质量,拓展其在工业检测领域的应用。通过不断优化算法和硬件设计,光场相机的性能得到了大幅提升,使得其在工业检测应用上展现出更大的潜力。


总而言之,光场相机在工业检测领域具备广泛的应用场景和潜力。其能够提供更加准确和全面的图像数据,有助于实现精确的工业检测和质量控制。随着光场相机技术的不断发展和创新,相信它将会在工业检测应用上大放异彩。

ittbank 让电子库存因技术而改变的ITT模式电商平台。引领和适应市场,以共享经济理念的创客及工程师为核心、以免费开放用户生成的数据为基础,为其提供高性价比的应用解决方案和及时精准的供求信息,快速提高产品开发周期和生产直通率、提升电子器件的应用附加值。
评论 (0)
  • 在科技飞速发展的当下,机器人领域的每一次突破都能成为大众瞩目的焦点。这不,全球首届人形机器人半程马拉松比赛刚落下帷幕,赛场上的 “小插曲” 就掀起了一阵网络热潮。4月19日,北京亦庄的赛道上热闹非凡,全球首届人形机器人半程马拉松在这里激情开跑。20支机器人队伍带着各自的“参赛选手”,踏上了这21.0975公里的挑战之路。这场比赛可不简单,它将机器人放置于真实且复杂的动态路况与环境中,对机器人在运动控制、环境感知和能源管理等方面的核心技术能力进行了全方位的检验。不仅要应对长距离带来的续航挑战,还要
    用户1742991715177 2025-04-22 20:42 83浏览
  • 一、行业背景与市场需求高血压作为全球发病率最高的慢性病之一,其早期监测与管理已成为公共卫生领域的重要课题。世界卫生组织数据显示,全球超13亿人受高血压困扰,且患者群体呈现年轻化趋势。传统血压计因功能单一、数据孤立等缺陷,难以满足现代健康管理的需求。在此背景下,集语音播报、蓝牙传输、电量检测于一体的智能血压计应运而生,通过技术创新实现“测量-分析-管理”全流程智能化,成为慢性病管理的核心终端设备。二、技术架构与核心功能智能血压计以电子血压测量技术为基础,融合物联网、AI算法及语音交互技术,构建起多
    广州唯创电子 2025-04-23 09:06 123浏览
  •   后勤实验仿真系统平台深度解析   北京华盛恒辉后勤实验仿真系统平台依托计算机仿真技术,是对后勤保障全流程进行模拟、分析与优化的综合性工具。通过搭建虚拟场景,模拟资源调配、物资运输等环节,为后勤决策提供数据支撑,广泛应用于军事、应急管理等领域。   应用案例   目前,已有多个后勤实验仿真系统平台在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润后勤实验仿真系统平台。这些成功案例为后勤实验仿真系统平台的推广和应用提供了有力支持。   一、核心功能   (一)后勤资源模拟
    华盛恒辉l58ll334744 2025-04-23 15:39 80浏览
  •   电磁频谱数据综合管理平台系统解析   一、系统定义与目标   北京华盛恒辉电磁频谱数据综合管理平台融合无线传感器、软件定义电台等前沿技术,是实现无线电频谱资源全流程管理的复杂系统。其核心目标包括:优化频谱资源配置,满足多元通信需求;运用动态管理与频谱共享技术,提升资源利用效率;强化频谱安全监管,杜绝非法占用与干扰;为电子战提供频谱监测分析支持,辅助作战决策。   应用案例   目前,已有多个电磁频谱数据综合管理平台在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润电磁频谱数
    华盛恒辉l58ll334744 2025-04-23 16:27 97浏览
  • 文/Leon编辑/cc孙聪颖‍在特朗普政府发起的关税战中,全球芯片产业受到巨大冲击,美国芯片企业首当其冲。据报道称,英伟达本周二公布的8-K文件显示,美国政府通知该公司向中国(包括中国香港及澳门)销售尖端芯片(H20)时,需要获得美国政府的许可。文件发布后,英伟达预计会在第一季度中额外增加55亿美元的相关费用计提。随后,英伟达股价单日下跌6.9%,市值一夜蒸发约1890亿美元(约合人民币1.37万亿元)。至截稿时,至截稿时,其股价未见止跌,较前日下跌4.51%。北京时间4月17日,英伟达创始人、
    华尔街科技眼 2025-04-22 20:14 87浏览
  •   陆地边防事件紧急处置系统平台解析   北京华盛恒辉陆地边防事件紧急处置系统平台是整合监测、预警、指挥等功能的智能化综合系统,致力于增强边防安全管控能力,快速响应各类突发事件。以下从系统架构、核心功能、技术支撑、应用场景及发展趋势展开全面解读。   应用案例   目前,已有多个陆地边防事件紧急处置系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润陆地边防事件紧急处置系统。这些成功案例为陆地边防事件紧急处置系统的推广和应用提供了有力支持。   一、系统架构   感知层:部
    华盛恒辉l58ll334744 2025-04-23 11:22 88浏览
  •   复杂电磁环境模拟系统平台解析   一、系统概述   北京华盛恒辉复杂电磁环境模拟系统平台是用于还原真实战场或特定场景电磁环境的综合性技术平台。该平台借助软硬件协同运作,能够产生多源、多频段、多体制的电磁信号,并融合空间、时间、频谱等参数,构建高逼真度的电磁环境,为电子对抗、通信、雷达等系统的研发、测试、训练及评估工作提供重要支持。   应用案例   目前,已有多个复杂电磁环境模拟系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润复杂电磁环境模拟系统。这些成功案例为复杂电
    华盛恒辉l58ll334744 2025-04-23 10:29 121浏览
  • 一、技术背景与市场机遇在智能家居高速发展的今天,用户对家电设备的安全性、智能化及能效表现提出更高要求。传统取暖器因缺乏智能感知功能,存在能源浪费、安全隐患等痛点。WTL580-C01微波雷达感应模块的诞生,为取暖设备智能化升级提供了创新解决方案。该模块凭借微波雷达技术优势,在精准测距、环境适应、能耗控制等方面实现突破,成为智能取暖器领域的核心技术组件。二、核心技术原理本模块采用多普勒效应微波雷达技术,通过24GHz高频微波信号的发射-接收机制,实现毫米级动作识别和精准测距。当人体进入4-5米有效
    广州唯创电子 2025-04-23 08:41 115浏览
  • 前言本文主要演示基于TL3576-MiniEVM评估板HDMI OUT、DP 1.4和MIPI的多屏同显、异显方案,适用开发环境如下。Windows开发环境:Windows 7 64bit、Windows 10 64bitLinux开发环境:VMware16.2.5、Ubuntu22.04.5 64bitU-Boot:U-Boot-2017.09Kernel:Linux-6.1.115LinuxSDK:LinuxSDK-[版本号](基于rk3576_linux6.1_release_v
    Tronlong 2025-04-23 13:59 67浏览
  • 故障现象一辆2016款奔驰C200L车,搭载274 920发动机,累计行驶里程约为13万km。该车组合仪表上的防侧滑故障灯、转向助力故障灯、安全气囊故障灯等偶尔异常点亮,且此时将挡位置于R挡,中控显示屏提示“后视摄像头不可用”,无法显示倒车影像。 故障诊断用故障检测仪检测,发现多个控制单元中均存储有通信类故障代码(图1),其中故障代码“U015587 与仪表盘的通信存在故障。信息缺失”出现的频次较高。 图1 存储的故障代码1而组合仪表中存储有故障代码“U006488 与用户界
    虹科Pico汽车示波器 2025-04-23 11:22 55浏览
  •   无人机结构仿真与部件拆解分析系统平台解析   北京华盛恒辉无人机结构仿真与部件拆解分析系统无人机技术快速发展的当下,结构仿真与部件拆解分析系统平台成为无人机研发测试的核心工具,在优化设计、提升性能、降低成本等方面发挥关键作用。以下从功能、架构、应用、优势及趋势展开解析。   应用案例   目前,已有多个无人机结构仿真与部件拆解分析系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润无人机结构仿真与部件拆解分析系统。这些成功案例为无人机结构仿真与部件拆解分析系统的推广和应用提
    华盛恒辉l58ll334744 2025-04-23 15:00 110浏览
  • 文/Leon编辑/cc孙聪颖‍4月18日7时,2025北京亦庄半程马拉松暨人形机器人半程马拉松正式开跑。与普通的半马比赛不同,这次比赛除了有人类选手,还有21支人形机器人队伍参赛,带来了全球首次人类与机器人共同竞技的盛况。参赛队伍中,不乏明星机器人企业及机型,比如北京人形机器人创新中心的天工Ultra、松延动力的N2等。宇树G1、众擎PM01,则是由城市之间科技有限公司购置及调试,并非厂商直接参赛。考虑到机器人的适用场景和续航力各有不同,其赛制也与人类选手做出区别:每支赛队最多可安排3名参赛选手
    华尔街科技眼 2025-04-22 20:10 89浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦