透明物体非侵入式三维重建方法综述

MEMS 2024-12-04 00:01

撰稿人:高楠

论文题目:透明物体非侵入式三维重建方法综述(特邀)

作者:高楠,王鹏程,刘泽圳,倪育博,孟召宗,张宗华

完成单位:河北工业大学 机械工程学院

导读

玻璃、透镜以及显示屏等透明物体在各个领域有着大量需求和应用,需要快速、精确和完整地对它们进行三维重建,从而客观描述物体形态、检测表面质量和保障元器件功能。但由于透明物体表面的镜面反射和折射特性,传统的三维重建方法并不适合直接应用于其三维形貌测量。为此,概述了透明物体的非侵入式三维重建方法,从基于反射光重建和基于透射光重建两个方面展开,回顾了近年来的主要研究工作。然后,详细比较了各种技术的优缺点及其适用情况,使用者们可以根据不同应用需求和测量条件选择合适的透明物体重建方案。最后,展望了该领域未来的研究方向,希望能为研究人员在完善现有方法或探索新方法时提供参考和思路。

研究背景

透明物体是三维重建中一个具有挑战性的任务目标,但在使用飞行时间法、结构光投影法、光度立体法、立体视觉等传统方法测量其三维形貌时,效果并不好,甚至不能完成重建过程。这是由于透明表面与光线之间存在复杂的相互作用关系、缺乏局部外观、折射参数未知且不均,使得信息获取、特征匹配、数据处理等过程更加困难,从而给透明物体的三维重建带来极大挑战。

近年来,国内外专家和学者已经在该方向上探索出众多解决方案,总体上分为两类:侵入式方法和非侵入式方法。其中侵入式方法在数字化透明物体的过程中涉及对表面的物理干预,会对物体的结构、性质或其他方面产生一定程度的影响。因此,人们研发了各种非侵入式测量系统和技术,通过相机拍摄经透明物体表面反射或折射后的变形图案来恢复三维形貌。这种变形是表面形状、周围背景和照明条件三者共同作用的结果,还需进行大量工作才能从中提取出透明物体的准确外观。根据测量所使用的光学信号类型,本文将其分为基于反射光重建的方法和基于透射光重建的方法,并详细介绍了这两类方法的研究进展。

主要内容

基于扫描的方法依赖三角测量原理完成重建。可见光扫描技术利用透明表面的镜面反射属性,能量、轮廓、法线等附加信息的引入对透明物体三维重建起到了积极的辅助作用。非可见光扫描技术下的一些透明表面拥有类似于可见光范围内漫反射物体的光学属性,不需要根据反射定律调整扫描仪位置,为透明物体三维扫描提供了新途径。但同时会引入昂贵的非可见光生成和成像装置,复杂的校准流程也限制了其应用。

图1  立体激光扫描系统

从偏振恢复形状(Shape From Polarization, SFP)的概念,既可以在独立系统中应用,也可作为对三角测量、变形测量、立体视觉等传统方法的有效补充。前者依次消除天顶角和方位角歧义,计算表面法线,并将其转换为高度图。此类方法仅依赖于偏振提供的弱形状线索,结果容易受到噪声影响,且不能保证可积性。后者试图通过结合其他重建技术消除偏振中的法向量模糊,额外的形状线索可以用来增强偏振。只要入射光不是偏振光,这些方法在室内、室外或图案照明等不同照明条件下也具有相当的鲁棒性和稳定性。目前,解决两种角度模糊导致的法向量歧义仍是透明物体偏振三维成像技术发展的重点和难点,需要进一步研究。

图2 iQPM相位灵敏度提升透明物体的偏振三维成像:(a)测量过程;(b)法向量示意图;(c)基于镜面反射的偏振三维成像偏振度与不同折射率天顶角的关系;(d)光强信息随偏振片旋转角度的变化策略

反射式相位偏折测量术(Reflective Phase Measuring Deflectometry, RPMD)具有动态范围大、灵敏度高、精度高以及全场测量等优点,寄生反射是其面临的主要挑战。抑制后表面反射、空间域分离条纹和频域解耦条纹等方法拥有各自的优缺点,且最多能恢复透明物体的双表面,对于更复杂的物体则束手无策,例如中空或细节特征丰富的透明物体。原则上,图像中的每个反射都可以用来估计产生它们的表面,如果有技术能分离高阶反射信号,那么恢复复杂透明物体的特定表面将不再是一个难题。

图3 寄生反射的原因和现象:(a)寄生反射产生过程;(b)鬼影条纹

透射式相位偏折测量术(Transmissive Phase Measuring Deflectometry, TPMD)是透射性元件波前检测的优选技术,尤其在精密光学制造、光学镜头质量控制、透明材料加工等领域有着广泛应用。此外,还被应用于对整体形貌精度要求不高的缺陷检测,微小划痕、厚度差异和折射率变化都能被检测出来。采用额外信息解耦的方法试图单独考虑每个表面对图案变形的贡献,而应用射线追迹技术的方法通常利用透明物体的整体折射效应进行形状测量。但不论是哪种方法,在面对透明物体复杂的折射特性时,都可能出现形状模糊,移动参考平面或融合不同相机视图对解决这一问题有很大帮助。

图4 透射式计算机辅助光学偏折系统

立体视觉(Stereo Vision)技术则以其高精度和较低的成本,成为处理复杂透明物体的有力工具。使用这种方法的前提是需要通过标定获取不同相机之间的相对位置关系,以实现准确测量。整个系统运行的快慢则由图像采集速度和算法处理效率共同决定,支持满足从即时反馈到详尽分析的多元化应用场景需求。然而,该类技术不得不直面高计算复杂度带来的严峻挑战,一方面要通过大量图像来寻找光线对应关系,另一方面还要匹配不同视角下的图像,从而迭代优化并重构物体表面的精细形态。

图5 各种基于法线一致性约束方法的原理示意图

为了对这些非侵入式方法有一个更清晰的认识,文中从速度、精度、成本、计算复杂度、标定复杂度等多个角度对它们进行对比。

表1 透明物体三维重建方法总结对比

结论

本文旨在提供透明物体三维重建方法的最新和总体概述,特别是非侵入式系统和技术。基于反射光重建的方法利用透明物体的镜面特性,通过获取表面的线性反射场,绕过光线与物体之间复杂的相互作用,能够重建内部复杂、不均匀的透明物体。但需要解决物体内部间接光传输的干扰,以及精确控制和调整光源的位置。基于透射光重建的方法利用位于透明物体后方的面积平面光源来呈现调制图案,其传播光路除了依赖于表面法线外,还会受到折射率影响,能够更好表达透明物体的独特特征。但折射光线路径难以跟踪分析,且需执行额外且严格的约束以解决优化程序中深度法向量的歧义问题。每类方法都有其优缺点,应根据具体应用需求、预算以及对精度、速度和易用性的要求选择合适的技术。

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论
  • 1. 背景在汽车电子系统测试中,CANoe作为主流的仿真测试工具,常需与云端服务器、第三方软件或物联网设备进行交互。随着CANoe与外部软件、服务器或设备交互越来越多,直接使用Socket进行通信往往不能满足使用需求,依托于CANoe 的连接功能集(Connectivity Feature Set),以及Distributed Object(DO)功能,可以仿真HTTP节点,实现设备与服务器等之间的通信,保证数据处理的可靠性和便捷性。本文详细解析如何利用CANoe搭建HTTP测试环境,并提供典型
    北汇信息 2025-03-05 11:56 86浏览
  • 随着自动驾驶技术的迅猛发展,构建高保真、动态的仿真场景成为了行业的迫切需求。传统的三维重建方法在处理复杂场景时常常面临效率和精度的挑战。在此背景下,3D高斯点阵渲染(3DGS)技术应运而生,成为自动驾驶仿真场景重建的关键突破。一、3DGS技术概述与原理1、3DGS的技术概述3DGS是一种基于3D高斯分布的三维场景表示方法。通过将场景中的对象转化为多个3D高斯点,每个点包含位置、协方差矩阵和不透明度等信息,3DGS能够精确地表达复杂场景的几何形状和光照特性。与传统的神经辐射场(NeRF)方法相比,
    康谋 2025-03-06 13:17 120浏览
  • 产品质量合格率偏低会引起质量成本(也称“劣质成本”)的大幅增加。质量成本通常分为内部损失成本和外部损失成本两部分。内部损失成本是指产品交付前因质量不合格造成的损失,包括返工、报废等;外部损失成本是指产品交付后因质量问题导致的损失,如退货、召回等。此外,质量问题还会影响生产效率,带来额外人工和停工损失。下面分别介绍各类损失的具体计算方法和公式。直接成本损失(内部故障成本)直接成本是由于产品在出厂前质量不合格所造成的看得见的损失。常见的直接损失包括返工、报废以及由此产生的额外原材料消耗等。返工成本:
    优思学院 2025-03-05 15:25 77浏览
  • 概述随着工业4.0的深入推进,制造业对自动化和智能化的需求日益增长。传统生产线面临空间不足、效率低下、灵活性差等问题,尤其在现有工厂改造项目中,如何在有限空间内实现高效自动化成为一大挑战。此次项目的客户需要在现有工厂基础上进行改造,空间有限。为此,客户选择了SCARA型线性轴机器人作为执行设备。然而,SCARA机器人的高效运行离不开强大的控制系统支持。宏集凭借其先进的智能控制系统,为客户提供了高效、灵活的自动化解决方案,确保SCARA机器人在有限空间内发挥最大效能。一、客户需求在此次改造项目中,
    宏集科技 2025-03-06 11:27 120浏览
  • 多人同时共享相同无线网络,以下场景是否是您熟悉的日常?姐姐:「妈~我在房间在线上课,影音一直断断续续的怎么上课啊!」奶奶:「媳妇啊~我在在线追剧,影片一直卡卡的,实在让人生气!」除此之外,同时间有老公在跟客户开在线会议,还有弟弟在玩在线游戏,而妈妈自己其实也在客厅追剧,同时间加总起来,共有五个人同时使用这个网络!我们不论是在家里、咖啡厅、餐厅、商场或是公司,都会面临到周遭充斥着非常多的无线路由器(AP),若同时间每位使用者透过手机、平板或是笔电连接到相同的一个网络,可想而知网络上的壅塞及相互干扰
    百佳泰测试实验室 2025-03-06 16:50 36浏览
  • ASL6328芯片支持高达 6.0 Gbps 运行速率的交流和直流耦合输入T-MDS 信号,具备可编程均衡和抖动清理功能。ASL6328 是一款单端口 HDMI/DVI 电平转换 / 中继器,具有重新定时功能。它包含 TypeC双模式 DP 线缆适配器寄存器,可用于识别线缆适配器的性能。抖动清理 PLL(锁相环)能够消除输入抖动,并完全重置系统抖动容限,因此能更好地满足更高数据速率下 HDMI 抖动合规性要求。设备的运行和配置可通过引脚设置或 I2C 总线实现。自动断电和静噪功能提供了灵活的电
    QQ1540182856 2025-03-06 14:26 85浏览
  • 文/Leon编辑/侯煜‍2008至2021年间,创维以高举高打的凌厉之势,果断进行投资,一度成为中国市场大屏OLED产业的旗手,引领着显示技术的发展方向。但近年来,创维在 OLED 领域的发展轨迹却逐渐模糊,态度陷入暧昧不明的混沌状态。究其根源,一方面,创维对过往的押注难以割舍,在技术革新与市场变化的浪潮中,不愿轻易推翻曾经的战略布局;另一方面,早期在大屏OLED 技术研发、市场推广等环节投入的巨额资金,已然形成沉没成本,极大地限制了创维在显示技术路线上的重新抉择。但市场瞬息万变,为适应激烈的行
    华尔街科技眼 2025-03-05 20:03 147浏览
  • 在当今竞争激烈的市场环境中,企业不仅需要优化成本,还需积极响应国家的能源政策,减少对环境的影响。提升工业能源效率正是实现这一双重目标的关键。中国近年来大力推进“双碳”目标(碳达峰、碳中和),并出台了一系列政策鼓励企业节能减排。通过宏集CODRA的Panorama解决方案,企业可以获得专为这一目标设计的SCADA工具,实时监控和调整所有工业设备的能耗。特别是其中的能源管理模块,能够有效分析数据,预防故障,避免能源浪费。Panorama的优化技术宏集CODRA提供的解决方案,尤其是Panorama
    宏集科技 2025-03-06 11:25 115浏览
  • 在六西格玛项目中,团队的选择往往决定了最终的成败。合适的团队成员不仅能推动项目顺利进行,更能确保最终成果符合预期。因此,组建六西格玛团队时,必须挑选最合适的人才,确保他们具备必要的能力和特质。团队主管的关键特质每个精益六西格玛项目都需要一位主管来带领团队。他们不仅需要具备领导力,还要能够分析数据、制定策略,并与管理层和团队成员高效沟通。团队主管的核心职责包括:领导团队行动:能够激励成员,确保团队朝着既定目标前进。数据分析能力:精通数据处理和分析,能基于数据做出决策。沟通协调:能够在管理层和团队之
    优思学院 2025-03-06 12:51 97浏览
  • 服务器应用环境与客户需求PCIe 5.0高速接口技术的成熟驱动着生成式AI与高效能运算等相关应用蓬勃发展。在随着企业对服务器性能的要求日益严苛,服务器更新换代的周期也持续加快。在此背景下,白牌与DIY(Do It Yourself)服务器市场迎来了新的发展契机,但同时也面临着更趋复杂的技术挑战。传统上,白牌与DIY服务器以其高度客制化与成本效益优势受到市场青睐。然而,随着PCIe 5.0等高速技术的导入,服务器系统的复杂度大幅提升,对组装技术与组件兼容性也就提出更高的要求。举个简单的例子来说,P
    百佳泰测试实验室 2025-03-06 17:00 41浏览
  • 文/Leon编辑/cc孙聪颖2025年全国两会进行时,作为“十四五”规划收官之年,本届两会释放出坚定目标、稳中求进、以进促稳等信号。其中,企业家们的建议备受关注,关系到民营经济在2025年的走向。作为国内科技制造业的“老兵”,全国人大代表、TCL集团创始人及董事长李东生在本届两会中提出三份代表建议,包括《关于优化中国科技制造业融资环境的建议》、《关于加强AI深度伪造欺诈管理的建议》和《关于降低灵活就业人员社会保险参保门槛的建议》,表现出对科技制造、AI发展和劳动者保障方面的关注。会后,李东生接受
    华尔街科技眼 2025-03-06 19:41 34浏览
  • 引言嘿,各位电动汽车的爱好者们!咱们今儿个就来聊聊电动汽车里那些“看不见,摸不着”,但又至关重要的零部件。要说电动汽车这玩意儿,那可真是科技含量满满,各种高精尖的技术都往里堆。但要让这些高科技玩意儿协同工作,稳定可靠地运转,那就得靠一些幕后英雄,比如说——电容器。你可能会想,电容器?这不就是电子电路里常见的元件嘛,能有多重要? 哎,你可别小瞧了这小小的电容器。在电动汽车的心脏地带——高压直流转换器(DC-DC转换器)里,车规级的电容器那可是扮演着举足轻重的角色。 今天,咱们就聚焦分析三星电机车规
    贞光科技 2025-03-05 17:02 90浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦