【光电智造】科普:三维视觉测量技术之“被动视觉测量”和“主动视觉测量”

今日光电 2023-12-30 19:01

今日光电

     有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。追光逐电,光赢未来...欢迎来到今日光电!


----追光逐电 光赢未来----

三维视觉测量技术按照测量过程中是否投射光源,获取被测物体三维形貌信息的方法可以分为两大类: 被动视觉测量和主动视觉测量。

一、被动视觉测量

被动视觉测量不需要特殊的照明投射装置,仅利用相机拍摄被测物的图像,建立被测物与相机之间的相对位置关系,从而获取被测物表面的三维信息。被动视觉测量所需硬件相对简单。根据所采用相机的数目,被动视觉测量可分为: 单目视觉测量、双目视觉测量和多目视觉测量等。

①单目视觉测量。单目三维视觉测量方法主要分为传统方法和基于深度学习的方法两大类。传统方法有从聚焦恢复深度( shape from focus,SFF)、从运动恢复结构( structure from motion,SFM) 和即时定位与地图重建 ( simultaneous localization and mapping,SLAM) 等。SFF 通过移动物体来采集图像序列,基于图像聚焦程度进行分析,完成三维重建,多用于显微三维视觉测量领域。SFM 和 SLAM 方法原理相似,利用序列图像帧间的运动估计出相机姿态信息,然后基于图像序列采用三角测量法来恢复场景的三维信息。基于深度学习的单目三维重建是近年新提出的方法。该方法利用大量样本数据训练卷积神经网络,然后通过网络模型实现场景深度获取。

②双目视觉测量。与人眼的立体感知类似,双目立体视觉用两个相机从不同的角度对被测物体成像。依据两幅图像中对应点的立体视差( stereo disparity) ,根据三角测量原理实现三维信息测量。双目立体视觉直观、传感器结构简单且测量精度较高,主要挑战在于图像中同名像点的确定。


图为 双目立体视觉模型

③多目视觉测量。为减少双目立体视觉测量中同名像点匹配的多义性,在双目立体视觉测量系统的基础上,增加一台或多台辅助相机,构成多目视觉测量系统。通过多个相机间需满足的成像几何约束可减少误匹配现象,且可以通过光束平差提高测量精度,但计算量也会相应增加,降低测量速度和效率。


图 多目视觉测量模型

二、主动视觉测量

主动视觉测量与被动视觉测量最大的不同在于需要向被测物体投射光源( 点、条纹、图案和散斑等) ,相机拍摄包含光源的反射光或透射光的被测物体表面图像,利用成像几何关系所建立的数学模型解算出被测物体三维结构信息。

主动视觉测量利用结构光在物体表面形成明显的特征,对于光滑、纹理缺乏、无明显灰度或形状变化的表面区域,可以避免同名点不易匹配的难题,改善三维信息的获取精度。根据投射光源的模式,主动视觉测量可以分为点扫描式、( 多) 线扫描式、编码光式以及飞行时间法( 脉冲测距法) 等。

①点扫描式。点扫描式测量时,激光器发出的光束在被测物体表面形成一个光点,经被测物体表面漫反射后入射到 CCD ( charge coupled device) 像面( 线) 。利用图像检测技术,获得成像光斑的中心坐标,通过已标定数值的数学模型计算得到被测物体表面的三维坐标。

为了实现对被测物体的完整三维测量,需要采用不同的扫描方式,让光点覆盖被测物表面。典型的有: 激光器二维移动扫描、激光器旋转扫描、平面镜同步扫描 、旋转棱镜扫描(以及基于 AOD( acousto optic deflector) 的无机械运动部件扫描(等。


图为 平面镜偏转式三维形貌测量原理图

②线扫描式。线扫描方式利用光源扩束后形 成的光条扫描被测物体表面,通过对获取的图像进行分析,结合光条在被测物体表面的位置得到物体三维信息。其原理与点扫描式相同,用光条代替了光点,效率得到提高; 且单一光条特征,不存在同名点匹配的问题。根据应用方式可分为双轴激光扫描法、远心扫描法和光条扫描法等。

在单线结构光的基础上增加投射光条的数量,形成了多线结构光扫描。相比较于单线结构光法系统的测量速度更高。一般用双相机约束或深度约束来消除多线之间的误匹配问题。


图 多线结构光法

③面结构光式。面结构光三维测量需要将二维结构光图案( 光条、光栅或其他光图样) 投射到被测物体表面上,通过对采集编码图样分析计算得到物体的表面三维信息。每次可以获取被测对象上一个区域的三维信息,所以测量效率在所有结构光方法中最高。系统中无运动部件,编码光与接收器的相对位置不变。

面结构光的编码方式可以分为空间编码和时间编码。空间编码只有一种投射模式,常见的有: 彩色条纹和散斑等。时间编码包含两种及以上的投射模式,分时投射,常见的有: 二进制编码、格雷码和正弦条纹等。


图 面结构光法

三、主被动结合的视觉测量法

主被动结合视觉测量是在被动视觉测量系统中增加投射器,投射特定光源模式到被测物体表面,借助于投射的光源模式,可以解决被动双目视觉中的匹配难题,从而提高匹配精度及测量精度。投射器提供了便于测量的特征,其与相机之间的关系不要求已知。

来源:新机器视觉


申明:感谢原创作者的辛勤付出。本号转载的文章均会在文中注明,若遇到版权问题请联系我们处理。


 

----与智者为伍 为创新赋能----


【说明】欢迎企业和个人洽谈合作,投稿发文。欢迎联系我们
诚招运营合伙人 ,对新媒体感兴趣,对光电产业和行业感兴趣。非常有意者通过以下方式联我们!条件待遇面谈
投稿丨合作丨咨询

联系邮箱:uestcwxd@126.com

QQ:493826566


评论
  • 我的一台很多年前人家不要了的九十年代SONY台式组合音响,接手时只有CD功能不行了,因为不需要,也就没修,只使用收音机、磁带机和外接信号功能就够了。最近五年在外地,就断电闲置,没使用了。今年9月回到家里,就一个劲儿地忙着收拾家当,忙了一个多月,太多事啦!修了电气,清理了闲置不用了的电器和电子,就是一个劲儿地扔扔扔!几十年的“工匠式”收留收藏,只能断舍离,拆解不过来的了。一天,忽然感觉室内有股臭味,用鼻子的嗅觉功能朝着臭味重的方向寻找,觉得应该就是这台组合音响?怎么会呢?这无机物的东西不会腐臭吧?
    自做自受 2024-12-10 16:34 129浏览
  • 智能汽车可替换LED前照灯控制运行的原理涉及多个方面,包括自适应前照灯系统(AFS)的工作原理、传感器的应用、步进电机的控制以及模糊控制策略等。当下时代的智能汽车灯光控制系统通过车载网关控制单元集中控制,表现特殊点的有特斯拉,仅通过前车身控制器,整个系统就包括了灯光旋转开关、车灯变光开关、左LED前照灯总成、右LED前照灯总成、转向柱电子控制单元、CAN数据总线接口、组合仪表控制单元、车载网关控制单元等器件。变光开关、转向开关和辅助操作系统一般连为一体,开关之间通过内部线束和转向柱装置连接为多,
    lauguo2013 2024-12-10 15:53 65浏览
  • 概述 通过前面的研究学习,已经可以在CycloneVGX器件中成功实现完整的TDC(或者说完整的TDL,即延时线),测试结果也比较满足,解决了超大BIN尺寸以及大量0尺寸BIN的问题,但是还是存在一些之前系列器件还未遇到的问题,这些问题将在本文中进行详细描述介绍。 在五代Cyclone器件内部系统时钟受限的情况下,意味着大量逻辑资源将被浪费在于实现较大长度的TDL上面。是否可以找到方法可以对此前TDL的长度进行优化呢?本文还将探讨这个问题。TDC前段BIN颗粒堵塞问题分析 将延时链在逻辑中实现后
    coyoo 2024-12-10 13:28 89浏览
  • 全球知名半导体制造商ROHM Co., Ltd.(以下简称“罗姆”)宣布与Taiwan Semiconductor Manufacturing Company Limited(以下简称“台积公司”)就车载氮化镓功率器件的开发和量产事宜建立战略合作伙伴关系。通过该合作关系,双方将致力于将罗姆的氮化镓器件开发技术与台积公司业界先进的GaN-on-Silicon工艺技术优势结合起来,满足市场对高耐压和高频特性优异的功率元器件日益增长的需求。氮化镓功率器件目前主要被用于AC适配器和服务器电源等消费电子和
    电子资讯报 2024-12-10 17:09 78浏览
  • 肖特基具有很多的应用场景, 可以做同步整流,防止电流倒灌和电源反接等,但是随着电源电流的增大,肖特基导通正向压降0.3~0.7v的劣势也越发明显,产生了很多的热,对于工程师的散热设计是个考验,增加了工程师的设计难度和产品成本,目前一种新的理想二极管及其控制器,目前正在得到越来越广泛的应用- BMS,无人机,PLC,安防,家电,电动工具,汽车等都在快速普及理想二极管有三种架构,内置电荷泵的类似无锡明芯微MX5050T这种,驱动能力会弱点,静态功耗200uA,外置电荷泵MX74700T的这种驱动能力
    王萌 2024-12-10 08:51 85浏览
  • 【萤火工场CEM5826-M11测评】OLED显示雷达数据本文结合之前关于串口打印雷达监测数据的研究,进一步扩展至 OLED 屏幕显示。该项目整体分为两部分: 一、框架显示; 二、数据采集与填充显示。为了减小 MCU 负担,采用 局部刷新 的方案。1. 显示框架所需库函数 Wire.h 、Adafruit_GFX.h 、Adafruit_SSD1306.h . 代码#include #include #include #include "logo_128x64.h"#include "logo_
    无垠的广袤 2024-12-10 14:03 68浏览
  • 习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-10 16:13 91浏览
  • 本文介绍Linux系统(Ubuntu/Debian通用)挂载exfat格式U盘的方法,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。修改对应的内核配置文件# 进入sdk目录cdrk3562_linux# 编辑内核配置文件vi./kernel-5.10/arch/arm64/configs/rockchip_linux_defconfig注:不清楚内核使用哪个defc
    Industio_触觉智能 2024-12-10 09:44 89浏览
  •         在有电流流过的导线周围会感生出磁场,再用霍尔器件检测由电流感生的磁场,即可测出产生这个磁场的电流的量值。由此就可以构成霍尔电流、电压传感器。因为霍尔器件的输出电压与加在它上面的磁感应强度以及流过其中的工作电流的乘积成比例,是一个具有乘法器功能的器件,并且可与各种逻辑电路直接接口,还可以直接驱动各种性质的负载。因为霍尔器件的应用原理简单,信号处理方便,器件本身又具有一系列的du特优点,所以在变频器中也发挥了非常重要的作用。  &nb
    锦正茂科技 2024-12-10 12:57 69浏览
  •         霍尔传感器是根据霍尔效应制作的一种磁场传感器。霍尔效应是磁电效应的一种,这一现象是霍尔(A.H.Hall,1855—1938)于1879年在研究金属的导电机构时发现的。后来发现半导体、导电流体等也有这种效应,而半导体的霍尔效应比金属强得多,利用这现象制成的各种霍尔元件,广泛地应用于工业自动化技术、检测技术及信息处理等方面。霍尔效应是研究半导体材料性能的基本方法。通过霍尔效应实验测定的霍尔系数,能够判断半导体材料的导电类型、载流子浓度及载流子
    锦正茂科技 2024-12-10 11:07 64浏览
  • 在驾驶培训与考试的严谨流程中,EST580驾培驾考系统扮演着至关重要的数据角色。它不仅集成了转速监控、车速管理、转向角度测量、转向灯光控制以及手刹与安全带状态检测等多项功能,还通过高精度的OBD数据采集器实时捕捉车辆运行状态,确保学员在模拟及实际驾驶中的每一步操作都精准无误。EST580驾培驾考转速车速转向角转向灯光手刹安全带OBD数据采集器系统的重要性及其功能:1、提高评判效率:通过原车CAN协议兼容,不同车型通过刷写固件覆盖,不仅提高了考试的数字化、自动化程度,还减少了人为干预的安装需要,从
    lauguo2013 2024-12-09 16:51 101浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦