【光电智造】相机标定,你还没读过张正友标定法吗?

今日光电 2023-09-16 18:00
今日光电
       有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。欢迎来到今日光电!


----与智者为伍 为创新赋能----

论文题目:Flexible Camera Calibration By Viewing a Plane From Unknown Orientations

作者:Zhengyou Zhang

作者机构:张正友老师现在已经是受聘腾讯历史上最高专业职级——17级研究员/杰出科学家

论文链接:Flexible Camera Calibration By Viewing a Plane From Unknown Orientations

以下是维基百科对张正友老师的评价:


张正友标定方法是一种经典的相机标定方法,目前是最受欢迎的方法之一。该方法通过一种机器学习的方法,利用大量匹配的数据点像素坐标、世界坐标,基于极大似然估计拟合得到一个最优解。作者提出了一种基于平面模式观察的灵活相机标定技术,包括一个闭合解和基于最大似然准则的非线性优化程序。通过该技术能够建立径向镜头畸变模型,同时实现相机校准。该技术的优势在于灵活易用、不需要昂贵的设备,适用于实际应用。其实现对于将三维计算机视觉技术从实验室推广到实际场景应用具有促进作用。



前 言


本文的研究背景是建立在摄像机校准技术的基础上,提出了一种新的技术,在不需要高昂成本设备(如正交平面)的前提下,让普通计算机使用者也能容易、灵活地校准相机,以获取2D图像对应的3D度量信息。该技术采用了平面模式观察的方法,获得了非常好的实验结果。相较于传统校准方法和自校准方法,该方法具有灵活性和鲁棒性。该技术的主要环节是基于最大似然法的非线性优化,需要估计内外参、以及镜头畸变等若干参数。

Basic Equations - 基础方程

符号表示法



Solving Camera Calibration - 相机标定的解法

 闭式求解



最大似然估计



 处理径向畸变


这部分作者讨论了台式相机的径向畸变问题,主要讨论了径向畸变的前两项。当估计畸变系数时,可以交替考虑。通过最小二乘法求解可以求解径向畸变的系数。在获得畸变系数后,可以通过Levenberg-Marquardt算法优化其他参数的估计,以最小化估计误差的平方和。



实 验

计算机模拟

作者通过小的矩阵的奇异值分解提出了一个有效的标定方法,可以通过计算机模拟数据和真实数据进行测试。在计算机模拟数据上进行了测试,可衡量相对误差和绝对误差。此外,还研究了模型平面方向和图像数量对性能的影响。最终结果表明,使用更多的图像以及较高的模型平面方向可以获得更好的结果。



真实数据

实验结果表明,该方法在不同数量和方向的图像数据集上均表现出了稳定的校准结果,并且使用最大似然估计技术比使用闭式算法获得了更好的结果。此外,实验还证明了该方法可以应用于图像建模中,生成具有准确重建构建的茶罐模型,增强了实际应用领域的应用前景。这个基于平面标定的方法可以很好地解决相机成像中的畸变问题,具有重要的实际应用价值。





总 结

张正友老师提出的这种一种快捷、精确、灵活的基于平面标定的相机标定技术。该技术结合了闭式解和基于最大似然标准的非线性精炼方法,能够高效准确消除径向畸变,提高图像成像的质量。该技术只需要相机观察不同方向的平面模式,不需要了解其运动状态,从而极大地提高了标定的灵活性。实验结果表明,该算法具有优异的性能,可广泛应用于计算机视觉领域中需要相机标定的应用场景。


tips1:

常见的相机标定方法有以下几种:


🔹 棋盘格标定方法:使用棋盘格图案通过相机拍摄多幅图片,然后根据拍摄到的图案,在图像中计算出相机内外参数。


🔹 自然场景标定方法:利用自然场景中的一些几何特征(如墙角、边缘,桌子等)进行标定。需要使用特定的算法来检测这些特征点。


🔹 物体特征点标定方法:在标定过程中首先需要获得待测物体的三维模型,然后通过相机对物体进行多个角度的拍摄,根据拍摄到的图像和对应的三维模型计算相机内外参数。



tip2:

在进行相机标定时,需要注意以下几个方面:

🔹 采集图像时应该尽可能地涵盖标定物体的各个角度、位置和姿态,以获得更精确的标定结果。


🔹 拍摄时应该保证标定物体平整、稳定,摄像机与标定物体之间保持一定的距离,防止标定物体在拍摄过程中发生变形或偏移。


🔹 在对图像进行处理前应该保证图像的亮度、对比度等参数良好,可以通过调整曝光时间、光源等来控制图像质量。


🔹 图像处理过程中需要进行畸变校正,即对图像进行去除透镜畸变的处理,以获取更准确的图像特征点。


🔹 标定时需要根据实际情况调整标定算法的参数,例如棋盘格标定中棋盘格格子数、格子大小等。



tips3:

如何分析相机标定参数的好坏:

🔹 重投影误差(reprojection error):重投影误差是指将已知的三维标定棋盘图像点投影回对应的二维图像坐标上,再计算投影点与实际图像点之间的误差。通常情况下,重投影误差应该小于标定图像分辨率的1/10。


🔹相机内部参数矩阵:相机内部参数矩阵包括焦距、主点、畸变系数等,这些参数与相机的像平面和成像质量密切相关。较好的标定参数应该可以准确地反映出相机成像的精度和畸变情况。


🔹畸变校正效果:畸变是相机成像过程中不可避免的问题,因此需要对标定参数进行畸变校正。好的标定参数应该能够使校正后的图像达到较好的几何形态,如直线应当是直的、圆应当是圆的等。


🔹极线校正效果,双目标定极线矫正的结果也可以通过观察差异方便地评估好坏。在未经过极线矫正的图像中,同一物体在不同视角下呈现出不同的像素位置,而经过极线矫正后,两个相机的图像中对应的物体像素位置会在各自的极线上呈现出相同的位置,


🔹相机外部参数矩阵:如基线在出厂的时候应该符合相机厂商提供的规格,故也可以通过基线的误差来判断双目相机标定的参数效果。


总的来说,好的相机标定参数应该能够保证相机成像精度、畸变校正效果以及逻辑合理性。


来源:机器视觉沙龙


申明:感谢原创作者的辛勤付出。本号转载的文章均会在文中注明,若遇到版权问题请联系我们处理。


 

----与智者为伍 为创新赋能----


【说明】欢迎企业和个人洽谈合作,投稿发文。欢迎联系我们
诚招运营合伙人 ,对新媒体感兴趣,对光电产业和行业感兴趣。非常有意者通过以下方式联我们!条件待遇面谈
投稿丨合作丨咨询

联系邮箱:uestcwxd@126.com

QQ:493826566

评论
  • 在智能家居领域中,Wi-Fi、蓝牙、Zigbee、Thread与Z-Wave等无线通信协议是构建短距物联局域网的关键手段,它们常在实际应用中交叉运用,以满足智能家居生态系统多样化的功能需求。然而,这些协议之间并未遵循统一的互通标准,缺乏直接的互操作性,在进行组网时需要引入额外的网关作为“翻译桥梁”,极大地增加了系统的复杂性。 同时,Apple HomeKit、SamSung SmartThings、Amazon Alexa、Google Home等主流智能家居平台为了提升市占率与消费者
    华普微HOPERF 2025-01-06 17:23 198浏览
  •  在全球能源结构加速向清洁、可再生方向转型的今天,风力发电作为一种绿色能源,已成为各国新能源发展的重要组成部分。然而,风力发电系统在复杂的环境中长时间运行,对系统的安全性、稳定性和抗干扰能力提出了极高要求。光耦(光电耦合器)作为一种电气隔离与信号传输器件,凭借其优秀的隔离保护性能和信号传输能力,已成为风力发电系统中不可或缺的关键组件。 风力发电系统对隔离与控制的需求风力发电系统中,包括发电机、变流器、变压器和控制系统等多个部分,通常工作在高压、大功率的环境中。光耦在这里扮演了
    晶台光耦 2025-01-08 16:03 52浏览
  • 本文介绍Linux系统更换开机logo方法教程,通用RK3566、RK3568、RK3588、RK3576等开发板,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。制作图片开机logo图片制作注意事项(1)图片必须为bmp格式;(2)图片大小不能大于4MB;(3)BMP位深最大是32,建议设置为8;(4)图片名称为logo.bmp和logo_kernel.bmp;开机
    Industio_触觉智能 2025-01-06 10:43 93浏览
  • 根据Global Info Research项目团队最新调研,预计2030年全球封闭式电机产值达到1425百万美元,2024-2030年期间年复合增长率CAGR为3.4%。 封闭式电机是一种电动机,其外壳设计为密闭结构,通常用于要求较高的防护等级的应用场合。封闭式电机可以有效防止外部灰尘、水分和其他污染物进入内部,从而保护电机的内部组件,延长其使用寿命。 环洋市场咨询机构出版的调研分析报告【全球封闭式电机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球封闭式电机总体规
    GIRtina 2025-01-06 11:10 123浏览
  • 每日可见的315MHz和433MHz遥控模块,你能分清楚吗?众所周知,一套遥控设备主要由发射部分和接收部分组成,发射器可以将控制者的控制按键经过编码,调制到射频信号上面,然后经天线发射出无线信号。而接收器是将天线接收到的无线信号进行解码,从而得到与控制按键相对应的信号,然后再去控制相应的设备工作。当前,常见的遥控设备主要分为红外遥控与无线电遥控两大类,其主要区别为所采用的载波频率及其应用场景不一致。红外遥控设备所采用的射频信号频率一般为38kHz,通常应用在电视、投影仪等设备中;而无线电遥控设备
    华普微HOPERF 2025-01-06 15:29 162浏览
  • 彼得·德鲁克被誉为“现代管理学之父”,他的管理思想影响了无数企业和管理者。然而,关于他的书籍分类,一种流行的说法令人感到困惑:德鲁克一生写了39本书,其中15本是关于管理的,而其中“专门写工商企业或为企业管理者写的”只有两本——《为成果而管理》和《创新与企业家精神》。这样的表述广为流传,但深入探讨后却发现并不完全准确。让我们一起重新审视这一说法,解析其中的矛盾与根源,进而重新认识德鲁克的管理思想及其著作的真正价值。从《创新与企业家精神》看德鲁克的视角《创新与企业家精神》通常被认为是一本专为企业管
    优思学院 2025-01-06 12:03 155浏览
  • 「他明明跟我同梯进来,为什么就是升得比我快?」许多人都有这样的疑问:明明就战绩也不比隔壁同事差,升迁之路却比别人苦。其实,之间的差异就在于「领导力」。並非必须当管理者才需要「领导力」,而是散发领导力特质的人,才更容易被晓明。许多领导力和特质,都可以通过努力和学习获得,因此就算不是天生的领导者,也能成为一个具备领导魅力的人,进而被老板看见,向你伸出升迁的橘子枝。领导力是什么?领导力是一种能力或特质,甚至可以说是一种「影响力」。好的领导者通常具备影响和鼓励他人的能力,并导引他们朝着共同的目标和愿景前
    优思学院 2025-01-08 14:54 56浏览
  • 村田是目前全球量产硅电容的领先企业,其在2016年收购了法国IPDiA头部硅电容器公司,并于2023年6月宣布投资约100亿日元将硅电容产能提升两倍。以下内容主要来自村田官网信息整理,村田高密度硅电容器采用半导体MOS工艺开发,并使用3D结构来大幅增加电极表面,因此在给定的占位面积内增加了静电容量。村田的硅技术以嵌入非结晶基板的单片结构为基础(单层MIM和多层MIM—MIM是指金属 / 绝缘体/ 金属) 村田硅电容采用先进3D拓扑结构在100um内,使开发的有效静电容量面积相当于80个
    知白 2025-01-07 15:02 140浏览
  • 大模型的赋能是指利用大型机器学习模型(如深度学习模型)来增强或改进各种应用和服务。这种技术在许多领域都显示出了巨大的潜力,包括但不限于以下几个方面: 1. 企业服务:大模型可以用于构建智能客服系统、知识库问答系统等,提升企业的服务质量和运营效率。 2. 教育服务:在教育领域,大模型被应用于个性化学习、智能辅导、作业批改等,帮助教师减轻工作负担,提高教学质量。 3. 工业智能化:大模型有助于解决工业领域的复杂性和不确定性问题,尽管在认知能力方面尚未完全具备专家级的复杂决策能力。 4. 消费
    丙丁先生 2025-01-07 09:25 113浏览
  • 本文介绍编译Android13 ROOT权限固件的方法,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。关闭selinux修改此文件("+"号为修改内容)device/rockchip/common/BoardConfig.mkBOARD_BOOT_HEADER_VERSION ?= 2BOARD_MKBOOTIMG_ARGS :=BOARD_PREBUILT_DTB
    Industio_触觉智能 2025-01-08 00:06 88浏览
  • 根据环洋市场咨询(Global Info Research)项目团队最新调研,预计2030年全球无人机锂电池产值达到2457百万美元,2024-2030年期间年复合增长率CAGR为9.6%。 无人机锂电池是无人机动力系统中存储并释放能量的部分。无人机使用的动力电池,大多数是锂聚合物电池,相较其他电池,锂聚合物电池具有较高的能量密度,较长寿命,同时也具有良好的放电特性和安全性。 全球无人机锂电池核心厂商有宁德新能源科技、欣旺达、鹏辉能源、深圳格瑞普和EaglePicher等,前五大厂商占有全球
    GIRtina 2025-01-07 11:02 118浏览
  • 故障现象一辆2017款东风风神AX7车,搭载DFMA14T发动机,累计行驶里程约为13.7万km。该车冷起动后怠速运转正常,热机后怠速运转不稳,组合仪表上的发动机转速表指针上下轻微抖动。 故障诊断 用故障检测仪检测,发动机控制单元中无故障代码存储;读取发动机数据流,发现进气歧管绝对压力波动明显,有时能达到69 kPa,明显偏高,推断可能的原因有:进气系统漏气;进气歧管绝对压力传感器信号失真;发动机机械故障。首先从节气门处打烟雾,没有发现进气管周围有漏气的地方;接着拔下进气管上的两个真空
    虹科Pico汽车示波器 2025-01-08 16:51 64浏览
  • 这篇内容主要讨论三个基本问题,硅电容是什么,为什么要使用硅电容,如何正确使用硅电容?1.  硅电容是什么首先我们需要了解电容是什么?物理学上电容的概念指的是给定电位差下自由电荷的储藏量,记为C,单位是F,指的是容纳电荷的能力,C=εS/d=ε0εrS/4πkd(真空)=Q/U。百度百科上电容器的概念指的是两个相互靠近的导体,中间夹一层不导电的绝缘介质。通过观察电容本身的定义公式中可以看到,在各个变量中比较能够改变的就是εr,S和d,也就是介质的介电常数,金属板有效相对面积以及距离。当前
    知白 2025-01-06 12:04 214浏览
  • By Toradex 秦海1). 简介嵌入式平台设备基于Yocto Linux 在开发后期量产前期,为了安全以及提高启动速度等考虑,希望将 ARM 处理器平台的 Debug Console 输出关闭,本文就基于 NXP i.MX8MP ARM 处理器平台来演示相关流程。 本文所示例的平台来自于 Toradex Verdin i.MX8MP 嵌入式平台。  2. 准备a). Verdin i.MX8MP ARM核心版配合Dahlia载板并
    hai.qin_651820742 2025-01-07 14:52 105浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦