如何进行物体检测?

原创 TsinghuaJoking 2024-07-31 08:32
一、前言

  在智能车比赛中,车模为了完成任务,主要是解决两个问题。一个是能够识别赛道,并通过三个福来轮的转动,使得车模能够始终沿着赛道前行。第二个就是识别到赛道上的颜色圆盘。一个圆盘是障碍,绿色,一个圆盘是赛道终点,紫色。除此之外,有的时候,赛道上还会出现别的颜色的障碍圆盘,或者是白色的圆盘。这种白色圆盘是允许车模直接通过,相当于将连续的引导线中间出现了断续的部分。白色圆盘还有凸起,会使得车模运动出现抖动。考察车模运动的稳定性。为了能够检测引导线和彩色圆盘,需要我们对于 OpenMV 中的色块检测功能进行学习。下面通过 OpenMV 的示例程序,介绍色块检测函数的应用。

二、示例程序

  在 连通OpenMV模块之后,可以打开 示例程序中 图像处理 颜色跟踪中的相关示例程序。先打开单个色块检测程序。可以学习相关函数功能。在智能视觉模块前 摆放着几种不同颜色的物体。检测和定位这些物体,可以根据它们 颜色、 大小、形状来进行区分。通过设置检测的不同参数,可以检测出我们需要的物体。

  程序运行之后,可以看到此时,OpenMV 在拍摄到的场景中,找到了红色色块。并在串口终端中显示了处理图像的速度。下面我们来介绍一下这个简单的物体检测的程序结构。在程序开始部分,定义了一个链表。其中包含有三个元组,分别表明了三个颜色检测参加范围。,前面有一个 索引标号变量,在程序中,通过这个变量标明链表中的颜色参数。下面这些语句我们已经熟悉,用于初始化摄像头的参数,请大家注意,后面对于摄像头的增益和白平衡的功能都禁止了。这在物体检测应用中,是为了保证所检测颜色范围不随着环境光线的影响而发生变化。

  下面是程序的循环主体。使用 clock 来记录循环程序的开始时间,下面,调用摄像头拍摄函数,获得一副图像。接下来,调用图像中 色块检测函数,来获得需要搜索的物体位置、大小和方向。其中第一个参数,给出了检测色块的颜色范围,使用 index 来定义前面列表中的颜色范围参数。接下来的参数,定义了色块像素的最小值,下面的参数定义了覆盖色块矩形的面积最小值。这两个参数规定了需要检测色块的大小。后面的 merge 参数,设定为 true。则会将相互重叠的色块进行合并。

  接下来,则是对搜索到的色块结果进行绘制。其中所使用到的图像绘制函数,在这里就不一一介绍了。其中,调用了色块的 elongatiuon 函数,来判断色块的形状是接近于圆形,还是窄的线条。

  用于区分物体的参数中,颜色是显著的一个特征。对于颜色的描述,这里使用了是描述颜色的 LAB 颜色空间,它的前面两个参数,定义了L参数,表明颜色的亮度范围,中间的参数定义了 A 参数,是红绿范围,第三个是 B 参数,是定义了 蓝黄范围。关于 颜色空间的 LAB 的定义和转换方式,这里就不进行介绍了。只剩下一个问题,那就是我们如何能够非常方便的确定,需要检测的物体对应的 LAB 参数范围呢?

三、参数修改

  可以使用 工具菜单中的 机器视觉 中的 阈值编辑器 惨淡帮助我们确定检测物体的颜色范围。将第一对 和第二对参数的范围都扩展到最大,修改第三对参数,它对应蓝黄颜色,将它的范围修改到右边,对应黄色范围。可以看到图像中的红色物体被分割出来,调整这个参数,是分割出的黄色物体最大,其它杂色最小,这就是最优的颜色范围参数。这里给出了 LAB 阈值范围,将它拷贝到剪切板,粘贴到应用程序,便可以看到此时,程序显示检测到了黄色的物体。

  下面,将第三对参数,修改到左边,对应蓝色区域,此时,检测区域中包括有边界的蓝色背景 以及白纸上的蓝色物体。修改参数之后,可以看到程序检测到了边界的背景区域。在缓冲区中,将绿色物体选择,可以看到下面对应 LAB颜色直方图的范围。应用这个范围,设置第二对参数,可以看到绿色物体被分割出来。应用这个参数,程序检测出绿色物体。

  大家可以根据前面介绍的方法,来检测图片中其它的物体,这里,有两个区域都是红色,可以通过修改色块大小参数,来剔除小的红色,只留下大的红色色块。

四、多种颜色检测

  可以打开示例程序 图像处理 颜色跟踪中的 多种颜色检测程序,在前面阈值参数中定义了三个颜色检测阈值范围。利用前面的方法,分别得到红色、 黄色、绿色的颜色范围,将他们替换前面颜色阈值参数。程序运行之后,会发现最终只是将红色 和 黄色检测出来了。这可能是因为绿色区域比较小,修改检测物体像素和区域像素这两个参数,将它们降低到 100,运行之后可以看到,较小的绿色区域也会被检测出来了。

  如果将物体像素参数进一步减小,比如这里将它们减小到 20,可以看到,图像中,最右侧的红色LED 也会被检测出来了。

  结 ※

  文介绍了OpenMV中 图像处理的色块检测函数的应用,可以通过设定检测颜色、大小、形状等参数,来分割出图片中感兴趣的区域。可以获得区域的中心位置,大小以及方向,利用这些参数可以引导智能车完成运动控制,基于此,大家可以测试对于黑色的引导线的检测方法。这样,便可以完成智能车的比赛任务。

参考资料
[1]

清华大学自动化系科技营-暨智能机器人挑战赛-学习方略: https://zhuoqing.blog.csdn.net/article/details/140378536


TsinghuaJoking 这是一个公众号,它不端、不装,与你同游在课下、课上。 卓晴博士,清华大学中央主楼 626A。010-62773349, 13501115467,zhuoqing@tsinghua.edu.cn
评论
  • 一个真正的质量工程师(QE)必须将一件产品设计的“意图”与系统的可制造性、可服务性以及资源在现实中实现设计和产品的能力结合起来。所以,可以说,这确实是一种工程学科。我们常开玩笑说,质量工程师是工程领域里的「侦探」、「警察」或「律师」,守护神是"墨菲”,信奉的哲学就是「墨菲定律」。(注:墨菲定律是一种启发性原则,常被表述为:任何可能出错的事情最终都会出错。)做质量工程师的,有时会不受欢迎,也会被忽视,甚至可能遭遇主动或被动的阻碍,而一旦出了问题,责任往往就落在质量工程师的头上。虽然质量工程师并不负
    优思学院 2025-01-09 11:48 28浏览
  •  在全球能源结构加速向清洁、可再生方向转型的今天,风力发电作为一种绿色能源,已成为各国新能源发展的重要组成部分。然而,风力发电系统在复杂的环境中长时间运行,对系统的安全性、稳定性和抗干扰能力提出了极高要求。光耦(光电耦合器)作为一种电气隔离与信号传输器件,凭借其优秀的隔离保护性能和信号传输能力,已成为风力发电系统中不可或缺的关键组件。 风力发电系统对隔离与控制的需求风力发电系统中,包括发电机、变流器、变压器和控制系统等多个部分,通常工作在高压、大功率的环境中。光耦在这里扮演了
    晶台光耦 2025-01-08 16:03 80浏览
  • 在过去十年中,自动驾驶和高级驾驶辅助系统(AD/ADAS)软件与硬件的快速发展对多传感器数据采集的设计需求提出了更高的要求。然而,目前仍缺乏能够高质量集成多传感器数据采集的解决方案。康谋ADTF正是应运而生,它提供了一个广受认可和广泛引用的软件框架,包含模块化的标准化应用程序和工具,旨在为ADAS功能的开发提供一站式体验。一、ADTF的关键之处!无论是奥迪、大众、宝马还是梅赛德斯-奔驰:他们都依赖我们不断发展的ADTF来开发智能驾驶辅助解决方案,直至实现自动驾驶的目标。从新功能的最初构思到批量生
    康谋 2025-01-09 10:04 24浏览
  • 本文介绍编译Android13 ROOT权限固件的方法,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。关闭selinux修改此文件("+"号为修改内容)device/rockchip/common/BoardConfig.mkBOARD_BOOT_HEADER_VERSION ?= 2BOARD_MKBOOTIMG_ARGS :=BOARD_PREBUILT_DTB
    Industio_触觉智能 2025-01-08 00:06 100浏览
  • By Toradex 秦海1). 简介嵌入式平台设备基于Yocto Linux 在开发后期量产前期,为了安全以及提高启动速度等考虑,希望将 ARM 处理器平台的 Debug Console 输出关闭,本文就基于 NXP i.MX8MP ARM 处理器平台来演示相关流程。 本文所示例的平台来自于 Toradex Verdin i.MX8MP 嵌入式平台。  2. 准备a). Verdin i.MX8MP ARM核心版配合Dahlia载板并
    hai.qin_651820742 2025-01-07 14:52 115浏览
  • 在智能网联汽车中,各种通信技术如2G/3G/4G/5G、GNSS(全球导航卫星系统)、V2X(车联网通信)等在行业内被广泛使用。这些技术让汽车能够实现紧急呼叫、在线娱乐、导航等多种功能。EMC测试就是为了确保在复杂电磁环境下,汽车的通信系统仍然可以正常工作,保护驾乘者的安全。参考《QCT-基于LTE-V2X直连通信的车载信息交互系统技术要求及试验方法-1》标准10.5电磁兼容试验方法,下面将会从整车功能层面为大家解读V2X整车电磁兼容试验的过程。测试过程揭秘1. 设备准备为了进行电磁兼容试验,技
    北汇信息 2025-01-09 11:24 23浏览
  • 1月7日-10日,2025年国际消费电子产品展览会(CES 2025)盛大举行,广和通发布Fibocom AI Stack,赋智千行百业端侧应用。Fibocom AI Stack提供集高性能模组、AI工具链、高性能推理引擎、海量模型、支持与服务一体化的端侧AI解决方案,帮助智能设备快速实现AI能力商用。为适应不同端侧场景的应用,AI Stack具备海量端侧AI模型及行业端侧模型,基于不同等级算力的芯片平台或模组,Fibocom AI Stack可将TensorFlow、PyTorch、ONNX、
    物吾悟小通 2025-01-08 18:17 31浏览
  • 根据环洋市场咨询(Global Info Research)项目团队最新调研,预计2030年全球中空长航时无人机产值达到9009百万美元,2024-2030年期间年复合增长率CAGR为8.0%。 环洋市场咨询机构出版了的【全球中空长航时无人机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球中空长航时无人机总体规模,包括产量、产值、消费量、主要生产地区、主要生产商及市场份额,同时分析中空长航时无人机市场主要驱动因素、阻碍因素、市场机遇、挑战、新产品发布等。报告从中空长航时
    GIRtina 2025-01-09 10:35 23浏览
  • 村田是目前全球量产硅电容的领先企业,其在2016年收购了法国IPDiA头部硅电容器公司,并于2023年6月宣布投资约100亿日元将硅电容产能提升两倍。以下内容主要来自村田官网信息整理,村田高密度硅电容器采用半导体MOS工艺开发,并使用3D结构来大幅增加电极表面,因此在给定的占位面积内增加了静电容量。村田的硅技术以嵌入非结晶基板的单片结构为基础(单层MIM和多层MIM—MIM是指金属 / 绝缘体/ 金属) 村田硅电容采用先进3D拓扑结构在100um内,使开发的有效静电容量面积相当于80个
    知白 2025-01-07 15:02 150浏览
  • 「他明明跟我同梯进来,为什么就是升得比我快?」许多人都有这样的疑问:明明就战绩也不比隔壁同事差,升迁之路却比别人苦。其实,之间的差异就在于「领导力」。並非必须当管理者才需要「领导力」,而是散发领导力特质的人,才更容易被晓明。许多领导力和特质,都可以通过努力和学习获得,因此就算不是天生的领导者,也能成为一个具备领导魅力的人,进而被老板看见,向你伸出升迁的橘子枝。领导力是什么?领导力是一种能力或特质,甚至可以说是一种「影响力」。好的领导者通常具备影响和鼓励他人的能力,并导引他们朝着共同的目标和愿景前
    优思学院 2025-01-08 14:54 82浏览
  • 故障现象一辆2017款东风风神AX7车,搭载DFMA14T发动机,累计行驶里程约为13.7万km。该车冷起动后怠速运转正常,热机后怠速运转不稳,组合仪表上的发动机转速表指针上下轻微抖动。 故障诊断 用故障检测仪检测,发动机控制单元中无故障代码存储;读取发动机数据流,发现进气歧管绝对压力波动明显,有时能达到69 kPa,明显偏高,推断可能的原因有:进气系统漏气;进气歧管绝对压力传感器信号失真;发动机机械故障。首先从节气门处打烟雾,没有发现进气管周围有漏气的地方;接着拔下进气管上的两个真空
    虹科Pico汽车示波器 2025-01-08 16:51 92浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2025-01-09 09:58 25浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦