如何进行物体检测?

原创 TsinghuaJoking 2024-07-31 08:32
一、前言

  在智能车比赛中,车模为了完成任务,主要是解决两个问题。一个是能够识别赛道,并通过三个福来轮的转动,使得车模能够始终沿着赛道前行。第二个就是识别到赛道上的颜色圆盘。一个圆盘是障碍,绿色,一个圆盘是赛道终点,紫色。除此之外,有的时候,赛道上还会出现别的颜色的障碍圆盘,或者是白色的圆盘。这种白色圆盘是允许车模直接通过,相当于将连续的引导线中间出现了断续的部分。白色圆盘还有凸起,会使得车模运动出现抖动。考察车模运动的稳定性。为了能够检测引导线和彩色圆盘,需要我们对于 OpenMV 中的色块检测功能进行学习。下面通过 OpenMV 的示例程序,介绍色块检测函数的应用。

二、示例程序

  在 连通OpenMV模块之后,可以打开 示例程序中 图像处理 颜色跟踪中的相关示例程序。先打开单个色块检测程序。可以学习相关函数功能。在智能视觉模块前 摆放着几种不同颜色的物体。检测和定位这些物体,可以根据它们 颜色、 大小、形状来进行区分。通过设置检测的不同参数,可以检测出我们需要的物体。

  程序运行之后,可以看到此时,OpenMV 在拍摄到的场景中,找到了红色色块。并在串口终端中显示了处理图像的速度。下面我们来介绍一下这个简单的物体检测的程序结构。在程序开始部分,定义了一个链表。其中包含有三个元组,分别表明了三个颜色检测参加范围。,前面有一个 索引标号变量,在程序中,通过这个变量标明链表中的颜色参数。下面这些语句我们已经熟悉,用于初始化摄像头的参数,请大家注意,后面对于摄像头的增益和白平衡的功能都禁止了。这在物体检测应用中,是为了保证所检测颜色范围不随着环境光线的影响而发生变化。

  下面是程序的循环主体。使用 clock 来记录循环程序的开始时间,下面,调用摄像头拍摄函数,获得一副图像。接下来,调用图像中 色块检测函数,来获得需要搜索的物体位置、大小和方向。其中第一个参数,给出了检测色块的颜色范围,使用 index 来定义前面列表中的颜色范围参数。接下来的参数,定义了色块像素的最小值,下面的参数定义了覆盖色块矩形的面积最小值。这两个参数规定了需要检测色块的大小。后面的 merge 参数,设定为 true。则会将相互重叠的色块进行合并。

  接下来,则是对搜索到的色块结果进行绘制。其中所使用到的图像绘制函数,在这里就不一一介绍了。其中,调用了色块的 elongatiuon 函数,来判断色块的形状是接近于圆形,还是窄的线条。

  用于区分物体的参数中,颜色是显著的一个特征。对于颜色的描述,这里使用了是描述颜色的 LAB 颜色空间,它的前面两个参数,定义了L参数,表明颜色的亮度范围,中间的参数定义了 A 参数,是红绿范围,第三个是 B 参数,是定义了 蓝黄范围。关于 颜色空间的 LAB 的定义和转换方式,这里就不进行介绍了。只剩下一个问题,那就是我们如何能够非常方便的确定,需要检测的物体对应的 LAB 参数范围呢?

三、参数修改

  可以使用 工具菜单中的 机器视觉 中的 阈值编辑器 惨淡帮助我们确定检测物体的颜色范围。将第一对 和第二对参数的范围都扩展到最大,修改第三对参数,它对应蓝黄颜色,将它的范围修改到右边,对应黄色范围。可以看到图像中的红色物体被分割出来,调整这个参数,是分割出的黄色物体最大,其它杂色最小,这就是最优的颜色范围参数。这里给出了 LAB 阈值范围,将它拷贝到剪切板,粘贴到应用程序,便可以看到此时,程序显示检测到了黄色的物体。

  下面,将第三对参数,修改到左边,对应蓝色区域,此时,检测区域中包括有边界的蓝色背景 以及白纸上的蓝色物体。修改参数之后,可以看到程序检测到了边界的背景区域。在缓冲区中,将绿色物体选择,可以看到下面对应 LAB颜色直方图的范围。应用这个范围,设置第二对参数,可以看到绿色物体被分割出来。应用这个参数,程序检测出绿色物体。

  大家可以根据前面介绍的方法,来检测图片中其它的物体,这里,有两个区域都是红色,可以通过修改色块大小参数,来剔除小的红色,只留下大的红色色块。

四、多种颜色检测

  可以打开示例程序 图像处理 颜色跟踪中的 多种颜色检测程序,在前面阈值参数中定义了三个颜色检测阈值范围。利用前面的方法,分别得到红色、 黄色、绿色的颜色范围,将他们替换前面颜色阈值参数。程序运行之后,会发现最终只是将红色 和 黄色检测出来了。这可能是因为绿色区域比较小,修改检测物体像素和区域像素这两个参数,将它们降低到 100,运行之后可以看到,较小的绿色区域也会被检测出来了。

  如果将物体像素参数进一步减小,比如这里将它们减小到 20,可以看到,图像中,最右侧的红色LED 也会被检测出来了。

  结 ※

  文介绍了OpenMV中 图像处理的色块检测函数的应用,可以通过设定检测颜色、大小、形状等参数,来分割出图片中感兴趣的区域。可以获得区域的中心位置,大小以及方向,利用这些参数可以引导智能车完成运动控制,基于此,大家可以测试对于黑色的引导线的检测方法。这样,便可以完成智能车的比赛任务。

参考资料
[1]

清华大学自动化系科技营-暨智能机器人挑战赛-学习方略: https://zhuoqing.blog.csdn.net/article/details/140378536


TsinghuaJoking 这是一个公众号,它不端、不装,与你同游在课下、课上。 卓晴博士,清华大学中央主楼 626A。010-62773349, 13501115467,zhuoqing@tsinghua.edu.cn
评论
  • 11-29学习笔记11-29学习笔记习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-02 23:58 90浏览
  • RDDI-DAP错误通常与调试接口相关,特别是在使用CMSIS-DAP协议进行嵌入式系统开发时。以下是一些可能的原因和解决方法: 1. 硬件连接问题:     检查调试器(如ST-Link)与目标板之间的连接是否牢固。     确保所有必要的引脚都已正确连接,没有松动或短路。 2. 电源问题:     确保目标板和调试器都有足够的电源供应。     检查电源电压是否符合目标板的规格要求。 3. 固件问题: &n
    丙丁先生 2024-12-01 17:37 111浏览
  • 国产光耦合器正以其创新性和多样性引领行业发展。凭借强大的研发能力,国内制造商推出了适应汽车、电信等领域独特需求的专业化光耦合器,为各行业的技术进步提供了重要支持。本文将重点探讨国产光耦合器的技术创新与产品多样性,以及它们在推动产业升级中的重要作用。国产光耦合器创新的作用满足现代需求的创新模式新设计正在满足不断变化的市场需求。例如,高速光耦合器满足了电信和数据处理系统中快速信号传输的需求。同时,栅极驱动光耦合器支持电动汽车(EV)和工业电机驱动器等大功率应用中的精确高效控制。先进材料和设计将碳化硅
    克里雅半导体科技 2024-11-29 16:18 183浏览
  • 作为优秀工程师的你,已身经百战、阅板无数!请先醒醒,新的项目来了,这是一个既要、又要、还要的产品需求,ARM核心板中一个处理器怎么能实现这么丰富的外围接口?踌躇之际,你偶阅此文。于是,“潘多拉”的魔盒打开了!没错,USB资源就是你打开新世界得钥匙,它能做哪些扩展呢?1.1  USB扩网口通用ARM处理器大多带两路网口,如果项目中有多路网路接口的需求,一般会选择在主板外部加交换机/路由器。当然,出于成本考虑,也可以将Switch芯片集成到ARM核心板或底板上,如KSZ9897、
    万象奥科 2024-12-03 10:24 86浏览
  • 戴上XR眼镜去“追龙”是种什么体验?2024年11月30日,由上海自然博物馆(上海科技馆分馆)与三湘印象联合出品、三湘印象旗下观印象艺术发展有限公司(下简称“观印象”)承制的《又见恐龙》XR嘉年华在上海自然博物馆重磅开幕。该体验项目将于12月1日正式对公众开放,持续至2025年3月30日。双向奔赴,恐龙IP撞上元宇宙不久前,上海市经济和信息化委员会等部门联合印发了《上海市超高清视听产业发展行动方案》,特别提到“支持博物馆、主题乐园等场所推动超高清视听技术应用,丰富线下文旅消费体验”。作为上海自然
    电子与消费 2024-11-30 22:03 103浏览
  • TOF多区传感器: ND06   ND06是一款微型多区高集成度ToF测距传感器,其支持24个区域(6 x 4)同步测距,测距范围远达5m,具有测距范围广、精度高、测距稳定等特点。适用于投影仪的无感自动对焦和梯形校正、AIoT、手势识别、智能面板和智能灯具等多种场景。                 如果用ND06进行手势识别,只需要经过三个步骤: 第一步&
    esad0 2024-12-04 11:20 94浏览
  • 遇到部分串口工具不支持1500000波特率,这时候就需要进行修改,本文以触觉智能RK3562开发板修改系统波特率为115200为例,介绍瑞芯微方案主板Linux修改系统串口波特率教程。温馨提示:瑞芯微方案主板/开发板串口波特率只支持115200或1500000。修改Loader打印波特率查看对应芯片的MINIALL.ini确定要修改的bin文件#查看对应芯片的MINIALL.ini cat rkbin/RKBOOT/RK3562MINIALL.ini修改uart baudrate参数修改以下目
    Industio_触觉智能 2024-12-03 11:28 104浏览
  •         温度传感器的精度受哪些因素影响,要先看所用的温度传感器输出哪种信号,不同信号输出的温度传感器影响精度的因素也不同。        现在常用的温度传感器输出信号有以下几种:电阻信号、电流信号、电压信号、数字信号等。以输出电阻信号的温度传感器为例,还细分为正温度系数温度传感器和负温度系数温度传感器,常用的铂电阻PT100/1000温度传感器就是正温度系数,就是说随着温度的升高,输出的电阻值会增大。对于输出
    锦正茂科技 2024-12-03 11:50 140浏览
  • 概述 说明(三)探讨的是比较器一般带有滞回(Hysteresis)功能,为了解决输入信号转换速率不够的问题。前文还提到,即便使能滞回(Hysteresis)功能,还是无法解决SiPM读出测试系统需要解决的问题。本文在说明(三)的基础上,继续探讨为SiPM读出测试系统寻求合适的模拟脉冲检出方案。前四代SiPM使用的高速比较器指标缺陷 由于前端模拟信号属于典型的指数脉冲,所以下降沿转换速率(Slew Rate)过慢,导致比较器检出出现不必要的问题。尽管比较器可以使能滞回(Hysteresis)模块功
    coyoo 2024-12-03 12:20 156浏览
  • 艾迈斯欧司朗全新“样片申请”小程序,逾160种LED、传感器、多芯片组合等产品样片一触即达。轻松3步完成申请,境内免费包邮到家!本期热荐性能显著提升的OSLON® Optimal,GF CSSRML.24ams OSRAM 基于最新芯片技术推出全新LED产品OSLON® Optimal系列,实现了显著的性能升级。该系列提供五种不同颜色的光源选项,包括Hyper Red(660 nm,PDN)、Red(640 nm)、Deep Blue(450 nm,PDN)、Far Red(730 nm)及Ho
    艾迈斯欧司朗 2024-11-29 16:55 181浏览
  • 学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&
    youyeye 2024-11-30 14:30 85浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2024-12-02 10:40 134浏览
  • 《高速PCB设计经验规则应用实践》+PCB绘制学习与验证读书首先看目录,我感兴趣的是这一节;作者在书中列举了一条经典规则,然后进行详细分析,通过公式推导图表列举说明了传统的这一规则是受到电容加工特点影响的,在使用了MLCC陶瓷电容后这一条规则已经不再实用了。图书还列举了高速PCB设计需要的专业工具和仿真软件,当然由于篇幅所限,只是介绍了一点点设计步骤;我最感兴趣的部分还是元件布局的经验规则,在这里列举如下:在这里,演示一下,我根据书本知识进行电机驱动的布局:这也算知行合一吧。对于布局书中有一句:
    wuyu2009 2024-11-30 20:30 141浏览
  • 当前,智能汽车产业迎来重大变局,随着人工智能、5G、大数据等新一代信息技术的迅猛发展,智能网联汽车正呈现强劲发展势头。11月26日,在2024紫光展锐全球合作伙伴大会汽车电子生态论坛上,紫光展锐与上汽海外出行联合发布搭载紫光展锐A7870的上汽海外MG量产车型,并发布A7710系列UWB数字钥匙解决方案平台,可应用于数字钥匙、活体检测、脚踢雷达、自动泊车等多种智能汽车场景。 联合发布量产车型,推动汽车智能化出海紫光展锐与上汽海外出行达成战略合作,联合发布搭载紫光展锐A7870的量产车型
    紫光展锐 2024-12-03 11:38 121浏览
  • 最近几年,新能源汽车愈发受到消费者的青睐,其销量也是一路走高。据中汽协公布的数据显示,2024年10月,新能源汽车产销分别完成146.3万辆和143万辆,同比分别增长48%和49.6%。而结合各家新能源车企所公布的销量数据来看,比亚迪再度夺得了销冠宝座,其10月新能源汽车销量达到了502657辆,同比增长66.53%。众所周知,比亚迪是新能源汽车领域的重要参与者,其一举一动向来为外界所关注。日前,比亚迪汽车旗下品牌方程豹汽车推出了新车方程豹豹8,该款车型一上市就迅速吸引了消费者的目光,成为SUV
    刘旷 2024-12-02 09:32 131浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦