应用笔记|STM32MP1序列产品连接MIPI®CSI-2摄像头

STM32单片机 2023-03-14 18:00

本应用笔记提供关于如何连接 STM32MP1 系列产品与 MIPI CSI-2 摄像头的信息。STM32MP1 系列产品(如 STM32 高性能MCU)可通过其 DCMI(数码相机模块接口)并行接口寻址 CMOS 摄像头传感器。但是,得益于 STMIPID02 MIPI CSI-2 解串行器离散元件,可以扩展可寻址摄像头传感器的范围,如 MIPI® CSI-2 摄像头(摄像头串行接口)。





目录预览





1. 概述

2. 参考文档

3. STM32MP1 系列产品与 

    STMIPID02 MIPI CSI-2 解串器的接口连接

4.综合应用

5.与另一种 MIPI CSI-2 摄像头

   传感器的连接指南



3.STM32MP1 系列产品与 

STMIPID02 MIPI CSI-2 解串器的接口连接

STM32MP1 系列 MPU 系列产品不在本机实现 MIPI CSI-2 接口,而是内置基于 MIPI CPI 接口的 DCMI 并行端口。可通过 STMIPID02 MIPI CSI-2 解串行器对其进行连接,以便寻址任何兼容的 MIPI CSI-2 摄像头传感器设备。 


STMIPID02 MIPI CSI-2 解串行器的一端连接到 MIPI CSI-2 摄像头,另一端则连接到 STM32MP1 系列 DCMI 12位数据并行接口。框图总览如下所示。




3.1 MIPI CSI-2 与 MIPI CPI 接口的比较


请注意,与 MIPI CPI 接口相比,MIPI CSI-2 节省了引脚布局。MIPI CPI 数据端口需要至少 8 条数据线(最多 12条数据线)、1 个时钟和 2 条同步线,而 MIPI CSI-2 数据端口的每个通道需要 2 线差分对,还需要时钟通道。



3.2 电源的注意事项


考虑到 STMIPID02 解串行器桥外部供电引脚的电压被限制在 1.8 V,为避免对 DCMI 接口时钟和 I2C 信号使用电平转换器,STM32MP1 系列产品的供电电压必须是 VDD = 1.8 V(而不是标称的 3.3 V)。STM32MP1 系列产品的所有不同电压均通过外部 PMIC(电源管理集成电路)模块供应。整体示意图详见 DH96 板信息 [R18]。为了给 STM32MP1 系列产品配置 VDD = 1.8 V 的供电电压,请参见 [R4]。 


对于 OV5640 摄像头传感器,I/O 供电电压 VDD 和 LDO(低压降调节器)外部电源电压均设置为 1.8 V。对于模拟逻辑,还必须提供 2.8 V 电压和外部电源。



3.3 STM32MP1 系列产品通过 

DCMI 实现的视频吞吐率性能

采用 D-PHY 时,MIPI CSI-2.1 接口理论上可以达到每通道最高 2.5 Gbyte/s 的数据吞吐率。在并行接口上很难达到这一水平,原因首先是通用器件(如 STM32MP1 系列产品,只有 MIPI CPI 接口)上的 I/O 引脚压摆率限制。其二,MPU 需要足够快地处理大量数据,以便维持摄像头的连续帧率。 


例如,5 Mpixel 传感器的每像素位数为 16 位,帧率为 30 帧/s,得出连续处理的数据吞吐率为 300 Mbyte/s。在并行接口上很难实现这个目标。因此,必须降低传感器图像数据吞吐率,方法是调整图像帧率、分辨率和像素深度(或结合使用)。 


从 OV5640 传感器到 STM32MP1 系列 MPU,再到 STMIPID02 解串行器桥,可以连续用以下分辨率和帧率采集图像。 

• 720 p 1280 × 720 RGB 565 27 fps 

• 720 p 1280 × 720 YUYV 27 fps 

• 720 p 1280 × 720 JPEG 27 fps 

• HD 1920 × 1080 RGB 565 13 fps 

• HD 1920 ×1080 YUYV 13 fps 

• HD 1920 ×1080 JPEG 6 fps 

• 5 Mpixel 2592 × 1944 RGB565 3 fps 

• 5 Mpixel 2592 × 1944 YUYV 3 fps 

• 5 Mpixel 2592 ×1944 JPEG 3 fps 


达到的最高性能为 24 Mpixel/s,相当于帧率为 18.5 fps 的 1.3 Mpixel。如前文所述,这一限制主要源于 DCMI 内部延迟限制的影响。



3.4 STMIPID02 Linux 驱动


STMIPID02 MIPI CSI-2 解串行器桥用于寻址各种面向消费品市场特别是移动电话应用的 MIPI CSI-2 传感器。为了满足人工智能领域日益增长的将这类传感器从产业向 IoT(物联网)市场转化的需求,STMIPID02 驱动已向上同步到 Linux 社区。在基于 Linux 的应用中可以免费获取它。


STMIPID02 桥驱动包含在 STMicroelectronicsOpenSTLinux 交付封装中(1.1.0 及以上版本)。


4、综合应用

摄像头演示程序基于 OpenSTLinux 发行软件包,是 GTK 演示启动器应用的一部分。它被移植到 DH96 板上,DH96 Avenger 板配备 STM32MP157A 和 STMIPID02,而 D3 Engineering DesignCore® 摄像头中间板则配有摄像头传感器 OV5640。



4.1 DH Avenger96 板概述


DH96 Avenger 母板集成了: 

• 包含 STM32MP157AAC 微处理器的 ADH Core SOM 模块 

• STPMIC1A 电源模块 

• 2 MB × 512 MB 的 DDR3L RAM 

• STMIPID02 解串行器桥 

• 2-MB SPI 启动闪存• 连接和扩展连接器,用于连接 D3 DesignCore 摄像头中间板 OV5640。 

有关详细信息,请参见[R18]



4.2 DH D3 Engineering 

DesignCore 板概述


本款中间板旨在让 Avenger96 板通过高速和低速扩展连接器适配 STM32MP157 系列。由此便可通过 MIPI CSI-2 连接 OV5640 模块照相机,从而达到评估目的。 


此板件可连接串行控制台,例如 GPIO PD1 和 Pb2(对应于 UART4_TX 和 UART4_RX),并用于显示 Linux 内核和启动阶段。选配 USB/UART 桥可通过这些引脚连接控制台和主机 PC。

本应用笔记旨在使用 DH96 Avenger 板演示 STM32MP1 系列产品通过 STMIPID02 MIPI CSI-2 解串行器寻址 5 Mpixel OV5640MIPI CSI-2 摄像头传感器的能力。由于文章篇幅有限仅展示部分,完整内容请点击“阅读原文”下载原文档。


长按扫码关注公众号 


更多资讯,尽在STM32


点击“阅读原文”,可下载原文档

STM32单片机 ST MCU (产品+工具+资料+技术+市场+活动)x 您的关注x您的支持 = STM32 单片机蝴蝶乐园
评论
  • 本文介绍瑞芯微RK3588主板/开发板Android12系统下,APK签名文件生成方法。触觉智能EVB3588开发板演示,搭载了瑞芯微RK3588芯片,该开发板是核心板加底板设计,音视频接口、通信接口等各类接口一应俱全,可帮助企业提高产品开发效率,缩短上市时间,降低成本和设计风险。工具准备下载Keytool-ImportKeyPair工具在源码:build/target/product/security/系统初始签名文件目录中,将以下三个文件拷贝出来:platform.pem;platform.
    Industio_触觉智能 2024-12-12 10:27 76浏览
  • 一、SAE J1939协议概述SAE J1939协议是由美国汽车工程师协会(SAE,Society of Automotive Engineers)定义的一种用于重型车辆和工业设备中的通信协议,主要应用于车辆和设备之间的实时数据交换。J1939基于CAN(Controller Area Network)总线技术,使用29bit的扩展标识符和扩展数据帧,CAN通信速率为250Kbps,用于车载电子控制单元(ECU)之间的通信和控制。小北同学在之前也对J1939协议做过扫盲科普【科普系列】SAE J
    北汇信息 2024-12-11 15:45 114浏览
  • 在智能化技术快速发展当下,图像数据的采集与处理逐渐成为自动驾驶、工业等领域的一项关键技术。高质量的图像数据采集与算法集成测试都是确保系统性能和可靠性的关键。随着技术的不断进步,对于图像数据的采集、处理和分析的需求日益增长,这不仅要求我们拥有高性能的相机硬件,还要求我们能够高效地集成和测试各种算法。我们探索了一种多源相机数据采集与算法集成测试方案,能够满足不同应用场景下对图像采集和算法测试的多样化需求,确保数据的准确性和算法的有效性。一、相机组成相机一般由镜头(Lens),图像传感器(Image
    康谋 2024-12-12 09:45 80浏览
  • 时源芯微——RE超标整机定位与解决详细流程一、 初步测量与问题确认使用专业的电磁辐射测量设备,对整机的辐射发射进行精确测量。确认是否存在RE超标问题,并记录超标频段和幅度。二、电缆检查与处理若存在信号电缆:步骤一:拔掉所有信号电缆,仅保留电源线,再次测量整机的辐射发射。若测量合格:判定问题出在信号电缆上,可能是电缆的共模电流导致。逐一连接信号电缆,每次连接后测量,定位具体哪根电缆或接口导致超标。对问题电缆进行处理,如加共模扼流圈、滤波器,或优化电缆布局和屏蔽。重新连接所有电缆,再次测量
    时源芯微 2024-12-11 17:11 115浏览
  • 首先在gitee上打个广告:ad5d2f3b647444a88b6f7f9555fd681f.mp4 · 丙丁先生/香河英茂工作室中国 - Gitee.com丙丁先生 (mr-bingding) - Gitee.com2024年对我来说是充满挑战和机遇的一年。在这一年里,我不仅进行了多个开发板的测评,还尝试了多种不同的项目和技术。今天,我想分享一下这一年的故事,希望能给大家带来一些启发和乐趣。 年初的时候,我开始对各种开发板进行测评。从STM32WBA55CG到瑞萨、平头哥和平海的开发板,我都
    丙丁先生 2024-12-11 20:14 75浏览
  • 应用环境与极具挑战性的测试需求在服务器制造领域里,系统整合测试(System Integration Test;SIT)是确保产品质量和性能的关键步骤。随着服务器系统的复杂性不断提升,包括:多种硬件组件、操作系统、虚拟化平台以及各种应用程序和服务的整合,服务器制造商面临着更有挑战性的测试需求。这些挑战主要体现在以下五个方面:1. 硬件和软件的高度整合:现代服务器通常包括多个处理器、内存模块、储存设备和网络接口。这些硬件组件必须与操作系统及应用软件无缝整合。SIT测试可以帮助制造商确保这些不同组件
    百佳泰测试实验室 2024-12-12 17:45 69浏览
  • 全球智能电视时代来临这年头若是消费者想随意地从各个通路中选购电视时,不难发现目前市场上的产品都已是具有智能联网功能的智能电视了,可以宣告智能电视的普及时代已到临!Google从2021年开始大力推广Google TV(即原Android TV的升级版),其他各大品牌商也都跟进推出搭载Google TV操作系统的机种,除了Google TV外,LG、Samsung、Panasonic等大厂牌也开发出自家的智能电视平台,可以看出各家业者都一致地看好这块大饼。智能电视的Wi-Fi连线怎么消失了?智能电
    百佳泰测试实验室 2024-12-12 17:33 63浏览
  • 习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-11 17:58 88浏览
  • 铁氧体芯片是一种基于铁氧体磁性材料制成的芯片,在通信、传感器、储能等领域有着广泛的应用。铁氧体磁性材料能够通过外加磁场调控其导电性质和反射性质,因此在信号处理和传感器技术方面有着独特的优势。以下是对半导体划片机在铁氧体划切领域应用的详细阐述: 一、半导体划片机的工作原理与特点半导体划片机是一种使用刀片或通过激光等方式高精度切割被加工物的装置,是半导体后道封测中晶圆切割和WLP切割环节的关键设备。它结合了水气电、空气静压高速主轴、精密机械传动、传感器及自动化控制等先进技术,具有高精度、高
    博捷芯划片机 2024-12-12 09:16 86浏览
  • 习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记
    youyeye 2024-12-12 10:13 45浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦