USB3.0 UVC高清摄像头实验

小梅哥 2019-04-01 00:00

TI MCU方案：电动汽车实时控制 【TI资料】专为高压系统设计的新型MCU

介绍

基于AC6102_V2开发板的USB Video Class摄像头实验，实现了通过AC6102开发板上的USB3.0芯片将OV5640摄像头采集到的图像数据传输到PC机上，并使用UVC图像显示软件显示的功能。

主要参数指标：

USB3.0速率等级

YUV422图像格式传输

1280*720@30fps帧率

UVC介绍：

UVC，全称为：USB video class 或USB video device class。是Microsoft与另外几家设备厂商联合推出的为USB视频捕获设备定义的协议标准，目前已成为USB org标准之一。

如今的主流操作系统(如Windows XP SP2 and later, Linux 2.4.6 and later, MacOS 10.5 andlater)都已提供UVC设备驱动，因此符合UVC规格的硬件设备在不需要安装任何的驱动程序下即可在主机中正常使用。使用UVC技术的包括摄像头、数码相机、类比影像转换器、电视棒及静态影像相机等设备。

最新的UVC版本为UVC 1.5，由USB Implementers Forum定义包括基本协议及负载格式。

网络摄像头是第一个支持UVC而且也是数量最多的UVC设备，目前，操作系统只要是 Windows XP SP2 之后的版本都可以支持 UVC，当然 Vista 就更不用说了。Linux系统自2.4以后的内核都支持了大量的设备驱动，并可以支持UVC设备。

使用 UVC 的好处 USB 在 Video这块也成为一项标准了之后，硬件在各个程序之间彼此运行会更加顺利，而且也省略了驱动程序安装这一环节。

AC6102型FPGA开发板UVC摄像头实验介绍

本实验基于Cypress厂家提供的应用手册AN75779。在该应用手册中，并未使用到FPGA芯片，而是直接使用FX3芯片连接图像传感器，如下图1所示。即一个最精简的基于FX3芯片的UVC摄像头是不需要FPGA芯片的参与的。但在实际的应用中，可能需要先对图像进行一定的预处理再送往PC端显示处理，为了降低PC端的运算开销，往往将这一部分预处理工作分配到FPGA中，利用FPGA强大的并行处理优势实现。

在AC6102开发板上，设计了一款拥有30K逻辑单元的FPGA主芯片EP4CE30和一个FX3芯片，FX3芯片的所有数据线和控制线，除IIC、IIS、SPI等以外，全部连接到了FPGA上。因此当使用AC6102开发板进行UVC实验时，需要通过FPGA芯片进行一个简单的桥接。

桥接有两种方式，一种是直接使用组合逻辑，将输入连接到输出，例如：

assign LV = cmos_href;

assign FV = cmos_vsync;

assign DQ ={8'd0,cmos_data};

当使用这种方式时，是直接的输入IO的信号经过布线直接连接到了输出IO上，没有D触发器，因此难以进行时序约束。

另一种能够支持时序约束的桥接方式是，使用cmos_pclk将所有信号打2拍之后输出，如下图2所示。这样的话即每个信号从输入到输出，会经过2级寄存器传输，这样在进行时序约束时就非常方便了，一级寄存器作为输入寄存器，另一级作为输出寄存器，既方便布局布线，也利于时序分析。

本实验中采用第二种方式进行桥接，即在输入和输出信号之间插入2级寄存器的方式。

reg LV_r,FV_r,PCLK_r;

reg[15:0]DQ_r;

always@(posedge cmos_pclk)begin

LV_r <= cmos_href;

FV_r <= cmos_vsync;

DQ_r <={8'd0,cmos_data};

end

always@(posedge cmos_pclk)begin

LV <= LV_r;

FV <= FV_r;

DQ <= DQ_r;

end

assign PCLK = cmos_pclk;

由此，整个基于AC6102开发板的UVC摄像头框图如下图3所示。

可以看到，与Cypress提供的UVC应用方案不同，该应用方案在图像传感器和FX3之间插入了一片FPGA，用作图像的转发，并将原本的控制图像传感器的IIC功能从FX3中移植到了FPGA中。实际上，直接使用FX3原本的IIC控制器来实现图像传感器的设置也是可以的，不过这涉及到FX3固件的修改，而且不同的图像传感器需要使用不同的初始化代码，也就意味着需要使用不同的FX 3固件，会增加开发工作量，因此在本例中使用FPGA来完成图像传感器的配置初始化工作。这样，对于FPGA开发工程师来说，可以避开不熟悉的FX3固件开发，能够有效减少开发工作量。

AC6102 UVC开发包文件介绍

AC6102 UVC应用工程共提供以下几个文件

OV5640_USB30_UVC.qar
OV5640_UVC_30FPS.png
OV5640V2+AC6102V2.JPG
UVC_AN75779.img
UVC_AN75779.rar
VirtualDub_1_10_4_35456.1400664289.zip
Ø OV5640_USB30_UVC.qar文件为基于AC6102V2开发板和OV5640V2摄像头模块的FPGA应用工程，该工程主要实现了摄像头数据到FX3芯片的转发工作和OV5640摄像头的初始化配置工作。将该文件放置在一个非中文目录下，双击就可以直接使用Quartus软件打开。
Ø OV5640_UVC_30FPS.png文件为使用该工程进行图像采集显示的效果图
Ø OV5640V2+AC6102V2.JPG文件为进行试验时的硬件连接图
Ø UVC_AN75779.img文件为USB芯片的固件，由于该固件尺寸为139KB，超过了EEPROM存储器的128K容量，因此实验时只能烧写到RAM或SPI FLASH中。
Ø UVC_AN75779.rar文件为USB芯片的固件源码，基于Cypress厂家提供的工程源码，我们进行了一定的修改，主要就是屏蔽了IIC部分，因为本例中没有用到IIC，实际上厂家的源码不做任何修改也是可以直接使用的。当初屏蔽这部分是为了降低固件尺寸，以期能够降低到128KB以内，不过没有降下来。
Ø VirtualDub_1_10_4_35456.1400664289.zip文件是PC端的UVC图像显示软件。