UVCBulk传输实现细节

原创 漫谈嵌入式 2023-09-24 22:20

前段时间有个读者咨询UVC bulk 传输实现,接着这个机会重新梳理一遍UVC bulk 传输实现思路,同时对比ISO 与 Bulk 实现不同。有关bulk 传输实现请先看前文

阅读此文前提:假设读者,已知晓UVC 协议,以及UVC 设备驱动框架

1. 描述符布局

1.1 ISO 传输

ISO 传输模式下的描述符布局如上图所示:

  • 一个配置
  • 两个接口:Video Control / Video Stream

接口0:VideoControl。处理 UVC CT/PU/XU 等处理,主要用来控制 接口1:VideoStream。处理UVC 视频流控制。

一个VideoControl 可以关联一个或者多个流接口。每个流接口下面,关联2个多或者多个接口配置。

对于ISO 传输,流接口下有多个备用接口,用来控制视频流的传输。一般用alt0 关流,altx 开流。

1.2 BULK 传输

BULK 传输模式下的描述符布局如上图所示:

  • 一个配置
  • 两个接口:Video Control / Video Stream

接口0:VideoControl。处理 UVC CT/PU/XU 等处理,主要用来控制 接口1:VideoStream。处理UVC 视频流控制。

对于BULK 传输, 与ISO 模式最大的不同,是流接口只有一个alt0 接口配置。故,对其视频流的控制流程,相比较ISO 模式比较复杂一些。

2. 控制流程

2.1 ISO 传输

根据USB规范可知,同步传输方式是只要选中中带有同步端点的接口,系统会定时从设备中读取数据,无论设备中是否有数据。而如要停止数据的传输,只需要选中不带有同步端点的接口即可。

USB同步传输这种灵活的数据传输方式是依靠视频流接口的转换接口即我们常说的备份接口实现的。

Stream ON:

Stream OFF:

整个视频流的控制流程(开流/关流),可以在设备收到set_alt1/0 后进行处理。

2.2 BULK 传输

从描述符上分析 UVC 的 bulk 传输只有一个备用接口。故无法通过ISO 模式下通过备用接口进行开关流控制。

StreamOn:

StreamOff

通过抓包对比发现,开流过程通过uvc probe 与commit 流程处理。关流过程主机会下发一个clear_halt 请求。在clear_halt 请求里面做关流的后处理。

通过对比发现,对于ISO 传输,针对UVC 的设备描述修改基本不大,难处理的是UVC 的控制流程,特别是视频流的处理,接下来我们会以linux 平台介绍如何在iso 基础上修改为 bulk 模式

3. 源码分析

我们以linux 平台举例,其他平台只要熟悉uvc 底层协议,即可快速迁移。

3.1 host 端

源码位置:driver/media/uvc/uvc_queue.c

uvc 使能:


int uvc_video_enable(struct uvc_streaming *stream, int enable)
{
 int ret;

 if (!enable) {
  ...
  if (stream->intf->num_altsetting > 1) {
   usb_set_interface(stream->dev->udev,
       stream->intfnum, 0);
  } else {
   /* UVC doesn't specify how to inform a bulk-based device
    * when the video stream is stopped. Windows sends a
    * CLEAR_FEATURE(HALT) request to the video streaming
    * bulk endpoint, mimic the same behaviour.
    */


   ......
   usb_clear_halt(stream->dev->udev, pipe);
  }
 ......
  return 0;
 }

 /* Commit the streaming parameters. */
 ret = uvc_commit_video(stream, &stream->ctrl);
 if (ret < 0)
  goto error_commit;

 ret = uvc_init_video(stream, GFP_KERNEL);
 if (ret < 0)
  goto error_video;

 return 0;

error_video:
 usb_set_interface(stream->dev->udev, stream->intfnum, 0);
error_commit:
 uvc_video_clock_cleanup(stream);

 return ret;
}

StreamOn:

uvc_start_streaming()  //
    ret = uvc_video_enable(stream, 1);  

StreamOff:

uvc_stop_streaming();
    uvc_video_enable(stream, 0);

从host 端源码分析和我们猜想得到了印证:

  • 开流发送commit 请求
  • 关流发送clear_halt 请求

视频传输:源码参考:driver/media/usb/uvc_video.c

// usb complete 中断
static void uvc_video_complete(struct urb *urb)
{
 struct uvc_streaming *stream = urb->context;
 struct uvc_video_queue *queue = &stream->queue;
 struct uvc_buffer *buf = NULL;
 unsigned long flags;
 int ret;

 switch (urb->status) {
 case 0:
  break;

 default:
  uvc_printk(KERN_WARNING, "Non-zero status (%d) in video "
   "completion handler.\n", urb->status);
  /* fall through */
 case -ENOENT:  /* usb_kill_urb() called. */
  if (stream->frozen)
   return;
  /* fall through */
 case -ECONNRESET: /* usb_unlink_urb() called. */
 case -ESHUTDOWN: /* The endpoint is being disabled. */
  uvc_queue_cancel(queue, urb->status == -ESHUTDOWN);
  return;
 }

 spin_lock_irqsave(&queue->irqlock, flags);
 if (!list_empty(&queue->irqqueue))
  buf = list_first_entry(&queue->irqqueue, struct uvc_buffer,
           queue);
 spin_unlock_irqrestore(&queue->irqlock, flags);

   /* 视频解码 :视频传输关键 */
 stream->decode(urb, stream, buf);

 /* 提交urb */
 if ((ret = usb_submit_urb(urb, GFP_ATOMIC)) < 0) {
  uvc_printk(KERN_ERR, "Failed to resubmit video URB (%d).\n",
   ret);
 }
}

host 端视频数据解码:

stream->decode(urb, stream, buf);
    uvc_video_decode_bulk();
        uvc_video_decode_start(); // 解析uvc header
        uvc_video_decode_data(); // 解析视频数据
        uvc_video_decode_end(); // 帧结束标记

3.2 device 端

源码位置:driver/usb/gadget/function

ISO 开关流

static int uvc_function_set_alt(struct usb_function *f, unsigned interface, unsigned alt)

 .......
 /* VideoControl process */
 if (interface == uvc->control_intf) {
    /* 复位控制端点 */
     usb_ep_disable(uvc->control_ep);
     ...
     usb_ep_enable(uvc->control_ep);
     
     if (uvc->state == UVC_STATE_DISCONNECTED) {
        /*提交uvc 状态 */
         memset(&v4l2_event, 0 ,sizof(v4l2_evetn);
         v4l2_event.type = UVC_EVENT_CONNECT;
         uvc_event->speed = cdev->gadget->speed;
         v4l2_event_queue(&uvc->vdev, &v4l2_event);
         uvc->state = UVC_STATE_CONNECTED;
     }
     
     return 0;
     
 }
 /* VideoStream process */
 if (interface != uvc->streaming_intf) {
     return -EINVAL;
 }
 
 /* 判断端点是否为bulk 端点: */
 if (usb_endpoint_xfer_bulk(&uvc->desc.vs_ep)) {
     /* 使能端点 */
     usb_ep_enable(uvc->video_ep);
     return alt ? -EIVAL : 0;
 }
 
 /*ISO 开关流处理 */
 switch (alt) {
 case 0:
      if (uvc->state != UVC_STATE_STREAMING)
   return 0;

  if (uvc->video.ep)
   usb_ep_disable(uvc->video.ep);

      /*提交应用 : 关流*/
  memset(&v4l2_event, 0sizeof(v4l2_event));
  v4l2_event.type = UVC_EVENT_STREAMOFF;
  v4l2_event_queue(&uvc->vdev, &v4l2_event);

  uvc->state = UVC_STATE_CONNECTED;
  return 0;
     
 case 1:
       if (uvc->state != UVC_STATE_CONNECTED)
   return 0;

  if (!uvc->video.ep)
   return -EINVAL;

  INFO(cdev, "reset UVC\n");
  usb_ep_disable(uvc->video.ep);

  ret = config_ep_by_speed(f->config->cdev->gadget,
    &(uvc->func), uvc->video.ep);
  if (ret)
   return ret;
  usb_ep_enable(uvc->video.ep);
 
      /* 开流*/
  memset(&v4l2_event, 0sizeof(v4l2_event));
  v4l2_event.type = UVC_EVENT_STREAMON;
  v4l2_event_queue(&uvc->vdev, &v4l2_event);
  return USB_GADGET_DELAYED_STATUS;

 default:
  return -EINVAL;
 }
  
}

bulk 传输开关流

uvc_function_setup(struct usb_function *f, const struct usb_ctrlrequest *ctrl)
{
 struct uvc_device *uvc = to_uvc(f);
 struct v4l2_event v4l2_event;
 struct uvc_event *uvc_event = (void *)&v4l2_event.u.data;

 /* printk(KERN_INFO "setup request %02x %02x value %04x index %04x %04x\n",
  * ctrl->bRequestType, ctrl->bRequest, le16_to_cpu(ctrl->wValue),
  * le16_to_cpu(ctrl->wIndex), le16_to_cpu(ctrl->wLength));
  */


 if ((ctrl->bRequestType & USB_TYPE_MASK) != USB_TYPE_CLASS) {
      /* bulk 传输关流:需要修改udc 控制器,将usb 控制器clear_halt 注册到uvc function 驱动里面 */
       if (usb_endpoint_xfer_bulk(&uvc->desc.vs_ep)) {
            memset(&v4l2_event, 0sizeof(v4l2_event));
         v4l2_event.type = UVC_EVENT_STREANOFF;
         memcpy(&uvc_event->req, ctrl, sizeof(uvc_event->req));
         v4l2_event_queue(&uvc->vdev, &v4l2_event);
           
       } else {
         INFO(f->config->cdev, "invalid request type\n");
      return -EINVAL;
       }

 }

 /* Stall too big requests. */
 if (le16_to_cpu(ctrl->wLength) > UVC_MAX_REQUEST_SIZE)
  return -EINVAL;

 /* Tell the complete callback to generate an event for the next request
  * that will be enqueued by UVCIOC_SEND_RESPONSE.
  */

 uvc->event_setup_out = !(ctrl->bRequestType & USB_DIR_IN);
 uvc->event_length = le16_to_cpu(ctrl->wLength);

   /* bulk 传输 开流:通过uvc probe 和 commit 提交分辨率和帧率控制 */
 memset(&v4l2_event, 0sizeof(v4l2_event));
 v4l2_event.type = UVC_EVENT_SETUP;
 memcpy(&uvc_event->req, ctrl, sizeof(uvc_event->req));
 v4l2_event_queue(&uvc->vdev, &v4l2_event);

 return 0;
}

4. 总结

整个bulk 传输控制流程如上图所示。

对于linux 平台而言,需要关心的有两点:1)如何将底层clear_halt 请求 与uvc_function 请求关联上,而不影响其他端点;2)如何将clear_halt 请求提交到应用层去处理。这一步不是非必须的。

对于Rtos 平台大同小异,只要理解了整个开关流流程,处理起来自然简单许多。



漫谈嵌入式 一个爱跑马的程序员。致力于分享嵌入式物联网技术【单片机/MIPS/ARM/Linux/C/C++/Qt等】,探寻底层开发的究竟!
评论
  • 车身域是指负责管理和控制汽车车身相关功能的一个功能域,在汽车域控系统中起着至关重要的作用。它涵盖了车门、车窗、车灯、雨刮器等各种与车身相关的功能模块。与汽车电子电气架构升级相一致,车身域发展亦可以划分为三个阶段,功能集成愈加丰富:第一阶段为分布式架构:对应BCM车身控制模块,包含灯光、雨刮、门窗等传统车身控制功能。第二阶段为域集中架构:对应BDC/CEM域控制器,在BCM基础上集成网关、PEPS等。第三阶段为SOA理念下的中央集中架构:VIU/ZCU区域控制器,在BDC/CEM基础上集成VCU、
    北汇信息 2025-01-03 16:01 187浏览
  • 本文介绍Linux系统更换开机logo方法教程,通用RK3566、RK3568、RK3588、RK3576等开发板,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。制作图片开机logo图片制作注意事项(1)图片必须为bmp格式;(2)图片大小不能大于4MB;(3)BMP位深最大是32,建议设置为8;(4)图片名称为logo.bmp和logo_kernel.bmp;开机
    Industio_触觉智能 2025-01-06 10:43 63浏览
  • 自动化已成为现代制造业的基石,而驱动隔离器作为关键组件,在提升效率、精度和可靠性方面起到了不可或缺的作用。随着工业技术不断革新,驱动隔离器正助力自动化生产设备适应新兴趋势,并推动行业未来的发展。本文将探讨自动化的核心趋势及驱动隔离器在其中的重要角色。自动化领域的新兴趋势智能工厂的崛起智能工厂已成为自动化生产的新标杆。通过结合物联网(IoT)、人工智能(AI)和机器学习(ML),智能工厂实现了实时监控和动态决策。驱动隔离器在其中至关重要,它确保了传感器、执行器和控制单元之间的信号完整性,同时提供高
    腾恩科技-彭工 2025-01-03 16:28 166浏览
  •     为控制片内设备并且查询其工作状态,MCU内部总是有一组特殊功能寄存器(SFR,Special Function Register)。    使用Eclipse环境调试MCU程序时,可以利用 Peripheral Registers Viewer来查看SFR。这个小工具是怎样知道某个型号的MCU有怎样的寄存器定义呢?它使用一种描述性的文本文件——SVD文件。这个文件存储在下面红色字体的路径下。    例:南京沁恒  &n
    电子知识打边炉 2025-01-04 20:04 60浏览
  • 随着市场需求不断的变化,各行各业对CPU的要求越来越高,特别是近几年流行的 AIOT,为了有更好的用户体验,CPU的算力就要求更高了。今天为大家推荐由米尔基于瑞芯微RK3576处理器推出的MYC-LR3576核心板及开发板。关于RK3576处理器国产CPU,是这些年的骄傲,华为手机全国产化,国人一片呼声,再也不用卡脖子了。RK3576处理器,就是一款由国产是厂商瑞芯微,今年第二季推出的全新通用型的高性能SOC芯片,这款CPU到底有多么的高性能,下面看看它的几个特性:8核心6 TOPS超强算力双千
    米尔电子嵌入式 2025-01-03 17:04 39浏览
  • 在快速发展的能源领域,发电厂是发电的支柱,效率和安全性至关重要。在这种背景下,国产数字隔离器已成为现代化和优化发电厂运营的重要组成部分。本文探讨了这些设备在提高性能方面的重要性,同时展示了中国在生产可靠且具有成本效益的数字隔离器方面的进步。什么是数字隔离器?数字隔离器充当屏障,在电气上将系统的不同部分隔离开来,同时允许无缝数据传输。在发电厂中,它们保护敏感的控制电路免受高压尖峰的影响,确保准确的信号处理,并在恶劣条件下保持系统完整性。中国国产数字隔离器经历了重大创新,在许多方面达到甚至超过了全球
    克里雅半导体科技 2025-01-03 16:10 122浏览
  • 在智能家居领域中,Wi-Fi、蓝牙、Zigbee、Thread与Z-Wave等无线通信协议是构建短距物联局域网的关键手段,它们常在实际应用中交叉运用,以满足智能家居生态系统多样化的功能需求。然而,这些协议之间并未遵循统一的互通标准,缺乏直接的互操作性,在进行组网时需要引入额外的网关作为“翻译桥梁”,极大地增加了系统的复杂性。 同时,Apple HomeKit、SamSung SmartThings、Amazon Alexa、Google Home等主流智能家居平台为了提升市占率与消费者
    华普微HOPERF 2025-01-06 17:23 64浏览
  • 每日可见的315MHz和433MHz遥控模块,你能分清楚吗?众所周知,一套遥控设备主要由发射部分和接收部分组成,发射器可以将控制者的控制按键经过编码,调制到射频信号上面,然后经天线发射出无线信号。而接收器是将天线接收到的无线信号进行解码,从而得到与控制按键相对应的信号,然后再去控制相应的设备工作。当前,常见的遥控设备主要分为红外遥控与无线电遥控两大类,其主要区别为所采用的载波频率及其应用场景不一致。红外遥控设备所采用的射频信号频率一般为38kHz,通常应用在电视、投影仪等设备中;而无线电遥控设备
    华普微HOPERF 2025-01-06 15:29 62浏览
  • 彼得·德鲁克被誉为“现代管理学之父”,他的管理思想影响了无数企业和管理者。然而,关于他的书籍分类,一种流行的说法令人感到困惑:德鲁克一生写了39本书,其中15本是关于管理的,而其中“专门写工商企业或为企业管理者写的”只有两本——《为成果而管理》和《创新与企业家精神》。这样的表述广为流传,但深入探讨后却发现并不完全准确。让我们一起重新审视这一说法,解析其中的矛盾与根源,进而重新认识德鲁克的管理思想及其著作的真正价值。从《创新与企业家精神》看德鲁克的视角《创新与企业家精神》通常被认为是一本专为企业管
    优思学院 2025-01-06 12:03 61浏览
  • PLC组态方式主要有三种,每种都有其独特的特点和适用场景。下面来简单说说: 1. 硬件组态   定义:硬件组态指的是选择适合的PLC型号、I/O模块、通信模块等硬件组件,并按照实际需求进行连接和配置。    灵活性:这种方式允许用户根据项目需求自由搭配硬件组件,具有较高的灵活性。    成本:可能需要额外的硬件购买成本,适用于对系统性能和扩展性有较高要求的场合。 2. 软件组态   定义:软件组态主要是通过PLC
    丙丁先生 2025-01-06 09:23 61浏览
  • 光耦合器,也称为光隔离器,是一种利用光在两个隔离电路之间传输电信号的组件。在医疗领域,确保患者安全和设备可靠性至关重要。在众多有助于医疗设备安全性和效率的组件中,光耦合器起着至关重要的作用。这些紧凑型设备经常被忽视,但对于隔离高压和防止敏感医疗设备中的电气危害却是必不可少的。本文深入探讨了光耦合器的功能、其在医疗应用中的重要性以及其实际使用示例。什么是光耦合器?它通常由以下部分组成:LED(发光二极管):将电信号转换为光。光电探测器(例如光电晶体管):检测光并将其转换回电信号。这种布置确保输入和
    腾恩科技-彭工 2025-01-03 16:27 171浏览
  • 根据Global Info Research项目团队最新调研,预计2030年全球封闭式电机产值达到1425百万美元,2024-2030年期间年复合增长率CAGR为3.4%。 封闭式电机是一种电动机,其外壳设计为密闭结构,通常用于要求较高的防护等级的应用场合。封闭式电机可以有效防止外部灰尘、水分和其他污染物进入内部,从而保护电机的内部组件,延长其使用寿命。 环洋市场咨询机构出版的调研分析报告【全球封闭式电机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球封闭式电机总体规
    GIRtina 2025-01-06 11:10 69浏览
  • 这篇内容主要讨论三个基本问题,硅电容是什么,为什么要使用硅电容,如何正确使用硅电容?1.  硅电容是什么首先我们需要了解电容是什么?物理学上电容的概念指的是给定电位差下自由电荷的储藏量,记为C,单位是F,指的是容纳电荷的能力,C=εS/d=ε0εrS/4πkd(真空)=Q/U。百度百科上电容器的概念指的是两个相互靠近的导体,中间夹一层不导电的绝缘介质。通过观察电容本身的定义公式中可以看到,在各个变量中比较能够改变的就是εr,S和d,也就是介质的介电常数,金属板有效相对面积以及距离。当前
    知白 2025-01-06 12:04 94浏览
  • 物联网(IoT)的快速发展彻底改变了从智能家居到工业自动化等各个行业。由于物联网系统需要高效、可靠且紧凑的组件来处理众多传感器、执行器和通信设备,国产固态继电器(SSR)已成为满足中国这些需求的关键解决方案。本文探讨了国产SSR如何满足物联网应用的需求,重点介绍了它们的优势、技术能力以及在现实场景中的应用。了解物联网中的固态继电器固态继电器是一种电子开关设备,它使用半导体而不是机械触点来控制负载。与传统的机械继电器不同,固态继电器具有以下优势:快速切换:确保精确快速的响应,这对于实时物联网系统至
    克里雅半导体科技 2025-01-03 16:11 175浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦