USB摄像头驱动分析

news/2024/12/5 11:55:05/

1.构造一个usb_driver
2.设置

probe:2.1.分配video_device:video_device_alloc2.2 设置.fops.ioctl_ops (里面需要设置11项)如果要用内核提供 的缓冲区操作函数,还需要构造一个videobuf_queue_ops2.3.注册: video_register_device
id_table:表示支持哪些USB设备
当把USB设备连接到开发板后,如果设备被id_table所支持,probe就被调用。

3.注册:usb_register

在Linux内核中已经有支持USB摄像头的驱动程序,支持UVC(USB Video Class)规格的摄像头。
驱动程序目录为:Linux-4.9.88/drivers/media/usb/uvc

uvc_driver.c分析:

1. usb_register(&uvc_driver.driver);
2. uvc_probeuvc_register_videovdev = video_device_alloc();//分配vdev->fops = &uvc_fops;//设置video_register_device//注册

在这里插入图片描述

根据文件USB_Video_Example 1.5的12页可知USB摄像头的拓补图可知,USB摄像头分为两部分。一部分是视频控制接口,另一部分是视频流接口。

VideoControl Interface:用于控制 VideoStreaming Interface:用于传输,读数据
SU:select Unit(多路选择器,用于选择那一路信号)
PU:Process Unit(处理单元(PU)控制通过它传输的视频的图像属性,用于亮度和饱和度等控制)
IT:input Terminals(输入端,用于连接内部和外部的接口,可接受外部输入视频数据)
OT:output Terminals(视频功能的外部接口,用于输出数据)
CT:camera Terminals(设置相机参数)
USB IN Endpoint:(输入端点,可能是实时,也可能是批量端点)

UVC 1.5 Class specification 20页
在这里插入图片描述

视频功能通过其视频接口来实现。每个视频功能都有一个单独的视频控制(VC)接口,并可以有几个视频流(VS)接口。这 视频控制(VC)接口用于访问功能的设备控制,而视频流(VS)接口用于将数据流传入和传出该功能。 单个视频控制接口和视频流接口的集合属于同一视频功能的称为视频接口集合(VIC)。一个界面关联描述符(IAD)用于描述视频接口集合。

VC内部抽象出两个概念:
Units:内部基本模块
Terminals:用于与外部和视频流接口连接
在这里插入图片描述

其中Units提供基本的视频功能组件。

分析UVC驱动调用过程:

const struct v4l2_file_operations uvc_fops = {.owner        = THIS_MODULE,.open        = uvc_v4l2_open,.release    = uvc_v4l2_release,.ioctl        = uvc_v4l2_ioctl,.read        = uvc_v4l2_read,.mmap        = uvc_v4l2_mmap,.poll        = uvc_v4l2_poll,
};
1.构造一个usb_driver
2.设置probe:2.1. 分配video_device:video_device_alloc2.2. 设置.fops.ioctl_ops (里面需要设置11项)如果要用内核提供的缓冲区操作函数,还需要构造一个videobuf_queue_ops2.3. 注册: video_register_device      id_table: 表示支持哪些USB设备      
3.注册: usb_register

UVC: USB Video Class
UVC驱动:drivers\media\video\uvc\

uvc_driver.c分析:

1. usb_register(&uvc_driver.driver);
2. uvc_probeuvc_register_videovdev = video_device_alloc();vdev->fops = &uvc_fops;video_register_device

在www.usb.org下载 uvc specification,
UVC 1.5 Class specification.pdf : 有详细描述
USB_Video_Example 1.5.pdf : 有示例

通过VideoControl Interface来控制,
通过VideoStreaming Interface来读视频数据,
VC里含有多个Unit/Terminal等功能模块,可以通过访问这些模块进行控制,比如调亮度

分析UVC驱动调用过程:

const struct v4l2_file_operations uvc_fops = {.owner        = THIS_MODULE,.open        = uvc_v4l2_open,.release    = uvc_v4l2_release,.ioctl        = uvc_v4l2_ioctl,.read        = uvc_v4l2_read,.mmap        = uvc_v4l2_mmap,.poll        = uvc_v4l2_poll,
};
  1. open:
  uvc_v4l2_open
  1. VIDIOC_QUERYCAP // video->streaming->type 应该是在设备被枚举时分析描述符时设置的
if (video->streaming->type == V4L2_BUF_TYPE_VIDEO_CAPTURE)cap->capabilities = V4L2_CAP_VIDEO_CAPTURE| V4L2_CAP_STREAMING;
elsecap->capabilities = V4L2_CAP_VIDEO_OUTPUT| V4L2_CAP_STREAMING;
  1. VIDIOC_ENUM_FMT // format数组应是在设备被枚举时设置的
format = &video->streaming->format[fmt->index];
  1. VIDIOC_G_FMT
    uvc_v4l2_get_format // USB摄像头支持多种格式fromat, 每种格式下有多种frame(比如分辨率)
struct uvc_format *format = video->streaming->cur_format;
struct uvc_frame *frame = video->streaming->cur_frame;
  1. VIDIOC_TRY_FMT
  uvc_v4l2_try_format/* Check if the hardware supports the requested format. */
        /* Find the closest image size. The distance between image sizes is* the size in pixels of the non-overlapping regions between the* requested size and the frame-specified size.*/
  1. VIDIOC_S_FMT // 只是把参数保存起来,还没有发给USB摄像头
uvc_v4l2_set_formatuvc_v4l2_try_formatvideo->streaming->cur_format = format;video->streaming->cur_frame = frame;
  1. VIDIOC_REQBUFS
uvc_alloc_buffersfor (; nbuffers > 0; --nbuffers) {mem = vmalloc_32(nbuffers * bufsize);if (mem != NULL)break;}
  1. VIDIOC_QUERYBUF
uvc_query_buffer__uvc_query_buffermemcpy(v4l2_buf, &buf->buf, sizeof *v4l2_buf);  // 复制参数
  1. mmap
uvc_v4l2_mmap
  1. VIDIOC_QBUF(把buf放入队列)
uvc_queue_bufferlist_add_tail(&buf->stream, &queue->mainqueue);list_add_tail(&buf->queue, &queue->irqqueue);
  1. VIDIOC_STREAMON(启动数据传输,主要做一些初始化)
   uvc_video_enable(video, 1)  // 把所设置的参数发给硬件,然后启动摄像头/* Commit the streaming parameters. */uvc_commit_videouvc_set_video_ctrl  /* 设置格式fromat, frame */ret = __uvc_query_ctrl(video->dev /* 哪一个USB设备 */, SET_CUR, 0,video->streaming->intfnum  (流接口)/* 哪一个接口: VS */,probe ? VS_PROBE_CONTROL : VS_COMMIT_CONTROL, data, size,uvc_timeout_param);/* 启动:Initialize isochronous/bulk URBs and allocate transfer buffers. */uvc_init_video(video, GFP_KERNEL);uvc_init_video_isoc / uvc_init_video_bulkurb->complete = uvc_video_complete; (收到数据后此函数被调用,它又调用video->decode(urb, video, buf); ==> uvc_video_decode_isoc(实时端点)/uvc_video_encode_bulk(批量端点) => uvc_queue_next_buffer => wake_up(&buf->wait);)(wake_up唤醒应用程序)usb_submit_urb             
  1. poll(查询数据是否已经就绪)
   uvc_v4l2_poll //判断是否有参数           uvc_queue_pollpoll_wait(file, &buf->wait, wait);  // 休眠等待有数据
  1. VIDIOC_DQBUF(此时数据已经可以使用了)
uvc_dequeue_buffer(从队列中取出数据)list_del(&buf->stream);
  1. VIDIOC_STREAMOFF(关闭摄像头)
uvc_video_enable(video, 0);(注意此次调用的和启动摄像头是同一个函数,只是参数不一样)usb_kill_urb(urb);usb_free_urb(urb);

分析设置亮度过程:

ioctl: VIDIOC_S_CTRLuvc_ctrl_set(设置)uvc_ctrl_commit(提交)__uvc_ctrl_commit(video, 0);uvc_ctrl_commit_entity(video->dev, entity, rollback);ret = uvc_query_ctrl(dev  /* 哪一个USB设备 */, SET_CUR, ctrl->entity->id  /* 哪一个接口里面的unit/terminal */,dev->intfnum(控制接口) /* 哪一个接口: VC interface */, ctrl->info->selector,uvc_ctrl_data(ctrl, UVC_CTRL_DATA_CURRENT),ctrl->info->size);

总结:

  1. UVC设备有2个interface: VideoControl Interface, VideoStreaming Interface

  2. VideoControl Interface用于控制,比如设置亮度。它内部有多个Unit/Terminal(在程序里Unit/Terminal都称为entity)
    可以通过类似的函数来访问:
    ret = uvc_query_ctrl(dev /* 哪一个USB设备 /, SET_CUR, ctrl->entity->id / 哪一个unit/terminal /,
    dev->intfnum /
    哪一个接口: VC interface */, ctrl->info->selector,
    uvc_ctrl_data(ctrl, UVC_CTRL_DATA_CURRENT),
    ctrl->info->size);

  3. VideoStreaming Interface用于获得视频数据,也可以用来选择fromat/frame(VS可能有多种format, 一个format支持多种frame, frame用来表示分辨率等信息)
    可以通过类似的函数来访问:
    ret = __uvc_query_ctrl(video->dev /* 哪一个USB设备 /, SET_CUR, 0,
    video->streaming->intfnum /
    哪一个接口: VS */,
    probe ? VS_PROBE_CONTROL : VS_COMMIT_CONTROL, data, size,
    uvc_timeout_param);

  4. 我们在设置FORMAT时只是简单的使用video->streaming->format[fmt->index]等数据,
    这些数据哪来的?
    应是设备被枚举时设置的,也就是分析它的描述符时设置的。

  5. UVC驱动的重点在于:
    描述符的分析
    属性的控制: 通过VideoControl Interface来设置
    格式的选择:通过VideoStreaming Interface来设置
    数据的获得:通过VideoStreaming Interface的URB来获得

本文章源于百问网嵌入式


http://www.ppmy.cn/news/145093.html

相关文章

驱动调试-摄像头部分

调试 1.硬件部分 根据原理图确定camera的接口是MIPI还是DVP,确定在哪路IIC上 如果是MIPI,确定MIPI的的data lane数,哪路CSI上 用万用表确定Camera的供电是否正常,是否需要软件控制 AVDD:camera模拟电压,给芯片的模拟器件供电---->2.8V&…

vue 3 第二十六章:样式(scoped、深度选择器、全局选择器、css modules、自定义注入名称、css中v-bind)

文章目录 1. 介绍2. 基本使用3. scoped原理4. 深度选择器5. 插槽选择器6. 全局选择器7. 混合使用局部与全局样式8. CSS Modules9. 自定义注入名称10. CSS 中的 v-bind() 1. 介绍 在 Vue 中&#xff0c;我们可以使用 scoped 特性来给组件的样式添加作用域。通过为组件的 <st…

第六十一天学习记录:C语言进阶:C语言预处理1

程序的翻译环境和执行环境 在ANSI C的任何一种实现中&#xff0c;存在两个不同的环境。 第一种是翻译环境&#xff0c;在这个环境中源代码被转换为可执行的机器指令。第2种是执行环境&#xff0c;它用于实际执行代码。 详解编译链接 翻译环境 ![在这里插入图片描述](https:/…

Flink SQL之Regular Joins

1.Regular Joins&#xff08;双流join&#xff09; 双流join是最通用的联接类型&#xff08;支持 Batch\Streaming&#xff09;&#xff0c;其中任何新记录或联接两侧的更改都是可见的&#xff0c;并影响整体的Join结果。 特点&#xff1a; 对于流式查询&#xff0c;双流join…

【线程、线程池】

notify() 一个线程调用共享对象的notify)方法后&#xff0c;会唤醒一个在该共享变量上调用wait系列方法后被挂起的线程。一个共享变量上可能会有多个线程在等待&#xff0c;具体唤醒哪个等待的线程是随机的。 此外&#xff0c;被唤醒的线程不能马上从 wait方法返回并继续执行&…

计算机专业基础知识(中)

大纲分专题讲解4. 操作系统的基本概念、功能、组成及分类概念理解主要功能组成和分类主流的操作系统推荐书籍和课程 5. Windows 操作系统的基本概念和常用术语&#xff0c;文件、文件夹、库等Windows 常用术语Windows 电脑品牌 6. 多媒体技术的概念与应用关键技术应用举例 7. 计…

超全,Selenium4自动化测试并行测试详解,进阶之路看这篇就够了...

目录&#xff1a;导读 前言一、Python编程入门到精通二、接口自动化项目实战三、Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结&#xff08;尾部小惊喜&#xff09; 前言 Selenium4 自动化测…

JAVA基础 - CLASSLOADER双亲委派机制?

类的生命周期 在JAVA中数据类型分为基本数据类型和引用数据类型。基本数据类型&#xff0c;由虚拟机预先定义&#xff0c;引用数据类型则需要进行类加载。 JAVA将引用数据类型分为&#xff1a;类、接口、数组和泛型参数&#xff0c;而「泛型参数」在编译时期会被擦除&#xff…