linux_驱动_camera_架构_V4L2_V4L2应用程序框架

最新推荐文章于 2024-08-14 09:20:54 发布
最新推荐文章于 2024-08-14 09:20:54 发布
阅读量223 收藏
点赞数
分类专栏： 底层驱动 文章标签： linux
原文链接：https://www.cnblogs.com/andrew-wang/archive/2012/11/14/2770701.html
版权

<2012 11 14> V4L2应用程序框架

        </h1>
        <div class="clear"></div>
        <div class="postBody">

V4L2应用程序框架

V4L2较V4L有较大的改动，并已成为2.6的标准接口，函盖video\dvb\FM...，多数驱动都在向V4l2迁移。更好地了解V4L2先从应用入手，然后再深入到内核中结合物理设备／接口的规范实现相应的驱动。本文先就V4L2在视频捕捉或camera方面的应用框架。

V4L2采用流水线的方式，操作更简单直观，基本遵循打开视频设备、设置格式、处理数据、关闭设备，更多的具体操作通过ioctl函数来实现。

1.打开视频设备

在V4L2中，视频设备被看做一个文件。使用open函数打开这个设备：

复制代码 
// 用非阻塞模式打开摄像头设备

int cameraFd;

cameraFd = open("/dev/video0", O_RDWR | O_NONBLOCK, 0);

// 如果用阻塞模式打开摄像头设备，上述代码变为：

//cameraFd = open("/dev/video0", O_RDWR, 0);

复制代码

应用程序能够使用阻塞模式或非阻塞模式打开视频设备，如果使用非阻塞模式调用视频设备，即使尚未捕获到信息，驱动依旧会把缓存（DQBUFF）里的东西返回给应用程序。

2. 设定属性及采集方式

打开视频设备后，可以设置该视频设备的属性，例如裁剪、缩放等。这一步是可选的。在Linux编程中，一般使用ioctl函数来对设备的I/O通道进行管理：

 int ioctl (int __fd, unsigned long int __request, .../*args*/) ;

在进行V4L2开发中，常用的命令标志符如下(some are optional)：

  • VIDIOC_REQBUFS：分配内存
  • VIDIOC_QUERYBUF：把VIDIOC_REQBUFS中分配的数据缓存转换成物理地址
  • VIDIOC_QUERYCAP：查询驱动功能
  • VIDIOC_ENUM_FMT：获取当前驱动支持的视频格式
  • VIDIOC_S_FMT：设置当前驱动的频捕获格式
  • VIDIOC_G_FMT：读取当前驱动的频捕获格式
  • VIDIOC_TRY_FMT：验证当前驱动的显示格式
  • VIDIOC_CROPCAP：查询驱动的修剪能力
  • VIDIOC_S_CROP：设置视频信号的边框
  • VIDIOC_G_CROP：读取视频信号的边框
  • VIDIOC_QBUF：把数据从缓存中读取出来
  • VIDIOC_DQBUF：把数据放回缓存队列
  • VIDIOC_STREAMON：开始视频显示函数
  • VIDIOC_STREAMOFF：结束视频显示函数
  • VIDIOC_QUERYSTD：检查当前视频设备支持的标准，例如PAL或NTSC。

2.1检查当前视频设备支持的标准

在亚洲，一般使用PAL（720X576）制式的摄像头，而欧洲一般使用NTSC（720X480），使用VIDIOC_QUERYSTD来检测：

复制代码 
v4l2_std_id std;

do {

ret = ioctl(fd, VIDIOC_QUERYSTD, &std);

} while (ret == -1 && errno == EAGAIN);

switch (std) {

</span><span style="color: #0000ff;">case</span><span style="color: #000000;"> V4L2_STD_NTSC:

    </span><span style="color: #008000;">//</span><span style="color: #008000;">……</span>

<span style="color: #0000ff;">case</span><span style="color: #000000;"> V4L2_STD_PAL:

    </span><span style="color: #008000;">//</span><span style="color: #008000;">……</span>
}
复制代码

2.2 设置视频捕获格式

当检测完视频设备支持的标准后，还需要设定视频捕获格式，结构如下：

复制代码 
struct v4l2_format fmt;

memset ( &fmt, 0, sizeof(fmt) );

fmt.type = V4L2_BUF_TYPE_VIDEO_CAPTURE;

fmt.fmt.pix.width = 720;

fmt.fmt.pix.height = 576;

fmt.fmt.pix.pixelformat = V4L2_PIX_FMT_YUYV;

fmt.fmt.pix.field = V4L2_FIELD_INTERLACED;

if (ioctl(fd, VIDIOC_S_FMT, &fmt) == -1) {

return -1;

}

复制代码 
v4l2_format结构如下：
复制代码 
struct v4l2_format

{

</span><span style="color: #0000ff;">enum</span> v4l2_buf_type type;    <span style="color: #008000;">//</span><span style="color: #008000;"> 数据流类型，必须永远是V4L2_BUF_TYPE_VIDEO_CAPTURE </span>
union 
{

    </span><span style="color: #0000ff;">struct</span><span style="color: #000000;"> v4l2_pix_format    pix;  

    </span><span style="color: #0000ff;">struct</span><span style="color: #000000;"> v4l2_window        win;  

    </span><span style="color: #0000ff;">struct</span><span style="color: #000000;"> v4l2_vbi_format    vbi;  

    __u8    raw_data[</span><span style="color: #800080;">200</span><span style="color: #000000;">];          

} fmt;

};

struct v4l2_pix_format

{

__u32                   width;         </span><span style="color: #008000;">//</span><span style="color: #008000;"> 宽，必须是16的倍数</span>
__u32 height; // 高，必须是16的倍数 __u32 pixelformat; // 视频数据存储类型，例如是YUV4：2：2还是RGB 
<span style="color: #0000ff;">enum</span><span style="color: #000000;"> v4l2_field         field;

__u32                   bytesperline;    

__u32                   sizeimage;

</span><span style="color: #0000ff;">enum</span><span style="color: #000000;"> v4l2_colorspace    colorspace;

__u32                   priv;

};

复制代码 
2.3 分配内存

接下来可以为视频捕获分配内存：

复制代码 
struct v4l2_requestbuffers  req;

if (ioctl(fd, VIDIOC_REQBUFS, &req) == -1) {

return -1;

}

v4l2_requestbuffers　结构如下：

struct v4l2_requestbuffers

{

__u32               count;  </span><span style="color: #008000;">//</span><span style="color: #008000;"> 缓存数量，也就是说在缓存队列里保持多少张照片</span>

<span style="color: #0000ff;">enum</span> v4l2_buf_type  type;   <span style="color: #008000;">//</span><span style="color: #008000;"> 数据流类型，必须永远是V4L2_BUF_TYPE_VIDEO_CAPTURE </span>

<span style="color: #0000ff;">enum</span> v4l2_memory    memory; <span style="color: #008000;">//</span><span style="color: #008000;"> V4L2_MEMORY_MMAP 或 V4L2_MEMORY_USERPTR</span>
__u32 reserved[ 2 ];

};

复制代码

2.4 获取并记录缓存的物理空间（将v4l2驱动buffer向用户空间buffer映射，二者其实只使用了物理内存中的同一块空间）

使用VIDIOC_REQBUFS，我们获取了req.count个缓存，下一步通过调用VIDIOC_QUERYBUF命令来获取这些缓存的地址，然后使用mmap函数转换成应用程序中的绝对地址，最后把这段缓存放入缓存队列：

 

复制代码 
//分配用户空间的buffers
typedef struct VideoBuffer {
    void   *start;
    size_t  length;
} VideoBuffer;

VideoBuffer* buffers = calloc( req.count, sizeof(*buffers) );
struct v4l2_buffer buf;

for (numBufs = 0; numBufs < req.count; numBufs++) {
memset( &buf, 0, sizeof(buf) );
buf.type = V4L2_BUF_TYPE_VIDEO_CAPTURE;
buf.memory = V4L2_MEMORY_MMAP;
buf.index = numBufs;
// 读取缓存，这个调用中会计算v4l2_buffer的大小，给buf.length赋值
if (ioctl(fd, VIDIOC_QUERYBUF, &buf) == -1) {
return -1;
}

buffers[numBufs].length </span>=<span style="color: #000000;"> buf.length;
</span><span style="color: #008000;">//</span><span style="color: #008000;"> 转换成相对地址，内核空间buffer映射到用户空间</span>
buffers[numBufs].start = mmap(NULL, buf.length, PROT_READ |<span style="color: #000000;"> PROT_WRITE, MAP_SHARED, fd, buf.m.offset);

</span><span style="color: #0000ff;">if</span> (buffers[numBufs].start ==<span style="color: #000000;"> MAP_FAILED) {
    </span><span style="color: #0000ff;">return</span> -<span style="color: #800080;">1</span><span style="color: #000000;">;
}

</span><span style="color: #008000;">//</span><span style="color: #008000;"> 放入缓存队列，这其实是内核空间中的V4L2驱动程序用一个数据结构将.count个buffer管理成一个FIFO</span>
<span style="color: #0000ff;">if</span> (ioctl(fd, VIDIOC_QBUF, &amp;buf) == -<span style="color: #800080;">1</span><span style="color: #000000;">) {
    </span><span style="color: #0000ff;">return</span> -<span style="color: #800080;">1</span><span style="color: #000000;">;
}

}

复制代码

2.5 视频采集方式

操作系统一般把系统使用的内存划分成用户空间和内核空间，分别由应用程序管理和操作系统管理。应用程序可以直接访问内存的地址，而内核空间存放的是供内核访问的代码和数据，用户不能直接访问。v4l2捕获的数据，最初是存放在内核空间的，这意味着用户不能直接访问该段内存，必须通过某些手段来转换地址。

一共有三种视频采集方式：使用read、write方式；内存映射方式和用户指针模式。

read、write方式，在用户空间和内核空间不断拷贝数据，占用了大量用户内存空间，效率不高。

内存映射方式：把设备里的内存映射到应用程序中的内存空间，直接处理设备内存，这是一种有效的方式。上面的mmap函数就是使用这种方式。

用户指针模式：内存片段由应用程序自己分配。这点需要在v4l2_requestbuffers里将memory字段设置成V4L2_MEMORY_USERPTR。

2.6 处理采集数据（这里用ioctl调用执行VIDIOC_DQBUF和VIDIOC_QBUF命令，可以驱动buffer FIFO的更新，即驱动摄像头连续采集视频）

V4L2有一个数据缓存，存放req.count数量的缓存数据。数据缓存采用FIFO的方式，当应用程序调用缓存数据时，缓存队列将最先采集到的视频数据缓存送出，并重新采集一张视频数据。这个过程需要用到两个ioctl命令,VIDIOC_DQBUF和VIDIOC_QBUF：

复制代码 
struct v4l2_buffer buf;

memset(&buf,0,sizeof(buf));

buf.type=V4L2_BUF_TYPE_VIDEO_CAPTURE;

buf.memory=V4L2_MEMORY_MMAP;

buf.index=0;

//读取缓存

if (ioctl(cameraFd, VIDIOC_DQBUF, &buf) == -1)

{

</span><span style="color: #0000ff;">return</span> -<span style="color: #800080;">1</span><span style="color: #000000;">;

}

//……视频处理算法……：由于之前已经进行了映射，因此对用户内存空间中的buffer中的req.count个图像的处理，相当于对内核空间中v4l2驱动buffer中图像的操作。

//重新放入缓存队列

if (ioctl(cameraFd, VIDIOC_QBUF, &buf) == -1) {

</span><span style="color: #0000ff;">return</span> -<span style="color: #800080;">1</span><span style="color: #000000;">;

}

复制代码

3. 关闭视频设备

使用close函数关闭一个视频设备

close(cameraFd)

如果使用mmap,最后还需要使用munmap方法。

 （本文写的很好，思路清晰，把握主要脉络，简洁明了，直接引用，稍做注释与图示，但来源已不详）

<div id="blog_post_info">
1
0 
<div class="clear"></div>
<div id="post_next_prev">

<a href="https://www.cnblogs.com/andrew-wang/archive/2012/11/14/2770692.html" class="p_n_p_prefix">« </a> 上一篇：    <a href="https://www.cnblogs.com/andrew-wang/archive/2012/11/14/2770692.html" title="发布于 2012-11-14 22:16">&lt;2012 11 14&gt; Linux V4L2驱动架构解析与开发导引</a>
<br>
<a href="https://www.cnblogs.com/andrew-wang/archive/2012/11/15/2771386.html" class="p_n_p_prefix">» </a> 下一篇：    <a href="https://www.cnblogs.com/andrew-wang/archive/2012/11/15/2771386.html" title="发布于 2012-11-15 13:38">&lt;2012 11 15&gt; Linux内核驱动总体框架——《深入理解Linux内核》chapter 13 读书笔记</a>
posted @ 2012-11-14 22:24  可可_西里  阅读( 1923)  评论( 0)  编辑  收藏 
</div><!--end: topics 文章、评论容器-->
专一的黄先生
关注
专栏目录
ldd.tar.gz_V4L2 for linux_camera_individualrj9
09-23
标签 "v4l2_for_linux" 强调了这个项目的核心是V4L2接口在Linux系统中的应用，这意味着开发者或用户需要了解如何利用V4L2 API来控制和访问相机设备。 另一个标签 "camera individualrj9" 暗示可能是一个特定型号...
TDA4VM-LINUX-CSI-9296-9295-camera架构驱动分析和详细使用
yiyu20180729的博客
04-23 2339
TDA4VM-LINUX-CSI-9296-9295-camera架构驱动分析和详细使用
Camera | 5.Linux v4l2架构(基于rk3568)
一口Linux的专栏
03-02 4386
上一篇我们讲解了如何编写基于V4L2的应用程序编写，本文主要讲解内核中V4L2架构，以及一些最重要的结构体、注册函数。厂家在实现自己的摄像头控制器驱动时，总体上都遵循这个架构来实现，但是不同厂家、不同型号的SoC，具体的驱动实现仍然会有一些差别。读者可以通过本文了解各个结构体与对应的摄像头模块、SoC上控制器模块、以及他们之间接口关系，并能够了解这些硬件模块与V4L2架构之间关系。下一张我们基于瑞芯微rk3568来详细讲解具体V4L2的实现。
Linux设备驱动之Camera驱动
最新发布
xzjiang_365的博客
08-14 824
在初始化vin-core v4l2_subdev的时候，将v4l2_subdev的internal_ops成员赋值为vin_capture_sd_internal_ops，而在开机加载的第六步处，将会通过v4l2_device_register_subdev()向系统注册v4l2_subdev，该函数中，将会调用到internal_ops->registered()。光，光线进入眼睛，通过晶状体，落在视网膜上，视网膜上的感光细胞浆光信号转化为神经信号，最终传递到大脑皮层，让我们感受到世界万物。
Rockchip | Rockchip Camera技术
Systemcall名屋
02-22 4147
​ Rockchip-isp1 概述 以下文档提供了rockchip-isp1驱动程序和rockchip SoC上图像信号处理模块的基本信息，并附有示例和详细信息。 硬件 更多详细信息可在TRM章节“Image Signal Processing”、“MIPI D-PHY”中找到，但它们仅在NDA下可用。 ISP 详细 ISP 包括： MIPI serial camera interface Image Signal Processing Many Image Enhancement Blocks C
TDA4VM-Camera调试笔记
yiyu20180729的博客
03-07 1610
此控件的单位是 Hz。谷歌做这件事的初衷在于：希望分离芯片厂商和手机厂商的修改，芯片厂商只修改内核中的dtb，而手机厂商只修改dtbo分区，这样能够井井有条（（但是事实是手机厂商也还在改内核的dtb）因此，就初衷而言，我们已经可以看出dtb和dtbo分区之间的关系。这里需要注意的一点就是，我们使用cp命令进行拷贝的时候，拷贝完最好使用sync命令进行同步，sync的作用就是将缓冲区的内容写到磁盘上，如果没有使用sync就直接给开发板断电，可能会造成数据的丢失，到时可能因为无效的设备树文件导致系统启动不了。
Linux V4L2之camera
嵌入式与人工智能
08-17 1213
Linux V4L2之camera一、硬件知识2. 摄像头引脚作用&硬件连接：二、成像原理三、V4L2软件架构本文来源 一、硬件知识 摄像头硬件结构和工作原理，如图1 外部光线穿过lens镜头，经过红外滤光片后光学图像投射到传感器上，然后光学图像被转换成电信号，电信号再经过模数转换变为数字信号，数字信号经过DSP加工处理，再被送到接收端进行处理，最终转换成屏幕上能够看到的图像。 其中： 1）滤光片作用： 　　a. 滤除红外线，滤除对可见光有干扰的红外光，使成像效果更清晰。 　　b. 修整进来的光线
camera_client.rar_camera capture v4l2
09-21
标题中的"camera_client.rar_camera capture v4l2"暗示了这是一个关于Linux环境下使用V4L2（Video for Linux Two）接口来捕获和处理摄像头图像的项目。V4L2是Linux内核的一部分，提供了与视频捕获设备交互的API，...
v4l2_test.tar.gz_v4l2_v4l2 camera
09-21
在标题"v4l2_test.tar.gz_v4l2_v4l2 camera"中，我们可以推断这是一个与V4L2相关的测试项目，专门针对V4L2相机进行。描述"get camera informations, base on v4l2"表明这个项目的主要目标是获取相机的信息，这是通过...
swc.zip_linux v4l2 qt_sdl_sdl camera_swc_v4l2 s
09-20
标签中的"linux_v4l2_qt sdl sdl_camera swc v4l2_s"则提供了更多的技术关键词，帮助我们理解软件的主要功能和组件。 1. **Linux V4L2**：这是Linux内核提供的一种API，用于与各种视频设备（如摄像头）进行交互。V4...
s3c_fimd_v4l2.rar_SAMSUNG camera_interface_v4l2 fimc
09-19
标题中的“s3c_fimd_v4l2.rar”表明这是一个与Samsung S3C系列处理器相关的文件，重点在于其FIMC（Fast Image Processing Module，快速图像处理模块）驱动程序，而“SAMSUNG camera interface_v4l2 fimc”则强调了该...
嵌入式Linux下tc358743的驱动设计
huntenganwei的博客
07-07 1309
设备树配置的名字得和这个驱动名称一致，就是compatible属性tc358743还是tc358749。总之，这个结构体用于组织和管理TC35874X设备的各种状态信息和控制参数。因为内核已经有了这个官方给的驱动，不需要再折腾，所有直接menuconfig配置上就行了。它包含了一系列成员变量和控件，用于管理并存储TC35874X设备的状态。等，其中一些成员变量与设备的配置、控制、信号处理等相关。最重要的就是probe函数了，基本的初始化配置都是在这里实现的。可以看出tc358743的功能还是很强大的。
19.学习Camera之——相机驱动层–V4L2框架解析
转载和创作优秀的博客
03-29 2036
相机驱动层–V4L2框架解析 一、概览 相机驱动层位于HAL Moudle与硬件层之间，借助linux内核驱动框架，以文件节点的方式暴露接口给 用户空间，让HAL Module通过标准的文件访问接口，从而能够将请求顺利地下发到内核中，而在内核 中，为了更好的支持视频流的操作，早先提出了v4l视频处理框架，但是由于操作复杂，并且代码无法 进行较好的重构，难以维护等原因，之后便衍生出了v4l2框架。 按照v4l2标准，它将一个数据流设备抽象成一个videoX节点，从属的子设备都对应着各自的 v4l2_s..
V4L2框架解析
程序员Android
06-10 3810
和你一起终身学习，这里是程序员Android经典好文推荐，通过阅读本文，您将收获以下知识点:一、概览二、流程简介三、关键结构体四、模块初始化五、处理用户空间请求一、概览相机驱动层位于HAL Moudle与硬件层之间，借助linux内核驱动框架，以文件节点的方式暴露接口给用户空间，让HAL Module通过标准的文件访问接口，从而能够将请求顺利地下发到内核中，而在内核中，为了更好的支持视频流的操作，...
世勤实习经历总结
xieqianwei1989的专栏
06-13 2063
V4L2视频驱动大致完成，剩下工作配合调试并修正驱动。主要基于图形显示，稳定程度及抓图速度进行了改进。通过启动内核的打印信息和输入命令之后的打印信息来判断整个流程是否出现了问题，同时可用示波器测量观察是否有数据通过，来判断是哪个芯片上面出现了问题。比如通过打印一些控制寄存器的值，并联系芯片的厂家还配合这些时间参数的设置。整个产品的目的医疗用途，是通过高清摄像头（CMV4000，2048*2048）
Android Camera 从应用层看V4L2驱动框架
weixin_49303682的博客
08-24 1871
V4L2可用于采集图片、视频和音频数据的通用 API 接口，配合适当的视频采集设备和相应的驱动程序，可以实现图片、视频、音频等的采集。 使用 V4L2 进行视频采集，一般分为 5 个步骤： （1） 打开设备，进行初始化参数设置，通过 V4L2 接口设置视频图像的采集 窗口、采集的点阵大小和格式； （2） 申请图像帧缓冲，并进行内存映射，将这些帧缓冲区从内核空间映射 到用户空间，便于应用程序读取、处理图像数据； （3） 将帧缓冲进行入队操作，启动视频采集； （4） 驱动开始视频数据的采集，应用程序从视频
V4L2框架和media controller框架的联系
bai915290475的博客
05-13 271
是Linux内核中的一个更高层次的抽象，它提供了一个统一的方法来枚举和控制与视频设备相关的不同硬件组件。总的来说，V4L2框架专注于提供视频设备的控制接口，而media controller框架则负责设备发现、拓扑管理和数据流路由，两者相互配合，共同为Linux系统上的视频设备提供全面的支持。：在视频捕获和处理过程中，数据流的控制和路由是通过media controller框架来管理的，它确保数据按照拓扑图中定义的路径在各个子设备之间流动。
Android Camera V4L2框架的驱动层分析
weixin_49303682的博客
05-15 1204
1.V4L2 框架 v4l2驱动框架主要的对象有video_device、v4l2_device、v4l2_subdev、videobuf。 video_device： 一个字符设备，为用户空间提供设备节点(/dev/videox)，提供系统调用的相关操作(open、ioctl…) v4l2_device： 嵌入到video_device中，表示一个v4l2设备的实例 v4l2_subdev： 依附在v4l2_device之下，并表示一个v4l2设备的子设备，一个v4l2_devide下可以有
rk3399 Linux ov2710调试
qq_32645109的博客
11-18 2693
1、rkisp框架下ov2710dts配置 &rkisp1_0 { status = "okay"; port { #address-cells = <1>; #size-cells = <0>; isp0_mipi_in: endpoint@0 { reg = <0>; remote-endpoint = &lt
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值