Nvidia Jetson 编解码开发（6）Jetpack 4.x版本Multimedia API 硬件编码开发--输入端对接Camera V4L2采集

已于 2023-08-25 16:48:41 修改
阅读量514 收藏 1
点赞数
分类专栏： Nvidia Jetson编解码开发 文章标签： 视频编解码 Jetson camera
于 2023-08-25 15:42:35 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jzwjzw19900922/article/details/132496719
版权

1.前言

Nvidia Jetson 编解码开发（2）Jetpack 4.x版本Multimedia API 硬件编码开发--集成encode模块_free-xx的博客-CSDN博客

基于上篇继续开发

由于上篇只集成了encode模块，但是编码输入输出端都是读写文件

此篇主要描述encode 输入端如何对接Camera V4L2采集端

2. 前提说明

说明1：

         jetson encode只能支持YUV420编码，不支持YUV422

         Camera 采集端视频格式是YUV422 8bit

         所以必须要先把YUV422转换成YUV420

说明2：

         nvbuffer的YUV image数据拷贝需要考虑 stride问题

         例如： 1920*1080的YUV420图像

                        实际像素 stride

                        

了解本专栏 订阅专栏 解锁全文 超级会员免费看
free-xx
关注
专栏目录
订阅专栏
Nvidia Jetson 编解码开发（2）Jetpack 4.x版本Multimedia API 硬件编码开发--集成encode模块
jzwjzw19900922的博客
08-18 1278
使用的Multimedia API版本： Tegra_Multimedia_API_R28.4.0_aarch64兼容Jetpack4.x 系列版本Jetson（Nano/Tx2/Xavier/Xavier NX）测试平台： Xavier NX测试版本： JetPack 4.4 -R32.4.3Note： 早期的Multimedia API是在Jeston下载中心发布的后面都是随Jetpack一起集成在系统了编码模块不支持YUV422，只支持YUV420输入YUV422会编码模块会报错。
Nvidia Jetson 编解码开发（7）Jetpack 4.x版本Multimedia API 硬件编码开发--输出端对接ROS publish
jzwjzw19900922的博客
08-25 445
所以ROS相关句柄和数据容器最好放在 context_t 这个结构体里。需求： 编码完的H265数据通过ROS 发布出去，由于后续上位机播放。添加编码通道标识【用来区分 ros publish 消息】同时需要Publish两路H265 ROS消息。或者可以开发ROS订阅程序进行验证，也比较简单。可以用来验证ROS发布的H265数据是否正常。至此ROS H265 Puslish开发完成。验证的话，我这里有对应的上位机进行。这里需要进行两路视频H265编码。2.3 注册Publisher。
Windows Multimedia API
03-09 3451
DLL 文件： winmm 或者 winmm.dll DLL 名称： Windows Multimedia API 描述： winmm.dll是Windows多媒体相关应用程序接口，用于低档的音频和游戏手柄。 函数汇总： auxGetDevCaps 查询指定的辅助输出设备以确定其性能 auxGetNumDevs 检取系统中存在的辅助输出设备的数量 auxGetVolume 返回指定的
Jetson 相机编码
weixin_43229348的博客
02-03 1275
Jetson相机编码是即将发布的“实践”系列的相关代码。
学习Camera之——V4L2视频输入框架概述
转载和创作优秀的博客
04-09 1252
V4L2框架简介 几乎所有的设备都有多个 IC 模块，它们可能是实体的（例如 USB 摄像头里面包含 ISP、sensor 等）、 也可能是抽象的（如 USB 设备里面的抽象拓扑结构），它们在 /dev 目录下面生成了多个设备节点， 并且这些 IC 模块还创建了一些非 v4l2 设备：DVB、ALSA、FB、I2C 和输入设备。正是由于硬件的 复杂性，v4l2 的驱动也变得非常复杂。 特别是 v4l2 驱动要支持 IC 模块来进行音/视频的混合/编解码操作，这就更加使得 v4l2 驱动变得 异常复.
Nvidia Jetson 编解码开发（5）Jetpack 5.x版本Multimedia API 硬件编码开发
jzwjzw19900922的博客
08-21 886
基于之前的开发程序开发版本是基于JetPack 4.x版本现在需要迁移到JetPack 5.x版本（新发布的Orin/Orin NX/Orin Nano都是JetPack 5.x版本）尝试直接在5.x版本运行4.x版本的程序，出现段错误所以4.x和5.x的编码部分是不兼容的；需要重新集成5.x版本的编码模块。
NVIDIA jetson nx编解码使用大全.docx
08-29
【NVIDIA Jetson NX 编解码使用大全】 在嵌入式计算领域，NVIDIA Jetson 系列，特别是Jetson NX，因其强大的图形处理能力和高效能计算性能，被广泛应用于多媒体处理，其中包括音视频的编解码。本文将详细介绍如何在...
Jetson视频编码
最新发布
不定期更新关于音视频的文章
03-21 1321
本文对Jetpack 5.0.2的03_video_cuda_enc编码流程进行详细介绍，代码地址：/usr/src/jetson_multimedia_api/samples/03_video_cuda_enc/。编码和解码除了具体定义不一样，过程基本相似。
NVIDIA_Jetson_Linux_MultimediaAPIReference.tar
08-18
英伟达jetson linux开发资料，api接口文档
理解Gstreamer架构
铁匠Smith先生的专栏
02-23 4342
本文给出了Gstreamer的总体设计。通过阅读本文可以了解Gstreamer的内部工作原理。本文编译自gstreamer源码中的文档，原文在源码中的位置是/gstreamer/docs/design/part-overview.txt。 概述 Gstreamer是一个libraries和plugins的集合，用于帮助实现各种类型的多媒体应用程序，比如播放器，转码工具，多媒体服务器等。
Jetson TX1 L4T_Tegra_X1 Multimedia多媒体开发指导
01-12
jetson tx1 上多媒体开发指导，板载相机的图像视频拍照录制等，英文对照文档说明指导。
中文--Jetson TX1 L4T_Tegra_X1 Multimedia多媒体开发指导
06-22
jetson tx1 上多媒体开发指导，板载相机的图像视频拍照录制等，中文对照文档说明指导。
Jetson Xavier NX FFmpeg支持硬件编解码
一步一脚印
03-20 3730
Jetson Xavier NX平台上FFmpeg硬件编加码支持
nVidia Jetson 系列模组视频编码、解码性能一览表
程序猿视角
03-23 2701
1. 视频编码 2. 视频解码
NVIDIA Jetson xavier NX multimedia
cumtchw
07-29 953
NVIDIA Jetson xavier NX刷机之后，在板子里面就会有multimedia的相关demo，路径为/usr/src/jetson_multimedia_api 另外，google搜索multimediaapi 可以进入官网里面有关multimedia的介绍，https://docs.nvidia.com/jetson/l4t-multimedia/index.html ...
音视频编解码：NVIDIA Jetson Linux Multimedia API（总结）
YBAdiam的博客
12-02 5904
一、官网链接 官网链接：https://docs.nvidia.com/jetson/l4t-multimedia/index.html 二、环境 我这边用的是jetson nano，刷机是JetPack4.4版本。jetsonmultimedia相关的samples已经在板子里面了/usr/src/jetson_multimedia_api/samples，我们可以逐一跑测试。 需要配置的环境：CUDA、Opencv4tegra、cuDNN（r）、TensorRT 三、测试用例 下图是sam.
Jetson NX FFmpeg硬件编解码实现
reset2021的博客
10-30 1763
jetson nx 硬编码与硬解码的编译与测试验证
NVIDIA视频编解码
不定期更新关于音视频的文章
02-23 820
开源了两个项目：英伟达显卡视频编解码、jetson视频编解码。都是基于官方SDK进行的封装，由于官方自带的demo晦涩难懂并且每块都是独立的，我对SDK进行二次封装并形成了一套较为完整的视频编解码流程，调用简单，有完整的测试程序，想学习SDK或者想直接使用的可以看过来。
NVIDIA硬编码方式：omxh264enc和nvv4l2h264enc
YBAdiam的博客
03-03 4137
在jetson nano上进行测试两种编码方式性能对比：
怎么使用Windows Multimedia API
05-20
Windows Multimedia API，也称为WinMM API，是一组用于Windows操作系统中的多媒体编程的API。它提供了访问音频，视频和其他多媒体设备的功能。以下是使用Windows Multimedia API的基本步骤： 1. 包含头文件Mmsystem.h。 2. 使用函数waveInOpen打开音频输入设备或waveOutOpen打开音频输出设备。 3. 使用waveInStart或waveOutStart开始录制或播放音频。 4. 如果需要，使用waveInStop或waveOutStop停止录制或播放音频。 5. 使用waveInClose或waveOutClose关闭音频输入或输出设备。 下面是一个简单的示例： ```c++ #include <Windows.h> #include <Mmsystem.h> #pragma comment(lib, "Winmm.lib") int main() { // Open the default audio output device HWAVEOUT hWaveOut; WAVEFORMATEX wfx = { WAVE_FORMAT_PCM, 1, 44100, 44100, 1, 8, 0 }; if (waveOutOpen(&hWaveOut, WAVE_MAPPER, &wfx, 0, 0, CALLBACK_NULL) != MMSYSERR_NOERROR) { return -1; } // Generate a sine wave and play it const int BUFFER_SIZE = 44100; const int FREQUENCY = 440; const double TWO_PI = 6.28318530718; char buffer[BUFFER_SIZE]; for (int i = 0; i < BUFFER_SIZE; i++) { double t = (double)i / BUFFER_SIZE; double sample = sin(t * TWO_PI * FREQUENCY); buffer[i] = (char)(sample * 127 + 128); } WAVEHDR header = { buffer, BUFFER_SIZE, 0, 0, 0, 0, 0, 0 }; waveOutPrepareHeader(hWaveOut, &header, sizeof(header)); waveOutWrite(hWaveOut, &header, sizeof(header)); // Wait for the sound to finish playing while (header.dwFlags & WHDR_STILLPLAYING) { Sleep(10); } // Clean up waveOutUnprepareHeader(hWaveOut, &header, sizeof(header)); waveOutClose(hWaveOut); return 0; } ``` 这个示例打开默认的音频输出设备并生成一个440 Hz的正弦波。然后，它将缓冲区传递给waveOutWrite函数以播放声音。最后，程序等待声音播放完毕，然后关闭音频输出设备。 注意：在使用Windows Multimedia API时，请确保正确处理错误并释放资源，以避免内存泄漏和其他问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

free-xx

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值