Nvidia Jetson 编解码开发（2）Jetpack 4.x版本Multimedia API 硬件编码开发--集成encode模块

已于 2023-08-21 17:01:17 修改
阅读量1.2k 收藏 1
点赞数
分类专栏： Nvidia Jetson编解码开发 文章标签： 驱动开发 Jetson 视频编解码
于 2023-08-18 17:11:42 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jzwjzw19900922/article/details/132365647
版权
本文详细介绍了在Jetson Nano/Tx2/Xavier/NX上使用Jetpack 4.4的Multimedia API进行硬件编码开发的过程，特别是针对H265编码的集成和测试。内容包括sample测试、encode模块集成、代码修改、编译问题解决以及验证步骤。
摘要由CSDN通过智能技术生成

1. 前言

这里介绍Multimedia API的开发流程

这篇主要介绍如何集成encode模块

2. 版本介绍

使用的Multimedia API版本： Tegra_Multimedia_API_R28.4.0_aarch64

兼容Jetpack4.x 系列版本Jetson（Nano/Tx2/Xavier/Xavier NX）

测试平台： Xavier NX

测试版本： JetPack 4.4 -R32.4.3

Note： 早期的Multimedia API是在Jeston下载中心发布的

Jetson Download Center | NVIDIA Developer

后面都是随Jetpack一起集成在系统了

3. sample 测试

下面以video encode为例

3.1 video encode介绍

编码模块不支持YUV422，只支持YUV420

输入YUV422会编码模块会报错

了解本专栏 订阅专栏 解锁全文 超级会员免费看
free-xx
关注
专栏目录
订阅专栏
Nvidia Jetson 编解码开发（5）Jetpack 5.x版本Multimedia API 硬件编码开发
jzwjzw19900922的博客
08-21 882
基于之前的开发程序开发版本是基于JetPack 4.x版本现在需要迁移到JetPack 5.x版本（新发布的Orin/Orin NX/Orin Nano都是JetPack 5.x版本）尝试直接在5.x版本运行4.x版本的程序，出现段错误所以4.x和5.x的编码部分是不兼容的；需要重新集成5.x版本的编码模块。
Nvidia Jetson 编解码开发（6）Jetpack 4.x版本Multimedia API 硬件编码开发--输入端对接Camera V4L2采集
jzwjzw19900922的博客
08-25 510
基于上篇继续开发由于上篇只集成了encode模块，但是编码输入输出端都是读写文件此篇主要描述encode 输入端如何对接Camera V4L2采集端。
音视频编解码：NVIDIA Jetson Linux Multimedia API（总结）
YBAdiam的博客
12-02 5899
一、官网链接 官网链接：https://docs.nvidia.com/jetson/l4t-multimedia/index.html 二、环境 我这边用的是jetson nano，刷机是JetPack4.4版本。jetsonmultimedia相关的samples已经在板子里面了/usr/src/jetson_multimedia_api/samples，我们可以逐一跑测试。 需要配置的环境：CUDA、Opencv4tegra、cuDNN（r）、TensorRT 三、测试用例 下图是sam.
linux视音频解码教程,音视频编解码：NVIDIA Jetson Linux Multimedia API（总结）
weixin_31440211的博客
05-09 1575
音视频编解码：NVIDIA Jetson Linux Multimedia API(总结)2020年12月02日|萬仟网IT编程 |我要评论一、官网链接官网链接：https://docs.nvidia.com/jetson/l4t-multimedia/index.html二、环境我这边用的是jetson nano，刷机是JetPack4.4版本...
Nvidia Jetson Xavier 交叉编译multimedia api
edwardlulinux的专栏
01-18 5006
Jetson Xavier 更新Veye 摄像头的相关dtb与Image。交叉编译multimedia api。
NVIDIA_Jetson_Linux_MultimediaAPIReference.tar
08-18
英伟达jetson linux开发资料，api接口文档
基于Jetson Multimedia API的解码库
space01的专栏
05-12 1253
封装了Jetson Multimedia API的解码库nvjmi，主要功能如下。 1）支持H.264解码。 2）支持解码后直接硬件完成缩放操作。 3）支持解码后直接硬件完成颜色空间转换操作。 4）支持Jetpack 4.3、4.4、4.5。 使用示例可参考下面的例子： if(jmi_ctx_ == nullptr) { jmi::nvJmiCtxParam jmi_ctx_param{}; if(rsz_w > 0 && rsz_h > 0){
Nvidia Jetson 编解码开发（7）Jetpack 4.x版本Multimedia API 硬件编码开发--输出端对接ROS publish
jzwjzw19900922的博客
08-25 443
所以ROS相关句柄和数据容器最好放在 context_t 这个结构体里。需求： 编码完的H265数据通过ROS 发布出去，由于后续上位机播放。添加编码通道标识【用来区分 ros publish 消息】同时需要Publish两路H265 ROS消息。或者可以开发ROS订阅程序进行验证，也比较简单。可以用来验证ROS发布的H265数据是否正常。至此ROS H265 Puslish开发完成。验证的话，我这里有对应的上位机进行。这里需要进行两路视频H265编码。2.3 注册Publisher。
NVIDIA jetson nx编解码使用大全.docx
08-29
【NVIDIA Jetson NX 编解码使用大全】 在嵌入式计算领域，NVIDIA Jetson 系列，特别是Jetson NX，因其强大的图形处理能力和高效能计算性能，被广泛应用于多媒体处理，其中包括音视频的编解码。本文将详细介绍如何在...
Windows Multimedia API
03-09 3449
DLL 文件： winmm 或者 winmm.dll DLL 名称： Windows Multimedia API 描述： winmm.dll是Windows多媒体相关应用程序接口，用于低档的音频和游戏手柄。 函数汇总： auxGetDevCaps 查询指定的辅助输出设备以确定其性能 auxGetNumDevs 检取系统中存在的辅助输出设备的数量 auxGetVolume 返回指定的
Jetson TX1 L4T_Tegra_X1 Multimedia多媒体开发指导
01-12
jetson tx1 上多媒体开发指导，板载相机的图像视频拍照录制等，英文对照文档说明指导。
中文--Jetson TX1 L4T_Tegra_X1 Multimedia多媒体开发指导
06-22
jetson tx1 上多媒体开发指导，板载相机的图像视频拍照录制等，中文对照文档说明指导。
NVIDIA Jetson xavier NX multimedia
cumtchw
07-29 953
NVIDIA Jetson xavier NX刷机之后，在板子里面就会有multimedia的相关demo，路径为/usr/src/jetson_multimedia_api 另外，google搜索multimediaapi 可以进入官网里面有关multimedia的介绍，https://docs.nvidia.com/jetson/l4t-multimedia/index.html ...
x264代码剖析（七）：encode()函数之x264_encoder_encode()函数
weixin_34104341的博客
03-10 437
x264代码剖析（七）：encode()函数之x264_encoder_encode()函数 encode()函数是x264的主干函数，主要包括x264_encoder_open()函数、x264_encoder_headers()函数、x264_encoder_encode()函数与x264_encoder_close()函数四...
NVIDIA JetPack 6.0（现已正式发布）
最新发布
专注于人工智能领域的小何尚
06-05 1494
NVIDIA JetPack SDK 为 NVIDIA Jetson 模块提供支持，为构建端到端加速 AI 应用程序提供全面的解决方案。JetPack 6 通过微服务和一系列新功能扩展了 Jetson 平台的灵活性和可扩展性。它是 2024 年下载次数最多的 JetPack 版本。随着 JetPack 6.0 生产版本的普遍可用，开发人员可以放心地将这些新功能带入最先进的嵌入式 AI 和机器人应用程序。这篇文章重点介绍了主要功能和新的 AI 工作流程。
Jetson视频解码
不定期更新关于音视频的文章
03-21 2766
Jetson 是由 NVIDIA 开发的嵌入式计算平台系列，旨在提供高性能的人工智能（AI）计算能力，适用于嵌入式系统、机器人、自动驾驶汽车和其他边缘计算应用。Jetson 平台通常集成了 NVIDIA 的 GPU 和其他硬件加速器，能够在低功耗的环境下执行复杂的深度学习和计算任务。Jetson Multimedia API（Jetson 多媒体 API）是 NVIDIA 提供的一组软件工具和接口，用于在 Jetson 平台上进行视频和图像处理。
Jetson板卡硬件编解码总结
诗筱涵的博客
04-28 622
官方的其实就这些，硬件解码用nvv4l2decoder，硬件编码用nvv4l2h264enc。另外一个常用的是omxh264enc（
理解Gstreamer架构
铁匠Smith先生的专栏
02-23 4340
本文给出了Gstreamer的总体设计。通过阅读本文可以了解Gstreamer的内部工作原理。本文编译自gstreamer源码中的文档，原文在源码中的位置是/gstreamer/docs/design/part-overview.txt。 概述 Gstreamer是一个libraries和plugins的集合，用于帮助实现各种类型的多媒体应用程序，比如播放器，转码工具，多媒体服务器等。
【NVIDIA Jetpack6.0】Jetson AGX Orin内核、设备树更新指南
从善若水的博客
05-12 2782
2024年5月4号，nvidia正式发布了Jetpack6.0版本，这个版本带来了很多功能，包括： - 新的cude、tensorrt等库，可以大幅提升AI推理性能（亲测提升很明显，所以才考虑从Jetpack5.1升级到最新版本）； - 可以使用UpStreaming Linux内核版本，并且提供了实时内核； - 根文件系统升级到了Ubuntu2204；
怎么使用Windows Multimedia API
05-20
Windows Multimedia API，也称为WinMM API，是一组用于Windows操作系统中的多媒体编程的API。它提供了访问音频，视频和其他多媒体设备的功能。以下是使用Windows Multimedia API的基本步骤： 1. 包含头文件Mmsystem.h。 2. 使用函数waveInOpen打开音频输入设备或waveOutOpen打开音频输出设备。 3. 使用waveInStart或waveOutStart开始录制或播放音频。 4. 如果需要，使用waveInStop或waveOutStop停止录制或播放音频。 5. 使用waveInClose或waveOutClose关闭音频输入或输出设备。 下面是一个简单的示例： ```c++ #include <Windows.h> #include <Mmsystem.h> #pragma comment(lib, "Winmm.lib") int main() { // Open the default audio output device HWAVEOUT hWaveOut; WAVEFORMATEX wfx = { WAVE_FORMAT_PCM, 1, 44100, 44100, 1, 8, 0 }; if (waveOutOpen(&hWaveOut, WAVE_MAPPER, &wfx, 0, 0, CALLBACK_NULL) != MMSYSERR_NOERROR) { return -1; } // Generate a sine wave and play it const int BUFFER_SIZE = 44100; const int FREQUENCY = 440; const double TWO_PI = 6.28318530718; char buffer[BUFFER_SIZE]; for (int i = 0; i < BUFFER_SIZE; i++) { double t = (double)i / BUFFER_SIZE; double sample = sin(t * TWO_PI * FREQUENCY); buffer[i] = (char)(sample * 127 + 128); } WAVEHDR header = { buffer, BUFFER_SIZE, 0, 0, 0, 0, 0, 0 }; waveOutPrepareHeader(hWaveOut, &header, sizeof(header)); waveOutWrite(hWaveOut, &header, sizeof(header)); // Wait for the sound to finish playing while (header.dwFlags & WHDR_STILLPLAYING) { Sleep(10); } // Clean up waveOutUnprepareHeader(hWaveOut, &header, sizeof(header)); waveOutClose(hWaveOut); return 0; } ``` 这个示例打开默认的音频输出设备并生成一个440 Hz的正弦波。然后，它将缓冲区传递给waveOutWrite函数以播放声音。最后，程序等待声音播放完毕，然后关闭音频输出设备。 注意：在使用Windows Multimedia API时，请确保正确处理错误并释放资源，以避免内存泄漏和其他问题。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

free-xx

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值