FFmpeg-channel rematrix

最新推荐文章于 2024-08-20 14:56:36 发布
最新推荐文章于 2024-08-20 14:56:36 发布
阅读量839 收藏
点赞数
文章标签： ffmpeg
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hongszh/article/details/132070235
版权

channel rematrix

Channel rematrix 是一种音频处理技术，用于将多声道音频转换为不同的多声道格式。它可以将一个多声道音频信号从一种布局转换为另一种布局，例如从 5.1 到 7.1 或从立体声到环绕声。

ffmpeg中的rematrix可以通过fixter完成，swresample也支持auto-rematrix。

ffmpeg -y -v 56 -i 1ch-16k.wav -filter_complex "\
[0:a]pan=mono|c0=c0[a0]; \
[0:a]pan=mono|c0=c0[a1]; \
[0:a]pan=mono|c0=c0[a2]; \
[0:a]pan=mono|c0=c0[a3]; \
[0:a]pan=mono|c0=c0[a4]; \
[0:a]pan=mono|c0=c0[a5]; \
[0:a]pan=mono|c0=c0[a6]; \
[0:a]pan=mono|c0=c0[a7]; \
[0:a]pan=mono|c0=c0[a8]; \
[0:a]pan=mono|c0=c0[a9]; \
[0:a]pan=mono|c0=c0[a10]; \
[0:a]pan=mono|c0=c0[a11]; \
[a0][a1][a2][a3][a4][a5][a6][a7][a8][a9][a10][a11]amerge=inputs=12[aout]" \
-map "[aout]" 12ch-16k.wav

这个命令将一个1声道、16kHz采样率的wav文件转换为12声道音频文件，并且每个声道的内容都相同。下面是对命令的详细解释：

  • -y：覆盖输出文件，不询问。
  • -v 56：设置日志级别为verbose，输出更多详细信息。
  • -i 1ch-16k.wav：指定输入文件路径。
  • -filter_complex "..."：使用复合滤镜进行处理。复合滤镜可以包含多个滤镜及其连接关系。
  • [0:a]pan=mono|c0=c0[a0]：使用pan滤镜将输入音频流（第0条流）从单声道变成12个单独的声道之一（第0号声道），并将输出流命名为a0。
  • [0:a]pan=mono|c0=c0[a1]：同上，将输入流从单声道变成12个单独的声道之一（第1号声道），并将输出流命名为a1。
  • …：依次类推，直到为所有12个声道都创建了一个新的输出流。
  • [a0][a1][a2]...[a11]amerge=inputs=12[aout]：使用amerge滤镜将12个单独的声道混合成一个12声道的音频流，并将输出流命名为aout。其中inputs=12表示输入流的数量为12。
  • -map "[aout]"：指定复合滤镜的输出流作为输出文件的音频流。
  • 12ch-16k.wav：指定输出文件路径。

最终，这个命令会将单声道音频文件转换为12声道音频文件，每个声道的内容都相同。由于使用了pan滤镜，所以输出文件中的每一个声道都来自于原始音频文件的左声道。如果需要使用右声道，可以将c0=c0修改为c0=c1。

因为ffmpeg不支持12 channel播放，所以这个播放的时候会报错，需要指定layout才行，比如12channel，实际只播放8channel，这个就先不尝试了。

因此，发现ffmpeg中定义了下面的channel layout，如果不是这里面的就需要指定channel layout：

#define AV_CHANNEL_LAYOUT_MONO              AV_CHANNEL_LAYOUT_MASK(1,  AV_CH_LAYOUT_MONO)
#define AV_CHANNEL_LAYOUT_STEREO            AV_CHANNEL_LAYOUT_MASK(2,  AV_CH_LAYOUT_STEREO)
#define AV_CHANNEL_LAYOUT_2POINT1           AV_CHANNEL_LAYOUT_MASK(3,  AV_CH_LAYOUT_2POINT1)
#define AV_CHANNEL_LAYOUT_2_1               AV_CHANNEL_LAYOUT_MASK(3,  AV_CH_LAYOUT_2_1)
#define AV_CHANNEL_LAYOUT_SURROUND          AV_CHANNEL_LAYOUT_MASK(3,  AV_CH_LAYOUT_SURROUND)
#define AV_CHANNEL_LAYOUT_3POINT1           AV_CHANNEL_LAYOUT_MASK(4,  AV_CH_LAYOUT_3POINT1)
#define AV_CHANNEL_LAYOUT_4POINT0           AV_CHANNEL_LAYOUT_MASK(4,  AV_CH_LAYOUT_4POINT0)
#define AV_CHANNEL_LAYOUT_4POINT1           AV_CHANNEL_LAYOUT_MASK(5,  AV_CH_LAYOUT_4POINT1)
#define AV_CHANNEL_LAYOUT_2_2               AV_CHANNEL_LAYOUT_MASK(4,  AV_CH_LAYOUT_2_2)
#define AV_CHANNEL_LAYOUT_QUAD              AV_CHANNEL_LAYOUT_MASK(4,  AV_CH_LAYOUT_QUAD)
#define AV_CHANNEL_LAYOUT_5POINT0           AV_CHANNEL_LAYOUT_MASK(5,  AV_CH_LAYOUT_5POINT0)
#define AV_CHANNEL_LAYOUT_5POINT1           AV_CHANNEL_LAYOUT_MASK(6,  AV_CH_LAYOUT_5POINT1)
#define AV_CHANNEL_LAYOUT_5POINT0_BACK      AV_CHANNEL_LAYOUT_MASK(5,  AV_CH_LAYOUT_5POINT0_BACK)
#define AV_CHANNEL_LAYOUT_5POINT1_BACK      AV_CHANNEL_LAYOUT_MASK(6,  AV_CH_LAYOUT_5POINT1_BACK)
#define AV_CHANNEL_LAYOUT_6POINT0           AV_CHANNEL_LAYOUT_MASK(6,  AV_CH_LAYOUT_6POINT0)
#define AV_CHANNEL_LAYOUT_6POINT0_FRONT     AV_CHANNEL_LAYOUT_MASK(6,  AV_CH_LAYOUT_6POINT0_FRONT)
#define AV_CHANNEL_LAYOUT_HEXAGONAL         AV_CHANNEL_LAYOUT_MASK(6,  AV_CH_LAYOUT_HEXAGONAL)
#define AV_CHANNEL_LAYOUT_6POINT1           AV_CHANNEL_LAYOUT_MASK(7,  AV_CH_LAYOUT_6POINT1)
#define AV_CHANNEL_LAYOUT_6POINT1_BACK      AV_CHANNEL_LAYOUT_MASK(7,  AV_CH_LAYOUT_6POINT1_BACK)
#define AV_CHANNEL_LAYOUT_6POINT1_FRONT     AV_CHANNEL_LAYOUT_MASK(7,  AV_CH_LAYOUT_6POINT1_FRONT)
#define AV_CHANNEL_LAYOUT_7POINT0           AV_CHANNEL_LAYOUT_MASK(7,  AV_CH_LAYOUT_7POINT0)
#define AV_CHANNEL_LAYOUT_7POINT0_FRONT     AV_CHANNEL_LAYOUT_MASK(7,  AV_CH_LAYOUT_7POINT0_FRONT)
#define AV_CHANNEL_LAYOUT_7POINT1           AV_CHANNEL_LAYOUT_MASK(8,  AV_CH_LAYOUT_7POINT1)
#define AV_CHANNEL_LAYOUT_7POINT1_WIDE      AV_CHANNEL_LAYOUT_MASK(8,  AV_CH_LAYOUT_7POINT1_WIDE)
#define AV_CHANNEL_LAYOUT_7POINT1_WIDE_BACK AV_CHANNEL_LAYOUT_MASK(8,  AV_CH_LAYOUT_7POINT1_WIDE_BACK)
#define AV_CHANNEL_LAYOUT_OCTAGONAL         AV_CHANNEL_LAYOUT_MASK(8,  AV_CH_LAYOUT_OCTAGONAL)
#define AV_CHANNEL_LAYOUT_HEXADECAGONAL     AV_CHANNEL_LAYOUT_MASK(16, AV_CH_LAYOUT_HEXADECAGONAL)
#define AV_CHANNEL_LAYOUT_STEREO_DOWNMIX    AV_CHANNEL_LAYOUT_MASK(2,  AV_CH_LAYOUT_STEREO_DOWNMIX)
#define AV_CHANNEL_LAYOUT_22POINT2          AV_CHANNEL_LAYOUT_MASK(24, AV_CH_LAYOUT_22POINT2)

这里面有16channel，那么用这个复杂的graph可以生成16 channel的wav文件，播放也正常：

ffmpeg -y -v 56 -i 1ch-16k.wav -filter_complex "\
[0:a]pan=mono|c0=c0[a0]; \
[0:a]pan=mono|c0=c0[a1]; \
[0:a]pan=mono|c0=c0[a2]; \
[0:a]pan=mono|c0=c0[a3]; \
[0:a]pan=mono|c0=c0[a4]; \
[0:a]pan=mono|c0=c0[a5]; \
[0:a]pan=mono|c0=c0[a6]; \
[0:a]pan=mono|c0=c0[a7]; \
[0:a]pan=mono|c0=c0[a8]; \
[0:a]pan=mono|c0=c0[a9]; \
[0:a]pan=mono|c0=c0[a10]; \
[0:a]pan=mono|c0=c0[a11]; \
[0:a]pan=mono|c0=c0[a12]; \
[0:a]pan=mono|c0=c0[a13]; \
[0:a]pan=mono|c0=c0[a14]; \
[0:a]pan=mono|c0=c0[a15]; \
[a0][a1][a2][a3][a4][a5][a6][a7][a8][a9][a10][a11][a12][a13][a14][a15]amerge=inputs=16[aout]" \
-map "[aout]" 16ch-16k.wav

这个实际上用最简单的-ac参数也可以：

ffmpeg -y -v 56 -i 1ch-16k.wav -ac 16 out.wav

pan filter的用法

混合具有特定增益水平的通道。filter接受输出通道布局，后跟一组通道定义。

此filter还旨在有效地重新remap音频流的channels。

混合示例，从立体声缩混到单声道，但左声道的系数更大：

pan=1c|c0=0.9*c0+0.1*c1

自定义缩混至立体声，自动适用于 3、4、5 和 7 声道环绕声：

pan=stereo| FL < FL + 0.5*FC + 0.6*BL + 0.6*SL | FR < FR + 0.5*FC + 0.6*BR + 0.6*SR

给定相同的来源，您还可以切换左前和右前声道并保持输入声道布局：

pan="5.1| c0=c1 | c1=c0 | c2=c2 | c3=c3 | c4=c4 | c5=c5"

如果输入是立体声音频流，您可以将左前声道静音（并仍然保持立体声声道布局）：

pan="stereo|c1=c1"

仍然使用立体声音频流输入，您可以在左前和右前复制右声道：

pan="stereo| c0=FR | c1=FR"

学习完pan的用法之后，前面的这个1声道转16声道，命令可以简化为:

ffmpeg -y -v 56 -i 1ch-16k.wav -af "\
pan=hexadecagonal | c0=c0 | c1=c0 | c2=c0 | c3=c0 | c4=c0 \
                  | c5=c0 | c6=c0 | c7=c0 | c8=c0 | c9=c0 \
                  | c10=c0 | c11=c0 | c12=c0 | c13=c0 | c14=c0 | c15=c0" \
12ch-16k.wav

其中hexadecagonal来自ffmpeg中layout的定义，通过-layouts可以看到：

Standard channel layouts:
NAME           DECOMPOSITION
mono           FC
stereo         FL+FR
2.1            FL+FR+LFE
3.0            FL+FR+FC
3.0(back)      FL+FR+BC
4.0            FL+FR+FC+BC
quad           FL+FR+BL+BR
quad(side)     FL+FR+SL+SR
3.1            FL+FR+FC+LFE
5.0            FL+FR+FC+BL+BR
5.0(side)      FL+FR+FC+SL+SR
4.1            FL+FR+FC+LFE+BC
5.1            FL+FR+FC+LFE+BL+BR
5.1(side)      FL+FR+FC+LFE+SL+SR
6.0            FL+FR+FC+BC+SL+SR
6.0(front)     FL+FR+FLC+FRC+SL+SR
hexagonal      FL+FR+FC+BL+BR+BC
6.1            FL+FR+FC+LFE+BC+SL+SR
6.1(back)      FL+FR+FC+LFE+BL+BR+BC
6.1(front)     FL+FR+LFE+FLC+FRC+SL+SR
7.0            FL+FR+FC+BL+BR+SL+SR
7.0(front)     FL+FR+FC+FLC+FRC+SL+SR
7.1            FL+FR+FC+LFE+BL+BR+SL+SR
7.1(wide)      FL+FR+FC+LFE+BL+BR+FLC+FRC
7.1(wide-side) FL+FR+FC+LFE+FLC+FRC+SL+SR
octagonal      FL+FR+FC+BL+BR+BC+SL+SR
hexadecagonal  FL+FR+FC+BL+BR+BC+SL+SR+TFL+TFC+TFR+TBL+TBC+TBR+WL+WR
downmix        DL+DR
22.2           FL+FR+FC+LFE+BL+BR+FLC+FRC+BC+SL+SR+TC+TFL+TFC+TFR+TBL+TBC+TBR+LFE2+TSL+TSR+BFC+BFL+BFR

参考

AudioChannelManipulation

Convert Multiple audio tracks into a Single Track with 12 channels using ffmpeg

HUI的技术笔记
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
FFmpeg学习（10）—— ffmpeg最全的命令参数
liinux-Talk is cheap,show me the code.
03-10 3010
查看帮助：ffmpeg-hfull Hyper fast Audio and Video encoder usage: ffmpeg [options] [[infile options] -i infile]... {[outfile options] outfile}... Getting help: -h -- print basic opti...
ffmpeg-gl-transition
12-18
`ffmpeg-gl-transition` 是 FFmpeg 的一个扩展，它引入了OpenGL（Graphics Library）支持，使得在视频剪辑中实现平滑的过渡效果成为可能。这个项目允许你在处理视频时，利用GPU的计算能力来创建高级的视觉效果，特别...
声道
shuyong1999的专栏
12-31 1090
声卡所支持的声道数是衡量声卡档次的重要指标之一，从单声道到最新的环绕立体声，下面一一详细介绍： 单声道 　　单声道是比较原始的声音复制形式，早期的声卡采用的比较普遍。当通过两个扬声器回放单声道信息的时候，我们可以明显感觉到声音是从两个音箱中间传递到我们耳朵里的。这种缺乏位置感的录制方式用现在的眼光看自然是很落后的，但在声卡刚刚起步时，已经是非常先进的技术了。 立体声 　　单声道缺乏对声音的
ffmpeg命令行使用
狗蛋的博客
02-06 6498
查看视频信息 ffmpeg -i 视频名字 视频名字这里输入前几个字符按 tab 键可以自动补全 返回结果： 红框之内的内容没什么用 编码器 ：encoder : Lavf57.25.100 持续时间：Duration: 00:14:20.58, start: 0.000000, bitrate: 381 kb/s Duration 持续时间，start 开始时间，bitrate比特率 视频流： Stream #0:0(und): Video: h264 (Constrained Ba
FFMPEG学习【libavutil】：音频相关（二）
一世豁然的专栏
07-29 1310
一、Audio channel layouts 一）、宏 #define  AV_CH_LAYOUT_MONO   (AV_CH_FRONT_CENTER) #define  AV_CH_LAYOUT_STEREO   (AV_CH_FRONT_LEFT|AV_CH_FRONT_RIGHT)
FFMPEG进阶系列02-ffmpeg命令详解2
muyuyuzhong的专栏
10-04 2934
文章目录帮助信息查看ffmpeg版本查看formats其他大类的查看查看具体demuxer/muxer/decoder/encoder/filter所支持的参数查看FLV封装器的参数支持查看flv解封装器的参数支持查看H264（AVC）的编码参数支持查看音频支持的PCM格式以及声道布局更多资料，更多分享 帮助信息 查看ffmpeg版本 通过ffmpeg -version查看ffmpeg的版本，这里...
FFmpeg源码分析：获取声道布局与声道数
热门推荐
徐福记456
12-17 2万+
FFmpeg在libavutil模块封装有获取声道布局与声道数的API。声道布局包括：单声道、立体声道、环绕声道、5.0声道、5.1声道、7.0声道、7.1声道等。声道掩码包括：前方左边、前方右边、前方中央、低频、后方左边、后方右边、后方中央、左环绕、右环绕等。声道布局、声道名字和声道位置可以互相转换。
FFmpeg-swresample的更新
技术笔记
07-29 748
其中int_sample_fmt就表示internal format，顾名思义，就是用于swresample内部的sample format格式。如果是0，那么audio conversion是都可以关掉的，这段代码在configure_filtergraph()函数中，flag设置为。：指定了保存的文件格式是PCM，不是wav，所以保存出来的文件按wav来解析是不对的，即使文件名为out.wav也不行。FFmpeg命令中，默认不指定aresample的时候是swr采样，使用soxr，就需要手动指定。
FFMPEG命令行详细参数（完整）
单眼皮的老虎的专栏
02-07 2万+
usage: ffmpeg [options] [[infile options] -i infile]... {[outfile options] outfile}... Getting help: -h -- print basic options -h long -- print more options -h full -- prin
ffmpeg-6.1.1.tar，ffmpeg-master-latest-win64-gpl-shared
04-02
ffmpeg-6.1.1.tar 是一个包含 FFmpeg 6.1.1 版本源代码的压缩包。FFmpeg 是一套能够处理多媒体数据（音频、视频、字幕等）的开源计算机程序库和命令行工具，广泛应用于音视频处理、转码、流媒体等领域1。 要使用该...
FFmpeg-master.zip_FFmpeg-master_ffmpeg_ffmpeg 播放
09-14
"FFmpeg-master.zip" 是 FFmpeg 源代码的压缩包，"FFmpeg-master" 是源代码仓库的主目录，而 "ffmpeg_ffmpeg 播放" 指的是使用 FFmpeg 进行视频播放的相关示例。 在 FFmpeg 中，播放视频主要涉及到以下几个关键步骤...
ffmpeg-master-latest-win64-gpl.zip
06-15
在本压缩包"ffmpeg-master-latest-win64-gpl.zip"中，包含了最新版的FFmpeg源码及其适用于64位Windows系统的编译版本，且该版本遵循GPL许可协议。 FFmpeg 主要由以下几个组件构成： 1. **FFmpeg命令行工具**：这是...
ffmpeg-5.0.1
07-06
这个名为 "ffmpeg-5.0.1" 的压缩包很可能是 FFmpeg 的一个特定版本，版本号为5.0.1，通常包含了源代码、编译脚本以及可能的构建好的可执行文件。这个版本的 FFmpeg 可能修复了一些bug，添加了新的功能，或者优化了...
How to stream video in a loop via RTP using ffmpeg?
fs交流的博客
08-20 102
vlc 应该可以播放出来的。
流媒体服务器二 3学习 librtmp 库的配置使用
最新发布
hunandede的博客
08-20 82
librtmp 库是个啥？ windows下编译librtmp库 linux 下编译librtmp库
【流媒体】RTMPDump—RTMP_ConnectStream（创建流连接）
weixin_42877471的博客
08-16 1083
RTMP_ConnectStream()的作用是建立流连接，先回顾一下RTMP标准文档当中是如何进行流的连接的，以client向server发送play命令为例，流程图如下所示。现在假设状态为client向server发送了av_connect命令，server会给予一个反馈，client会根据这个反馈去进行下一步的操作，此时会调用RTMP_SendCreateStream()函数发送av_createStream命令，RTMP_SendCreateStream()函数定义如下。（2）解析packet。
DM8守护集群部署、数据同步验证、主备切换
m0_37625564的博客
08-20 376
实例详情端口详情。
一个简单的Rtmp推流客户端（QT录音，OpenCV摄像，FFmpeg编码推流）
u012959478的博客
08-17 1228
RTMP推流客户端是一种能够将音视频数据推送到RTMP服务器的工具。QT录音是利用Qt库实现的录音功能。OpenCV摄像是利用OpenCV库实现的对摄像头的控制和图像处理功能。FFmpeg编码推流是利用FFmpeg库实现的将音视频数据进行编码并推流到RTMP服务器的功能。本文将介绍如何使用RTMP推流客户端结合QT录音、OpenCV摄像和FFmpeg编码推流来实现将音视频数据推送到RTMP服务器的功能。
pip install ffmpeg ffmpeg-python
06-04
关于`pip install ffmpeg`和`ffmpeg-python`的安装方法，可以参考以下信息。 1.安装ffmpeg `ffmpeg`是一个开源的音视频编解码器，可以用来处理各种音频和视频文件。要安装`ffmpeg`，可以使用以下命令： ```shell # Ubuntu or Debian sudo apt install ffmpeg # CentOS or Fedora sudo yum install ffmpeg ``` 2.安装ffmpeg-python `ffmpeg-python`是一个Python模块，它可以与`ffmpeg`命令行工具结合使用，用于解码、编码、转换和处理音频和视频文件。要安装`ffmpeg-python`，可以使用以下命令： ```shell pip install ffmpeg-python ``` 注意：在使用`ffmpeg-python`之前，确保已经安装了`ffmpeg`命令行工具。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值