使用FFmpeg从音视频处理到流媒体技术的探索和实战应用

Yeats_Liao

已于 2024-05-16 10:13:59 修改

阅读量774

点赞数 20

分类专栏：开发中的疑难杂症文章标签： ffmpeg 音视频

于 2024-04-18 11:12:26 首次发布

本文链接：https://blog.csdn.net/qq_46207024/article/details/135529527

版权

开发中的疑难杂症专栏收录该内容

35 篇文章 0 订阅

订阅专栏

一、基础功能

1. 音视频转码

FFmpeg的转码功能基于其丰富的编码器和解码器支持。例如，将一个MP4格式的视频文件转换为AVI格式：

ffmpeg -i input.mp4 -c:v libxvid -c:a copy output.avi

-i input.mp4 指定输入文件。
-c:v libxvid 设置视频编码器为Xvid，用于转码视频流。
-c:a copy 表示音频流保持不变（直接复制），若需转码音频可替换为指定的音频编码器，如 -c:a libmp3lame 转为MP3格式。

2. 音视频剪辑

对于精确的时间戳剪辑，可以使用-ss参数定位开始时间点，并用-t或-to设定持续时长：

ffmpeg -i input.mp4 -ss 00:01:30 -t 00:00:30 -c copy cut.mp4

这里从原始视频的1分30秒处开始截取，时长为30秒，且由于使用了-c copy，因此进行的是无损剪辑（假设源容器支持）。

3. 音视频合并

将多个音视频文件拼接成一个文件，需要对各个文件进行同步处理并按顺序合并：

ffmpeg -i video1.mp4 -i audio1.mp3 -i video2.mp4 -i audio2.mp3 \
-filter_complex "[0:v][0:a][1:v][1:a][2:v][2:a]concat=n=3:v=1:a=1[v][a]" \
-map "[v]" -map "[a]" -c:v libx264 -crf 23 -preset medium -c:a aac -b:a 192k output.mp4

此命令中，-filter_complex 参数内的 concat 过滤器用来连接所有音视频流，生成最终的输出文件。

4. 提取音频

从视频中提取音频轨道：

ffmpeg -i input.mp4 -vn -ab 192k -ar 44100 -ac 2 output.mp3

-vn 表示不包含视频流。
-ab 设定音频比特率。
-ar 和 -ac 分别设置音频采样率和声道数。

5. 封装与解封装

改变容器格式同时保留原始编码内容：

ffmpeg -i input.mkv -c copy -map 0 output.mp4

这里通过-c copy指令复制所有音视频流，将MKV格式封装的内容重新封装到MP4容器中。

6. 抓取与录制

实时抓取屏幕并保存为视频：

ffmpeg -f gdigrab -framerate 30 -i desktop output.mp4

使用gdigrab设备输入源捕获桌面画面，并以每秒30帧的速率记录。

7. 流媒体处理

推送本地视频到RTMP服务器：

ffmpeg -re -i input.mp4 -c copy -f flv rtmp://server_address/live/stream_key

使用-re参数模拟实时推流，将本地文件推送到RTMP服务器。

二、应用示例

案例一：高效视频转码优化

为了在保证画质的同时减少文件大小，可以调整H.264编码器的参数，如关键帧间隔、比特率控制等：

ffmpeg -i input.mp4 -c:v libx264 -preset slow -crf 22 -movflags +faststart output.mp4

这里的-preset slow选择了高质量但较慢的编码预设，-crf 22则是在保持良好画质的前提下减小文件大小。

案例二：音视频同步修复

当音频和视频流在原始文件中不同步时，可以通过FFmpeg进行调整：

ffmpeg -i input.mkv -itsoffset 00:00:02.5 -i input.mkv -map 0:v -map 1:a -c copy output.mkv

在这个例子中，我们假设视频比音频快了2.5秒。-itsoffset 参数用于偏移音频轨道的时间戳，使其与视频同步。

案例三：添加水印或字幕

给视频添加静态图像作为水印：

ffmpeg -i input.mp4 -vf "movie=watermark.png [watermark]; [in][watermark] overlay=W-w-10:H-h-10" -codec:a copy output.mp4

这里使用了-vf（视频过滤器）参数，其中的movie滤镜读取水印图片，并通过overlay滤镜将其放置在视频画面的右下角，距离边缘10像素的位置。

案例四：提取并混合多个音频源

从两个不同的视频中提取音频并混音到一个新的视频中：

ffmpeg -i video1.mp4 -i video2.mp4 -filter_complex "[0:a][1:a]amix=inputs=2[a]" -map 0:v -map "[a]" -c:v copy -shortest output.mp4

这个命令使用了amix音频混合过滤器，将两个输入视频的音频流混合成一个输出音频流，并与第一个视频的视频流结合在一起生成最终的输出文件。

案例五：视频降噪与色彩校正

对视频进行简单的降噪处理并应用色彩校正：

ffmpeg -i input.mp4 -vf "hqdn3d, colorbalance=rs=0.1:gs=-0.05:bs=0.08" -c:a copy output.mp4

此命令利用了hqdn3d过滤器进行高斯去噪处理，并通过colorbalance过滤器调整颜色平衡，分别调整了红、绿、蓝三个通道的饱和度。