FFmpeg技术详解

FFmpeg技术详解

本文概不介绍相关安装配置，详情请入官方或者其他大佬博客，此处做出推荐：

https://ffmpeg.org/ FFmpeg官网

https://ffmpeg.github.net.cn/developer.html FFmpeg中文文档

https://blog.csdn.net/m0_47449768/article/details/130102406 ffmpeg安装教程（windows版）

https://blog.csdn.net/Number_oneEngineer/article/details/108848206 ffmpeg安装教程（Linux版）

要学会一个人在深夜秉灯独行…

1.FFmpeg主要功能介绍

FFmpeg（Fast Forward MPEG）是一个开源的多媒体处理工具集，它包含了音频和视频处理库、编码器、解码器、转码器等多种工具。以下是FFmpeg的主要功能介绍：

1. 音视频编解码（Codec）：
   • FFmpeg支持各种音频和视频编解码器，包括常见的H.264、H.265、AAC、MP3等，使其能够处理各种媒体格式。
2. 格式转换：
   • 可以将不同格式的音频和视频文件相互转换，例如将MP4转换为AVI、将WAV转换为MP3等。
3. 流媒体处理：
   • FFmpeg支持从网络摄像头、文件、或其他来源捕获音视频流，也能将处理后的流推送到服务器或其他设备。
4. 图像处理：
   • FFmpeg不仅仅可以处理音视频，还支持图像处理，如提取视频帧，合成图片和视频等。
5. 剪辑和编辑：
   • 可以对音视频进行剪辑和编辑，包括裁剪、剪切、拼接等操作。
6. 字幕处理：
   • 支持字幕的添加、移除和编辑，可以将字幕嵌入到视频中或者从视频中提取字幕。
7. 音频处理：
   • 提供了丰富的音频处理功能，包括音频的剪辑、混音、音量调节等。
8. 实时视频处理：
   • FFmpeg能够处理实时的音视频流，适用于直播、视频会议等场景。
9. 滤镜和效果：
   • 支持各种滤镜和效果，如模糊、旋转、调整亮度、对比度等。

FFmpeg的强大功能使其成为许多多媒体应用和服务的核心组件，例如视频编辑软件、流媒体服务器、嵌入式设备等。由于其广泛的支持和社区贡献，FFmpeg已经成为处理多媒体数据的重要工具之一。

2.音视频编解码

音视频编解码是指将音频和视频信号进行压缩和解压缩的过程，以便更有效地存储和传输这些数据。编码是指将原始的音视频数据转换为压缩格式，而解码是指将压缩格式的音视频数据还原为原始格式。FFmpeg作为一个多媒体处理工具，提供了丰富的音视频编解码功能，支持多种编码器和解码器。以下是音视频编解码的一些关键概念和FFmpeg的相关用法：

1.音频编解码：

1.音频编码：

• 编码过程将原始音频数据转换为压缩格式，以减小文件大小或者便于传输。FFmpeg支持多种音频编码器，如AAC、MP3、Opus等。

# 使用AAC编码器将WAV文件转为AAC格式
ffmpeg -i input.wav -c:a aac output.aac

2.音频解码：

• 解码过程将压缩格式的音频数据还原为原始格式，以便后续处理或播放。FFmpeg支持多种音频解码器，如AAC、MP3、FLAC等。

# 使用AAC解码器将AAC文件解码为WAV格式
ffmpeg -i input.aac -c:a pcm_s16le output.wav

2.视频编解码：

1.视频编码：

• 编码过程将原始视频数据转换为压缩格式，以减小文件大小或者便于传输。FFmpeg支持多种视频编码器，如H.264、H.265、VP9等。

# 使用H.264编码器将原始视频转为H.264格式
ffmpeg -i input.mp4 -c:v libx264 output.mp4

2.视频解码：

• 解码过程将压缩格式的视频数据还原为原始格式，以便后续处理或播放。FFmpeg支持多种视频解码器，如H.264、H.265、VP9等。

# 使用H.264解码器将H.264视频解码为原始格式
ffmpeg -i input.h264 -c:v rawvideo output.yuv

3.编解码参数设置：

• 用户可以通过指定不同的编码器和解码器以及相应的参数，来调整音视频的压缩质量、文件大小等。

# 使用x264编码器，设置视频比特率
ffmpeg -i input.mp4 -c:v libx264 -b:v 1000k output.mp4

4.多路流处理：

• FFmpeg允许同时处理多路音频和视频流，适用于多通道、多摄像头等场景。

# 处理多路音频流
ffmpeg -i input1.wav -i input2.wav -filter_complex amix=inputs=2:duration=longest output.wav

总的来说，FFmpeg作为一套全面的多媒体处理工具，提供了丰富的音视频编解码功能，能够满足各种多媒体处理的需求，包括格式转换、流媒体处理、编辑等。用户可以根据自己的需求选择不同的编码器和解码器，并通过合适的参数进行配置。

3.格式转换

格式转换是指将一个多媒体文件从一种格式转换为另一种格式的过程。在多媒体处理中，格式转换通常涉及音频、视频、图像等各种媒体类型。FFmpeg广泛用于格式转换操作。以下是一些关键的格式转换方面的介绍和FFmpeg的应用：

1.音频格式转换：

• 从 WAV 到 MP3：

  ffmpeg -i input.wav -c:a libmp3lame output.mp3
  

• 从 MP3 到 WAV：

  ffmpeg -i input.mp3 -c:a pcm_s16le output.wav
  

2.视频格式转换：

• 从 MP4 到 GIF：

  ffmpeg -i input.mp4 -vf "fps=10,scale=320:-1:flags=lanczos" -c:v gif output.gif
  

• 从 AVI 到 MP4：

  ffmpeg -i input.avi -c:v libx264 -c:a aac output.mp4
  

3.图像格式转换：

• 从 PNG 到 JPEG：

  ffmpeg -i input.png output.jpg
  

• 从 JPEG 到 PNG：

  ffmpeg -i input.jpg output.png
  

4.多媒体合并和拼接：

• 合并音频和视频到一个文件：

  ffmpeg -i input_video.mp4 -i input_audio.mp3 -c:v copy -c:a aac output_combined.mp4
  

• 拼接多个视频文件：

  ffmpeg -i "concat:input1.mp4|input2.mp4|input3.mp4" -c copy output_combined.mp4
  

5.调整媒体参数：

• 调整视频尺寸：

  ffmpeg