ffmepg查看帮助文档命令
◼基本信息:ffmpeg -h
◼高级信息:ffmpeg -h long
◼所有信息:ffmpeg -h full
若嫌打印过多: ffmepg -h full > ffmpeg_h_full.log,然后再打开
ffmpeg_h_full.log文件查看
usage:
ffmpeg [options] [[infile options] -i infile]…
{[outfile options] outfile}…
ffplay命令查看帮助文档
所有信息:ffplay -h
usage:
ffplay [options] input_file
ffprobe命令查看帮助文档
所有信息:ffprobe -h
usage:
ffprobe [OPTIONS] [INPUT_FILE]
ffmpeg音视频处理流程
ffmpeg命令分类查询
ffmepg -h type=name
ffmpeg -h muxer=flv
ffmpeg -h filter=atempo (atempo调整音频播放速率)
ffmpeg -h encoder=libx264
ffplay播放控制
ffplay命令-主要选项1
◼ -x width 强制显示宽带。
◼ -y height 强制显示高度。
◼ -video_size size 帧尺寸 设置显示帧存储(WxH格式),仅适用于类似
原始YUV等没有包含帧大小(WxH)的视频。
比如: ffplay -pixel_format yuv420p -video_size 320x240 -framerate 5 yuv420p_320x240.yuv
◼ -pixel_format format 格式设置像素格式。
◼ -fs 以全屏模式启动。
◼ -an 禁用音频(不播放声音)
◼ -vn 禁用视频(不播放视频)
◼ -sn 禁用字幕(不显示字幕)
◼ -ss pos 根据设置的秒进行定位拖动,注意时间单位:比如’55’ 55
seconds, ‘12:03:45’ ,12 hours, 03 minutes and 45 seconds, ‘23.189’ 23.189
second
◼ -t duration 设置播放视频/音频长度,时间单位如 -ss选项
◼ -bytes 按字节进行定位拖动(0=off 1=on -1=auto)。
◼ -seek_interval interval 自定义左/右键定位拖动间隔(以秒为单
位),默认值为10秒(代码没有看到实现) ◼ -nodisp 关闭图形化显示窗口,视频将不显示
◼ -noborder 无边框窗口
◼ -volume vol 设置起始音量。音量范围[0 ~100]
◼ -f fmt 强制使用设置的格式进行解析。比如-f s16le
◼ -window_title title 设置窗口标题(默认为输入文件名)
◼ -loop number 设置播放循环次数
◼ -showmode mode 设置显示模式,可用的模式值:0 显示视频,
1 显示音频波形,2 显示音频频谱。缺省为0,如果视频不存在则自动
选择2 ◼ -vf filtergraph 设置视频滤镜
◼ -af filtergraph 设置音频滤镜
◼ -stats 打印多个回放统计信息,包括显示流持续时间,编解码器参数,
流中的当前位置,以及音频/视频同步差值。默认情况下处于启用状
态,要显式禁用它则需要指定-nostats。。
◼ -fast 非标准化规范的多媒体兼容优化。
◼ -genpts 生成pts。 ◼ -sync type 同步类型 将主时钟设置为audio(type=audio),video
(type=video)或external(type=ext),默认是audio为主时钟。
◼ -ast audio_stream_specifier 指定音频流索引,比如-ast 3,播放流索
引为3的音频流
◼ -vst video_stream_specifier指定视频流索引,比如-vst 4,播放流索引
为4的视频流
◼ -sst subtitle_stream_specifier 指定字幕流索引,比如-sst 5,播放流索
引为5的字幕流
◼ -autoexit 视频播放完毕后退出。
◼ -exitonkeydown 键盘按下任何键退出播放
◼ -exitonmousedown 鼠标按下任何键退出播放
◼ -codec:media_specifier codec_name 强制使用设置的多媒体解码器,
media_specifier可用值为a(音频), v(视频)和s字幕。比如-
codec:v h264_qsv 强制视频采用h264_qsv解码
◼ -acodec codec_name 强制使用设置的音频解码器进行音频解码
◼ -vcodec codec_name 强制使用设置的视频解码器进行视频解码
◼ -scodec codec_name 强制使用设置的字幕解码器进行字幕解码
◼ -autorotate 根据文件元数据自动旋转视频。值为0或1 ,默认为1。
◼ -framedrop 如果视频不同步则丢弃视频帧。当主时钟非视频时钟时
默认开启。若需禁用则使用 -noframedrop
◼ -infbuf 不限制输入缓冲区大小。尽可能快地从输入中读取尽可能多的数据。播放实时流时默认启用,如果未及时读取数据,则可能会丢弃数据。此选项将不限制缓冲区的大小。若需禁用则使用-noinfbuf。
ffplay命令播放
//-window_title 为设置播放窗口名字,-ss设置从什么时间开始播放,-t设置播放的时长,-autoexit设置播放结束后自动退出
播放本地文件
◼ ffplay -window_title “test time” -ss 2 -t 10 -autoexit test.mp4
◼ ffplay buweishui.mp3
播放网络流
◼ ffplay -window_title “rtmp stream” rtmp://202.69.69.180:443/webcast/bshdlive-pc
强制解码器
◼ mpeg4解码器:ffplay -vcodec mpeg4 test.mp4
◼ h264解码器:ffplay -vcodec h264 test.mp4
禁用音频或视频
◼ 禁用音频:ffplay test.mp4 -an
◼ 禁用视频:ffplay test.mp4 -vn
播放YUV数据
◼ ffplay -pixel_format yuv420p -video_size 320x240 -framerate 5
yuv420p_320x240.yuv
播放RGB数据
◼ ffplay -pixel_format rgb24 -video_size 320x240 -i rgb24_320x240.rgb
◼ ffplay -pixel_format rgb24 -video_size 320x240 -framerate 5 -i
rgb24_320x240.rgb
播放PCM数据
◼ ffplay -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm
-ar set audio sampling rate (in Hz) (from 0 to INT_MAX) (default 0)
-ac set number of audio channels (from 0 to INT_MAX) (default 0)
ffplay简单过滤器
◼ 视频旋转
ffplay -i test.mp4 -vf transpose=1
◼ 视频反转
ffplay test.mp4 -vf hflip
ffplay test.mp4 -vf vflip
◼ 视频旋转和反转
ffplay test.mp4 -vf hflip,transpose=1
◼ 音频变速播放
ffplay -i test.mp4 -af atempo=2
◼ 视频变速播放
ffplay -i test.mp4 -vf setpts=PTS/2
◼ 音视频同时变速
ffplay -i test.mp4 -vf setpts=PTS/2 -af atempo=2
ffmpeg命令参数说明
◼ 主要参数:
◼ -i 设定输入流
◼ -f 设定输出格式(format)
◼ -ss 开始时间
◼ -t 时间长度
◼ 音频参数:
◼ -aframes 设置要输出的音频帧数
◼ -b:a 音频码率
◼ -ar 设定采样率
◼ -ac 设定声音的Channel数
◼ -acodec 设定声音编解码器,如果用copy表示原始编解码数据必须被拷贝。
◼ -an 不处理音频
◼ -af 音频过滤器
◼ 视频参数:
◼ -vframes 设置要输出的视频帧数
◼ -b 设定视频码率
◼ -b:v 视频码率
◼ -r 设定帧速率
◼ -s 设定画面的宽与高
◼ -vn 不处理视频
◼ -aspect aspect 设置横纵比 4:3 16:9 或 1.3333 1.7777
◼ -vcodec 设定视频编解码器,如果用copy表示原始编解码数据必须被拷贝。
◼ -vf 视频过滤器
ffmpeg命令提取音视频数据
◼ 保留封装格式
ffmpeg -i test.mp4 -acodec copy -vn audio.mp4
ffmpeg -i test.mp4 -vcodec copy -an video.mp4
◼ 提取视频
保留编码格式:ffmpeg -i test.mp4 -vcodec copy -an test_copy.h264
强制格式:ffmpeg -i test.mp4 -vcodec libx264 -an test.h264
◼ 提取音频
保留编码格式:ffmpeg -i test.mp4 -acodec copy -vn test.aac
强制格式:ffmpeg -i test.mp4 -acodec libmp3lame -vn test.mp3
ffmpeg命令提取像素格式
◼ 提取YUV
◼ 提取3秒数据,分辨率和源视频一致
ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p yuv420p_orig.yuv
◼ 提取3秒数据,分辨率转为320x240
ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p -s 320x240 yuv420p_320x240.yuv
◼ 提取RGB
◼ 提取3秒数据,分辨率转为320x240
ffmpeg -i test.mp4 -t 3 -pix_fmt rgb24 -s 320x240 rgb24_320x240.rgb
◼ RGB和YUV之间的转换
ffmpeg -s 320x240 -pix_fmt yuv420p -i yuv420p_320x240.yuv -pix_fmt rgb24
rgb24_320x240_2.rgb
◼ 提取PCM
ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f s16le 48000_2_s16le.pcm
ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -sample_fmt s16 out_s16.wav
ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -codec:a pcm_s16le out2_s16le.wav
ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm
ffmpeg -i test.mp4 -t 10 -vn -ar 48000 -ac 2 -f f32le 48000_2_f32le_2.pcm
ffmpeg命令转封装
◼ 保持编码格式:
ffmpeg -i test.mp4 -vcodec copy -acodec copy test_copy.ts
ffmpeg -i test.mp4 -codec copy test_copy2.ts
◼ 改变编码格式:
ffmpeg -i test.mp4 -vcodec libx265 -acodec libmp3lame out_h265_mp3.mkv
◼ 修改帧率:
ffmpeg -i test.mp4 -r 15 -codec copy output.mp4 (错误命令,执行出错)
ffmpeg -i test.mp4 -r 15 output2.mp4
◼ 修改视频码率:
ffmpeg -i test.mp4 -b 400k output_b.mkv (此时音频也被重新编码)
◼ 修改视频码率:
ffmpeg -i test.mp4 -b:v 400k output_bv.mkv
ffmpeg命令过滤器
◼ 找三个不同的视频每个视频截取10秒内容
ffmpeg -i 沙海02.mp4 -ss 00:05:00 -t 10 -codec copy 1.mp4
ffmpeg -i 复仇者联盟3.mp4 -ss 00:05:00 -t 10 -codec copy 2.mp4
ffmpeg -i 红海行动.mp4 -ss 00:05:00 -t 10 -codec copy 3.mp4
如果音视频格式不统一则强制统一为 -vcodec libx264 -acodec aac
◼ 将上述1.mp4/2.mp4/3.mp4转成ts格式
ffmpeg -i 1.mp4 -codec copy -vbsf h264_mp4toannexb 1.ts
ffmpeg -i 2.mp4 -codec copy -vbsf h264_mp4toannexb 2.ts
ffmpeg -i 3.mp4 -codec copy -vbsf h264_mp4toannexb 3.ts
◼ 转成flv格式
ffmpeg -i 1.mp4 -codec copy 1.flv
ffmpeg -i 2.mp4 -codec copy 2.flv
ffmpeg -i 3.mp4 -codec copy 3.flv
分离某些封装格式(例如MP4/FLV/MKV等)中的H.264的时候,需要首先写入
SPS和PPS,否则会导致分离出来的数据没有SPS、PPS而无法播放。H.264码流
的SPS和PPS信息存储在AVCodecContext结构体的extradata中。需要使用ffmpeg
中名称为“h264_mp4toannexb”的bitstream filter处理
◼ 以MP4格式进行拼接
方法1:ffmpeg -i “concat:1.mp4|2.mp4|3.mp4” -codec copy out_mp4.mp4 (这个方法不行)
方法2:ffmpeg -f concat -i mp4list.txt -codec copy out_mp42.mp4
◼ 以TS格式进行拼接
方法1:ffmpeg -i “concat:1.ts|2.ts|3.ts” -codec copy out_ts.mp4
方法2:ffmpeg -f concat -i tslist.txt -codec copy out_ts2.mp4
◼ 以FLV格式进行拼接
方法1:ffmpeg -i “concat:1.flv|2.flv|3.flv” -codec copy out_flv.mp4 (这个方法也不行)
方法2:ffmpeg -f concat -i flvlist.txt -codec copy out_flv2.mp4
◼ 方法1只适用部分封装格式,比如TS
◼ 建议:
(1)使用方法2进行拼接
(2)转成TS格式再进行拼接
◼ 修改音频编码
ffmpeg -i 2.mp4 -vcodec copy -acodec ac3 -vbsf h264_mp4toannexb 2.ts
ffmpeg -i “concat:1.ts|2.ts|3.ts” -codec copy out1.mp4 结果第二段没有声音
◼ 修改音频采样率
ffmpeg -i 2.mp4 -vcodec copy -acodec aac -ar 96000 -vbsf h264_mp4toannexb 2.ts
ffmpeg -i “concat:1.ts|2.ts|3.ts” -codec copy out2.mp4 第二段播放异常
◼ 修改视频编码格式
ffmpeg -i 1.mp4 -acodec copy -vcodec libx265 1.ts
ffmpeg -i “concat:1.ts|2.ts|3.ts” -codec copy out3.mp4
◼ 修改视频分辨率
ffmpeg -i 1.mp4 -acodec copy -vcodec libx264 -s 800x472 -vbsf h264_mp4toannexb 1.ts
ffmpeg -i “concat:1.ts|2.ts|3.ts” -codec copy out4.mp4
◼ 注意:
◼ 把每个视频封装格式也统一为ts,拼接输出的时候再输出你需要的封装格
式,比如MP4
◼ 视频分辨率可以不同,但是编码格式需要统一
◼ 音频编码格式需要统一,音频参数(采样率/声道等)也需要统一
fmpeg命令图片与视频互转
◼ 截取一张图片
ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.jpg
ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.bmp
-i 输入
-y 覆盖
-f 格式
image2 一种格式
-ss 起始值
-vframes 帧 如果大于1 那么 输出加%03d test%03d.jpg
-s 格式大小size
◼ 转换视频为图片(每帧一张图):
ffmpeg -i test.mp4 -t 5 -s 640x360 -r 15 frame%03d.jpg
◼ 图片转换为视频:
ffmpeg -f image2 -i frame%03d.jpg -r 25 video.mp4
◼ 从视频中生成GIF图片
ffmpeg -i test.mp4 -t 5 -r 1 image1.gif
ffmpeg -i test.mp4 -t 5 -r 25 -s 640x360 image2.gif
◼ 将 GIF 转化为 视频
ffmpeg -f gif -i image2.gif image2.mp4
ffmpeg命令视频录制
先安装dshow软件 Screen Capturer Recorder,
项目地址:https://sourceforge.net/projects/screencapturer/files/
然后查看可用设备名字:ffmpeg -list_devices true -f dshow -i dummy
[dshow @ 04b620c0] DirectShow video devices (some may be both video and audio devices)
[dshow @ 04b620c0] "HP Wide Vision HD Camera" (笔记本摄像头)
[dshow @ 04b620c0] Alternative name "@device_pnp_\\?\usb#vid_0bda&pid_58eb&mi_00#6&25b2b55f&0&0000#{65e8773d-8f56-11d0-a3b9-00a0c9223196}\global"
[dshow @ 04b620c0] "screen-capture-recorder" (录屏)
[dshow @ 04b620c0] Alternative name "@device_sw_{860BB310-5D01-11D0-BD3B-00A0C911CE86}\{4EA6930A-2C8A-4AE6-A561-56E4B5044439}"
[dshow @ 04b620c0] DirectShow audio devices
[dshow @ 04b620c0] "楹﹀厠椋庨樀鍒?(Realtek High Definition Audio)" (麦克风/麦克风阵列) [dshow @ 04b620c0] Alternative name "@device_cm_{33D9A762-90C8-11D0-BD43-00A0C911CE86}\wave_{FDA973E1-EE54-48C0-A41D-E4603B043557}"
[dshow @ 04b620c0] "virtual-audio-capturer"(系统声音)
[dshow @ 04b620c0] Alternative name "@device_sw_{33D9A762-90C8-11D0-BD43-00A0C911CE86}\{8E14549B-DB61-4309-AFA1-3578E927E935}"
dummy: Immediate exit requested
◼ 录制视频(默认参数)
桌面:ffmpeg -f dshow -i video=“screen-capture-recorder” v-out.mp4
摄像头: ffmpeg -f dshow -i video=“Integrated Webcam” -y v-out2.flv (要根据自己摄像头名称)
◼ 录制声音(默认参数)
系统声音:ffmpeg -f dshow -i audio=“virtual-audio-capturer” a-out.aac
系统+麦克风声音:ffmpeg -f dshow -i audio=“麦克风 (Realtek Audio)” -f dshow -i audio=“virtual-audio-capturer” -filter_complex
amix=inputs=2:duration=first:dropout_transition=2 a-out2.aac
◼ 同时录制声音和视频(默认参数)
ffmpeg -f dshow -i audio=“麦克风 (Realtek Audio)” -f dshow -i audio=“virtual-audio-capturer” -filter_complex amix=inputs=2:duration=first:dropout_transition=2 -f
dshow -i video=“screen-capture-recorder” -y av-out.flv
◼ 查看视频录制的可选参数
◼ ffmpeg -f dshow -list_options true -i video=“screen-capture-recorder”
◼ ffmpeg -f dshow -list_options true -i audio="virtual-audio-capturer“
◼ ffmpeg -f dshow -list_options true -i audio=“麦克风 (Realtek Audio)”
指定参数录制音视频
◼ ffmpeg -f dshow -i audio="麦克风 (Realtek Audio)" -f dshow -i
audio="virtual-audio-capturer" -filter_complex
amix=inputs=2:duration=first:dropout_transition=2 -f dshow -video_size
1920x1080 -framerate 15 -pixel_format yuv420p -i video="screen-capturerecorder" -vcodec h264_qsv -b:v 3M -y av-out.flv
◼ ffmpeg -f dshow -i audio="麦克风 (Realtek Audio)" -f dshow -i
audio="virtual-audio-capturer" -filter_complex
amix=inputs=2:duration=first:dropout_transition=2 -f dshow -i
video="screen-capture-recorder" -vcodec h264_qsv -b:v 3M -r 15 -y avout2.mp4
◼ ffmpeg -f dshow -i audio="麦克风 (Realtek Audio)" -f dshow -i
audio="virtual-audio-capturer" -filter_complex
amix=inputs=2:duration=first:dropout_transition=2 -f dshow -framerate 15
-pixel_format yuv420p -i video="screen-capture-recorder" -vcodec
h264_qsv -b:v 3M -r 15 -y av-out3.mp4
ffmpeg拉流
◼ 直播拉流
ffplay rtmp://server/live/streamName
ffmpeg -i rtmp://server/live/streamName -c copy dump.flv
对于不是rtmp的协议 -c copy要谨慎使用
◼ 可用地址
HKS:rtmp://live.hkstv.hk.lxdns.com/live/hks2
大熊兔(点播):rtsp://184.72.239.149/vod/mp4://BigBuckBunny_175k.mov
CCTV1高清:http://ivi.bupt.edu.cn/hls/cctv1hd.m3u8
ffmpeg -i http://ivi.bupt.edu.cn/hls/cctv1hd.m3u8 -c copy cctv1.ts
ffmpeg -i http://ivi.bupt.edu.cn/hls/cctv1hd.m3u8 cctv1.flv
ffmpeg -i http://ivi.bupt.edu.cn/hls/cctv1hd.m3u8 -acodec aac -vcodec libx264 cctv1-2.flv
CCTV3高清:http://ivi.bupt.edu.cn/hls/cctv3hd.m3u8
CCTV5高清:http://ivi.bupt.edu.cn/hls/cctv5hd.m3u8
CCTV5+高清:http://ivi.bupt.edu.cn/hls/cctv5phd.m3u8
CCTV6高清:http://ivi.bupt.edu.cn/hls/cctv6hd.m3u8
ffmpeg推流
◼ 直播推流
ffmpeg -re -i out.mp4 -c copy flv rtmp://server/live/streamName -re,表示按时间戳读取文件
FFmpeg滤镜
filter 的分类
按照处理数据的类型,通常多媒体的 filter 分为:
⚫ 音频 filter
⚫ 视频 filter
⚫ 字幕 filter
另一种按照处于编解码器的位置划分:
⚫ prefilters: used before encoding(解码之前使用)
⚫ intrafilters: used while encoding (and are thus an integral part of a video codec)(编解码时使用)
⚫ postfilters: used after decoding(解码之后使用)
FFmpeg 中 filter 分为:
⚫ source filter (只有输出)
⚫ audio filter
⚫ video filter
⚫ Multimedia filter
⚫ sink filter (只有输入)
除了 source 和 sink filter,其他 filter 都至少有一个输入、至少一个输出。
FFmpeg滤镜
filter 的分类
按照处理数据的类型,通常多媒体的 filter 分为:
⚫ 音频 filter
⚫ 视频 filter
⚫ 字幕 filter
另一种按照处于编解码器的位置划分:
⚫ prefilters: used before encoding
⚫ intrafilters: used while encoding (and are thus an integral part of a video codec)
⚫ postfilters: used after decoding
FFmpeg 中 filter 分为:
⚫ source filter (只有输出)
⚫ audio filter
⚫ video filter
⚫ Multimedia filter
⚫ sink filter (只有输入)
除了 source 和 sink filter,其他 filter 都至少有一个输入、至少一个输出。
视频裁剪
视频过滤器(滤镜):裁剪
(1)裁剪 100x100 的区域,起点为(12,34).
crop=100💯12:34
相同效果:
crop=w=100:h=100:x=12:y=34
(2)裁剪中心区域,大小为 100x100
crop=100:100
(3)裁剪中心区域,大小为输入视频的 2/3
crop=2/3in_w:2/3in_h
(4)裁剪中心区域的正方形,高度为输入视频的高
crop=out_w=in_h
crop=in_h
(5)裁剪偏移左上角 100 像素
crop=in_w-100:in_h-100💯100
(6)裁剪掉左右 10 像素,上下 20 像素
crop=in_w-210:in_h-220
(7)裁剪右下角区域
crop=in_w/2:in_h/2:in_w/2:in_h/2
FFmpeg 滤镜 Filter 内置变量
在使用 Filter 时,经常会用到根据时间轴进行操作的需求,在使用 FFmpeg 的 Filter 时可以使用 Filter 的时
间相关的内置变量,下面先来了解一下这些相关的变量,见下表。
变量 | 说明 |
---|---|
t | 以秒表示的时间戳,如果输入的时间是未知的则是 NAN |
n | 输入帧的顺序编号,从 0 开始 |
pos | 输入帧的位置,如果未知的则是 NAN |
w | 输入视频帧的宽度 |
h | 输入视频帧的高度 |
添加水印
文字水印
在视频中增加文字水印需要准备的条件比较多,需要有文字字库处理的相关文件,在编译 FFmpeg 时需要
支持 FreeType、FontConfig、iconv,系统中需要有相关的字库,在 FFmpeg 中增加纯字母水印可以使用 drawtext
滤镜进行支持,下面就来看一下 drawtext 的滤镜参数,具体见下表。
参数 | 类型 | 说明 |
---|---|---|
text | 字符串 | 文字 |
textfile | 字符串 | 文字文件 |
box | 布尔 | 文字区域背景框(缺省 false) |
boxcolor | 色彩 | 展示字体区域块的颜色 |
font | 字符串 | 字体名称(默认为 Sans 字体) |
fontsize | 整数 | 显示字体的大小 |
x | 字符串 | 缺省为 0 |
y | 字符串 | 缺省为 0 |
alpha | 浮点数 | 透明度(默认为 1),值从 0~1 |
举例
(1)将文字的水印加在视频的左上角:
ffplay -i input.mp4 -vf “drawtext=fontsize=100:fontfile=FreeSerif.ttf:text=‘hello world’:x=20:y=20”
将字体的颜色设置为绿色:
ffplay -i input.mp4 -vf “drawtext=fontsize=100:fontfile=FreeSerif.ttf:text=‘hello world’:fontcolor=green”
如果想调整文字水印显示的位置,调整 x 与 y 参数的数值即可。
ffplay -i input.mp4 -vf “drawtext=fontsize=100:fontfile=FreeSerif.ttf:text=‘hello
world’:fontcolor=green:x=400:y=200”
修改透明度
ffplay -i input.mp4 -vf “drawtext=fontsize=100:fontfile=FreeSerif.ttf:text=‘hello
world’:fontcolor=green:x=400:y=200:alpha=0.5”
(2)文字水印还可以增加一个框,然后给框加上背景颜色:
ffplay -i input.mp4 -vf “drawtext=fontsize=100:fontfile=FreeSerif.ttf:text=‘hello
world’:fontcolor=green:box=1:boxcolor=yellow”
至此,文字水印的基础功能已经添加完成。
(3)有些时候文字水印希望以本地时间作为水印内容,可以在 drawtext 滤镜中配合一些特殊用法来
完成,在 text 中显示本地当前时间,格式为年月日时分秒的方式,
ffplay -i input.mp4 -vf
“drawtext=fontsize=60:fontfile=FreeSerif.ttf:text=‘%{localtime:%Y-%m-%d %H-%M-%S}’:fontcolor=gree
n:box=1:boxcolor=yellow”
在使用 ffmpeg 转码存储到文件时需要加上-re,否则时间不对。
ffmpeg -re -i input.mp4 -vf
“drawtext=fontsize=60:fontfile=FreeSerif.ttf:text=‘%{localtime:%Y-%m-%d %H-%M-%S}’:fontcolor=gree
n:box=1:boxcolor=yellow” out.mp4
(4)在个别场景中,需要定时显示水印,定时不显示水印,这种方式同样可以配合 drawtext 滤镜进
行处理,使用 drawtext 与 enable 配合即可,例如每 3 秒钟显示一次文字水印:
ffplay -i input.mp4 -vf
“drawtext=fontsize=60:fontfile=FreeSerif.ttf:text=‘test’:fontcolor=green:box=1:boxcolor=yellow:enable=lt(
mod(t,3),1)”
在使用 ffmpeg 转码存储到文件时需要加上-re,否则时间不对。
表达式参考:http://www.ffmpeg.org/ffmpeg-utils.html 3 Expression Evaluation
lt(x, y) Return 1 if x is lesser than y, 0 otherwise.
mod(x, y) Compute the remainder of division of x by y.
(5)跑马灯效果
ffplay -i input.mp4 -vf
“drawtext=fontsize=100:fontfile=FreeSerif.ttf:text=‘helloworld’:x=mod(100t,w):y=abs(sin(t))h0.7"
修改字体透明度,修改字体颜色
ffplay -i input.mp4 -vf
"drawtext=fontsize=40:fontfile=FreeSerif.ttf:text=‘liaoqingfu’:x=mod(50t,w):y=abs(sin(t))h0.7:alpha=
0.5:fontcolor=white:enable=lt(mod(t,3),1)”
图片水印
FFmpeg 除了可以向视频添加文字水印之外,还可以向视频添加图片水印、视频跑马灯等,本节将重点
介绍如何为视频添加图片水印;为视频添加图片水印可以使用 movie 滤镜,下面就来熟悉一下 movie 滤镜
的参数,如下表所示:
参数 | 类型 | 说明 |
---|---|---|
filename | 字符串 | 输入的文件名,可以是文件,协议,设备 |
format_name, f | 字符串 | 输入的封装格式 |
stream_index, si | 整数 | 输入的流索引编号 |
seek_point, sp | 浮点数 | Seek 输入流的时间位置 |
streams, s | 字符串 | 输入的多个流的流信息 |
loop | 整数 | 循环次数 |
discontinuity | 时间差值 | 支持跳动的时间戳差值 |
ffmpeg -i input.mp4 -vf “movie=logo.png[watermark];[in][watermark]overlay=x=10:y=10[out]”
output.mp4
➢ 原始视频文件路径:input.mp4
➢ 水印图片路径:logo.png
➢ 水印位置:(x,y)=(10,10)<=(left,top)距离左侧、顶部各 10 像素;
➢ 输出文件路径:output.mp4
参数 | 说明 |
---|---|
main_w | 视频单帧图像宽度 |
main_h | 视频单帧图像高度 |
overlay_w | 水印图片的宽度 |
overlay_h | 水印图片的高度 |
对应地可以将 overlay 参数设置成如下值来改变水印图片的位置:
水印图片位置 | overlay 值 |
---|---|
左上角 | 10:10 |
右上角 | main_w-overlay_w-10:10 |
左下角 | 10:main_h-overlay_h-10 |
右下角 | main_w-overlay_w-10:main_h-overlay_h-10 |
在 FFmpeg 中加入图片水印有两种方式,一种是通过 movie 指定水印文件路径,另外一种方式是通过
filter 读取输入文件的流并指定为水印,这里重点介绍如何读取 movie 图片文件作为水印。
(1)图片 logo.png 将会打入到 input.mp4 视频中,显示在 x 坐标 50、y 坐标 20 的位置
ffplay -i input.mp4 -vf “movie=logo.png[logo];[in][logo]overlay=50:10[out]”
由于 logo.png 图片的背景色是白色,所以显示起来比较生硬,如果水印图片是透明背景的,效果会更好,
下面找一张透明背景色的图片试一下:
ffplay -i input.mp4 -vf “movie=logo2.png[watermark];[in][watermark]overlay=50:10[out]”
(2)显示位置
ffplay -i input.mp4 -vf “movie=logo.png[watermark];[in][watermark]overlay=10:10[out]”
ffplay -i input.mp4 -vf “movie=logo.png[watermark];[in][watermark]overlay=main_w-overlay_w-10:10[out]”
ffplay -i input.mp4 -vf “movie=logo.png[watermark];[in][watermark]overlay=10:main_h-overlay_h-10[out]”
ffplay -i input.mp4 -vf “movie=logo.png[watermark];[in][watermark]overlay=main_w-overlay_w-10:main_hoverlay_h-10[out]”
(3)跑马灯效果
ffplay -i input.mp4 -vf
“movie=logo.png[watermark];[in][watermark]overlay=x=mod(50*t,main_w):y=abs(sin(t))h0.7[out]”
FFmpeg 生成画中画
在使用 FFmpeg 处理流媒体文件时,有时需要使用画中画的效果。在 FFmpeg 中,可以通过 overlay 将多个视频流、多个多媒体采集设备、多个视频文件合并到一个界面中,生成画中画的效果。在前面的滤镜使用中,以至于以后的滤镜使用中,与视频操作相关的处理,大多数都会与 overlay 滤镜配合使用,尤其是用在图层处理与合并场景中,下面就来了解一下 overlay 的参数,具体见下表:
参数 | 类型 | 说明 |
---|---|---|
x | 字符串 | X 坐标 |
y | 字符串 | Y 坐标 |
eof_action | 整数 | 遇到 eof 表示时的处理方式,默认为重复 ➢ repeat(值为 0):重复前一帧 ➢ endcall(值为 1):停止所有的流 ➢ pass(值为 2):保留主图层 |
shortest | 布尔 | 终止最短的视频时全部终止(默认 false) |
format | 整数 | 设置 output 的像素格式,默认为 yuv420 ➢ yuv420 (值为 0) ➢ yuv422 (值为 1) ➢ yuv444 (值为 2) ➢ rgb (值为 3) |
从参数列表中可以看到,主要参数并不多,但实际上在 overlay 滤镜使用中,还有很多组合的参数可以
使用,可以使用一些内部变量,例如 overlay 图层的宽、高、坐标等。
(1)显示画中画效果
ffplay -i input.mp4 -vf “movie=sub_320x240.mp4[sub];[in][sub]overlay=x=20:y=20[out]”
ffplay -i input.mp4 -vf “movie=sub_320x240.mp4[sub];[in][sub]overlay=x=20:y=20:eof_action=1[out]”
ffplay -i input.mp4 -vf “movie=sub_320x240.mp4[sub];[in][sub]overlay=x=20:y=20:shortest =1[out]”
缩放子画面尺寸
ffplay -i input.mp4 -vf “movie=sub_320x240.mp4,scale=640x480[sub];[in][sub]overlay=x=20:y=20[out]”
(2)跑马灯
ffplay -i input.mp4 -vf “movie=sub_320x240.mp4[test];[in][test]overlay=
x=mod(50*t,main_w):y=abs(sin(t))main_h0.7[out]”
FFmpeg 视频多宫格处理
视频除了画中画显示,还有一种场景为以多宫格的方式呈现出来,除了可以输入视频文件,还可以输入视频流、采集设备等。从前文中可以看出进行视频图像处理时,overlay 滤镜为关键画布,可以通过 FFmpeg建立一个画布,也可以使用默认的画布。如果想以多宫格的方式展现,则可以自己建立一个足够大的画布,下面就来看一下多宫格展示的例子:
ffmpeg -i 1.mp4 -i 2.mp4 -i 3.mp4 -i 4.mp4 -filter_complex “nullsrc=size=640x480[base];[0:v] setpts=PTSSTARTPTS,scale=320x240[upperleft];[1:v]setpts=PTS-STARTPTS,scale=320x240[upperright];[2:v]setpts=PTSSTARTPTS, scale=320x240[lowerleft];[3:v]setpts=PTSSTARTPTS,scale=320x240[lowerright];[base][upperleft]overlay=shortest=1[tmp1];[tmp1][upperright]overlay=s
hortest=1:x=320[tmp2];[tmp2][lowerleft]overlay=shortest=1:y=240[tmp3];[tmp3][lowerright]overlay=shortest
=1:x=320:y=240” out.mp4
1.2.3.4.mp4 为文件路径,out.MP4 为输出文件路径,通过 nullsrc 创建 overlay 画布,画布大小 640:480,使用[0:v][1:v][2:v][3:v]将输入的 4 个视频流去除,分别进行缩放处理,然后基于 nullsrc 生成的画布进行视频平铺,命令中自定义 upperleft,upperright,lowerleft,lowerright 进行不同位置平铺。
只叠加左上右上的命令:
ffmpeg -i 1.mp4 -i 2.mp4 -i 3.mp4 -i 4.mp4 -filter_complex “nullsrc=size=640x480[base];[0:v]setpts=PTSSTARTPTS,scale=320x240[upperleft];[1:v]setpts=PTSSTARTPTS,scale=320x240[upperright];[base][upperleft]overlay=shortest=1[tmp1];[tmp1][upperright]overlay=sho
rtest=1:x=320” out2.mp4
内容载自零声学院