2024年Go最全音视频开源基础 - ffmpeg命令_vfw 调整视频码率(1),面试官

img
img

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以添加戳这里获取

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

  1. ffplay:ffpay -h
  2. ffprobe:ffprobe -h

注意:ffmpeg、ffplay、ffprobe部分参数通用,部分不通用

三、ffmpeg命令处理流程

如下一条命令将1920×1080的MP4文件转码成1280×720的flv文件

ffmpeg -i test_1920x1080.mp4 -acodec copy -vcodec libx264 -s 1280x720 test_1280x720.flv

image-20201029230023925

  1. 将test_1920×1080的文件解复用成音频和视频(demuxer)
  2. 将数据包解码成数据帧(decoder)
  3. 将帧处理成不同分辨率(filter)
  4. 将处理后的数据帧编码成数据包(encoder)
  5. 将编码后的音频和视频数据包输出到文件(muxer)

四、 ffmpeg命令

4.1 命令分类查询

命令分页:windows下可采取

ffmpeg -formats | more

命令查找:

# windows
ffmpeg -formats | findstr flv
#linux
ffmpeg -formats | grep flv


查询具体分类所支持的参数

# 语法
ffmepg -h type=name
# 示例1
ffmpeg -h muxer=flv
# 示例2
ffmpeg -h filter=atempo 

命令参数内容命令参数内容
-version显示版本-bsfs显示可用比特流filter
-buildconf显示编译配置-protocols显示可用的协议
-formats显示可用格式-filters显示可用的过滤器
-muxers显示可用复用器-pix_fmts显示可用的像素格式
-demuxers显示可用解复用器-layouts显示标准声道名称
-codecs显示可用解编码器-sample_fmts显示可用的音频采样格式
-decoders显示可用解码器-colors显示可用的颜色名称
-encoders显示可用编码器-devices显示当前支持的设备名称
  1. formats:如图所示(此命令包含muxers和demuxers),其中第一个参数为支持的复用器。其中D为支持解复用器,E为支持复用器
    image-20201029231741783

  2. devices
    image-20201029232311740

    • dshow:支持录制设备(比如摄像头、麦克风)
    • lavfi:虚拟设备
    • sdl,sdl2:代表支持sdl输出
    • vfwcap:摄像头采集
  3. codes
    image-20201029232938116

其中第一个参数代表每个字母代表含义如下:

* D…:解码支持
* .E…:编码支持
* …V…:视频编解码器(Video)
* …A…:音频编解码器(Audio)
* …S…:字母编解码器(Subtitle)
* …I…:内幕帧编解码器,不需要参考别的帧(Intra frame-only )
* …L.:有损的压缩(Lossy)
* …S:无损的压缩(Lossless)
  1. decoders
    image-20201029233903331
  2. encoders
    image-20211002161400250
  3. bsfs
    image-20211002161419738
  4. protocols
    image-20211002161449053
  5. filters
    image-20211002161508264
  6. pix_fmts
    image-20211002161524265
  7. layouts
    image-20211002161557550
  8. sample_fmts
    image-20211002161619152
  9. colors
    image-20211002161634591

4.2 ffmpeg转封装

4.2.1 截取视频
  • -i 设定输入流
  • -f 设定输出格式
  • -ss 开始时间
  • -t 时间长度(毫秒)
ffmpeg -i .\test.mp4 -codec copy -ss 10 -t 20 -f flv 

4.2.2 音频处理
  • -aframes 设置要输出的音频帧数
  • -b:a 音频码率
  • -ar 设定采样率
  • -ac 设定声音的Channel数
  • -acodec 设定声音编解码器,如果用copy表示原始编解码数据必须被拷贝。
  • -an 不处理音频
  • -af 音频过滤器
ffmpeg -i test.mp4 -b:a 192k -ar 48000 -ac 2 -acodec libmp3lame -aframes 200 out2.mp3

4.2.3 视频处理
  • -vframes 设置要输出的视频帧数
  • -b 设定视频码率
  • -b:v 视频码率
  • -r 设定帧速率
  • -s 设定画面的宽与高
  • -vn 不处理视频
  • -aspect aspect 设置横纵比 4:3 16:9 或 1.3333 1.7777
  • -vcodec 设定视频编解码器,如果用copy表示原始编解码数据必须被拷贝。
  • -vf 视频过滤器
 ffmpeg -i test.mp4 -vframes 300 -b:v 300k -r 30 -s 640x480 -aspect 16:9 -vcodec libx265

4.2.4 提取音频数据
# 保留封装格式
ffmpeg -i test.mp4 -acodec copy -vn audio.mp4
# 保留编码格式
ffmpeg -i test.mp4 -acodec copy -vn test.aac
# 强制格式
ffmpeg -i test.mp4 -acodec libmp3lame -vn test.mp3

4.2.5 提取视频数据
# 保留封装格式
ffmpeg -i test.mp4 -vcodec copy -an video.mp4
# 保留编码格式
ffmpeg -i test.mp4 -vcodec copy -an test.h264
# 强制格式
ffmpeg -i test.mp4 -vcodec libx264 -an test_force.h264

4.2.6 提取YUV

-pix_fmt

-s

# 提取3秒数据,分辨率和源视频一致
ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p yuv420p_orig.yuv
#  提取3秒数据,分辨率转为320x240
ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p -s 320x240 yuv420p_320x240.yuv

4.2.7 提取RGB
# 提取3秒数据,分辨率转为320x240
ffmpeg -i test.mp4 -t 3 -pix_fmt rgb24 -s 320x240 rgb24_320x240.rgb
# RGB和YUV之间的转换
ffmpeg -s 320x240 -pix_fmt yuv420p -i yuv420p_320x240.yuv -pix_fmt rgb24 rgb24_320x240_2.rgb

4.2.8 提取PCM
ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f s16le 48000_2_s16le.pcm
ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -sample_fmt s16 out_s16.wav
ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -codec:a pcm_s16le out2_s16le.wav
ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm
ffmpeg -i test.mp4 -t 10 -vn -ar 48000 -ac 2 -f f32le 48000_2_f32le_2.pcm

4.2.9 保持编码格式
ffmpeg -i test.mp4 -vcodec copy -acodec copy test.ts
ffmpeg -i test.mp4 -codec copy test.ts

4.2.10 改变编码格式
ffmpeg -i test.mp4 -vcodec libx265 -acodec libmp3lame out.mkv

4.2.11 改变帧率
ffmpeg -i test.mp4 -r 15 -codec copy output.mp4(错误命令)
ffmpeg -i test.mp4 -r 15 output2.mp4

4.2.12 修改视频码率
ffmpeg -i test.mp4 -b 400k output_b.mkv(音频也被重新编码)
ffmpeg -i test.mp4 -b:v 400k output_b.mkv

4.2.13 修改音频码率
ffmpeg -i test.mp4 -b:a 192k output.mp4
# 不重新编码video
ffmpeg -i test.mp4 -b:a 192k -vcodec copy output.mp4

4.2.14 修改音视频码率
ffmpeg -i test.mp4 -b:v 400k -b:a 192k out.mp4

4.2.15 修改视频分辨率
ffmpeg -i test.mp4 -s 480x270 output_480x270.mp4

4.2.16 修改音频采样率
ffmpeg -i test.mp4 -ar 44100 output_44100hz.mp4

4.2.17 裁剪视频,并转化成ts和flv格式,然后合并视频流
# 找三个不同的视频每个视频截取10秒内容
ffmpeg -i java.mp4 -ss 00:05:00 -t 10 -codec copy 1.mp4
ffmpeg -i cpp.mp4 -ss 00:05:00 -t 10 -codec copy 2.mp4
ffmpeg -i go.mp4 -ss 00:05:00 -t 10 -codec copy 3.mp4
# 如果音视频格式不统一则强制统一为 -vcodec libx264 -acodec aac
# 将上述1.mp4/2.mp4/3.mp4转成ts格式
ffmpeg -i 1.mp4 -codec copy -vbsf h264_mp4toannexb 1.ts
ffmpeg -i 2.mp4 -codec copy -vbsf h264_mp4toannexb 2.ts
ffmpeg -i 3.mp4 -codec copy -vbsf h264_mp4toannexb 3.ts
# 分离某些封装格式(例如MP4/FLV/MKV等)中的H.264的时候,需要首先写入SPS和PPS,否则会导致分离出来的数据没有SPS、PPS而无法播放。H.264码流
的SPS和PPS信息存储在AVCodecContext结构体的extradata中。需要使用ffmpeg中名称为“h264_mp4toannexb”的bitstream filter处理
# 转成flv格式
ffmpeg -i 1.mp4 -codec copy 1.flv
ffmpeg -i 2.mp4 -codec copy 2.flv
ffmpeg -i 3.mp4 -codec copy 3.flv

# 拼接视频流
# 以MP4格式进行拼接
# 方法1:只有第一个个视频,所以此法不行
ffmpeg -i "concat:1.mp4|2.mp4|3.mp4" -codec copy out_mp4.mp4
# 方法2:音频正常,视频从第二个视频开始就便缓慢,不同步
ffmpeg -f concat -i mp4list.txt -codec copy out_mp42.mp4
# 以TS格式进行拼接
# 方法1:正常播放
ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out_ts.mp4 
# 方法2:正常播放
ffmpeg -f concat -i tslist.txt -codec copy out_ts2.mp4
# 以FLV格式进行拼接
# 方法1:只有第一个个视频,所以此法不行
ffmpeg -i "concat:1.flv|2.flv|3.flv" -codec copy out_flv.mp4 
# 方法2:正常播放
ffmpeg -f concat -i flvlist.txt -codec copy out_flv2.mp4

# 修改音频编码
ffmpeg -i 2.mp4 -vcodec copy -acodec ac3 -vbsf h264_mp4toannexb mod_1.ts
ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out1.mp4 结果第二段没有声音
# 修改音频采样率
ffmpeg -i 2.mp4 -vcodec copy -acodec aac -ar 96000 -vbsf h264_mp4toannexb 2.ts
ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out2.mp4 第二段播放异常
# 修改视频编码格式
ffmpeg -i 1.mp4 -acodec copy -vcodec libx265 1.ts
ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out3.mp4 
# 修改视频分辨率
ffmpeg -i 1.mp4 -acodec copy -vcodec libx264 -s 800x472 -vbsf h264_mp4toannexb 1.ts
ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out4.mp4

把每个视频封装格式也统一为ts,拼接输出的时候再输出你需要的封装格式

  • 视频分辨率可以不同,但是编码格式需要统一
  • 音频编码格式需要统一,音频参数(采样率/声道等)也需要统一
4.2.18 截取图片

-y 覆盖

-f 格式

image2 格式

-vframes 帧,日光IP大于1那么输出加%03d test%03d.jpg

-s 格式带线啊哦

# 截取图片
ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.jpg
ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.bmp
# 转化视频位图片,每帧一张图
ffmpeg -i test.mp4 -t 5 -s 640x360 -r 15 frame%03d.jpg
# 图片转换为视频
ffmpeg -f image2 -i frame%03d.jpg -r 25 video.mp4
# 从视频中生成GIF图片
ffmpeg -i test.mp4 -t 5 -r 1 image1.gif
ffmpeg -i test.mp4 -t 5 -r 25 -s 640x360 image2.gif
# 将 GIF 转化为 视频
ffmpeg -f gif -i image2.gif image2.mp4

4.2.19 视频录制
  1. 查看设备,windows最好装下https://sourceforge.net/projects/screencapturer/files/
ffmpeg -list_devices true -f dshow -i dummy
[dshow @ 033bd280] DirectShow video devices (some may be both video and audio devices)
[dshow @ 033bd280]  "Integrated Camera"
[dshow @ 033bd280]     Alternative name "@device_pnp_\\?\usb#vid_04f2&pid_b6d9&mi_00#6&850bcba&1&0000#{65e8773d-8f56-11d0-a3b9-00a0c9223196}\global"
[dshow @ 033bd280]  "screen-capture-recorder"
[dshow @ 033bd280]     Alternative name "@device_sw_{860BB310-5D01-11D0-BD3B-00A0C911CE86}\{4EA6930A-2C8A-4AE6-A561-56E4B5044439}"
[dshow @ 033bd280] DirectShow audio devices
[dshow @ 033bd280]  "楹﹀厠椋?(Realtek(R) Audio)"
[dshow @ 033bd280]     Alternative name "@device_cm_{33D9A762-90C8-11D0-BD43-00A0C911CE86}\wave_{2290534C-E8B7-4A5D-93CC-94AF1DA12D4D}"
[dshow @ 033bd280]  "virtual-audio-capturer"
[dshow @ 033bd280]     Alternative name "@device_sw_{33D9A762-90C8-11D0-BD43-00A0C911CE86}\{8E14549B-DB61-4309-AFA1-3578E927E935}"
# 查看视频录制的可选参数
ffmpeg -f dshow -list_options true -i video="screen-capture-recorder"
# 查看音频录制的可选参数
ffmpeg -f dshow -list_options true -i audio="virtual-audio-capturer“
ffmpeg -f dshow -list_options true -i audio="麦克风 (Realtek Audio)"

  1. 音视频录制
# 录制视频(默认参数)
# 桌面
ffmpeg -f dshow -i video="screen-capture-recorder" v-destop.mp4 
# 摄像头
ffmpeg -f dshow -i video="Integrated Camera" -y v-camera.flv (要根据自己摄像头名称)
# 录制声音(默认参数)
# 系统
ffmpeg -f dshow -i audio="virtual-audio-capturer" a-system.aac
# 系统+麦克风声音:
ffmpeg -f dshow -i audio="麦克风 (Realtek(R) Audio)" -f dshow -i audio="virtual-audio-capturer" -filter_complex
amix=inputs=2:duration=first:dropout_transition=2 record_audio.aac(中文会乱码)
#  同时录制声音和视频(默认参数)
ffmpeg -f dshow -i audio="麦克风 (Realtek Audio)" -f dshow -i audio="virtual-audio-capturer" -filter_complex amix=inputs=2:duration=first:dropout_transition=2 -f dshow -i video="screen-capture-recorder" -y av-out.flv(中文会乱码)


  1. 指定参数录制
ffmpeg -f dshow -i audio="virtual-audio-capturer" -f dshow -video_size 1920x1200 -framerate 30 -pixel_format yuv420p -i video="screen-capture-recorder" -vcodec h264_qsv -b:v 3M -y av-out.flv

4.3 ffmpeg转码

4.4 ffmpeg流媒体

4.4.1 ffmpeg和ffplay拉取直播流
ffplay rtmp://server/live/streamName 
# 对于不是rtmp的协议 -c copy要谨慎使用
ffmpeg -i rtmp://server/live/streamName -c copy dump.flv

4.5 ffmpeg滤镜

4.5.1 滤镜分类

按照处理的类型,可分为:

  • 音频filter
  • 视频filter
  • 字幕filter

按照编解码的的位置划分:

  • prefilter:解码前
  • intrafilters:解码时
  • postfilter:解码后

FFmpeg filter 分为:

  • source filter (只有输出)
  • audio filter
  • video filter
  • Multimedia filter
  • sink filter (只有输入)

除了 source 和 sink filter,其他 filter 都至少有一个输入、至少一个输出。

4.5.2 裁剪语法

将输入视频帧的宽度和高度从x和y值表示的位置裁减到指定的宽度和高度,x和y是输出的左上角坐标,协调系统的中心是输入视频帧的左上角。

如果使用了可选的keep_aspect参数,将会改变输出SAR(样本宽比)以补偿新的DAR(显示长宽比)

语法:

crop=ow[:oh[:x[:y[:keep_aspect]]]]

变量用于ow和oh参数的表达式中的可用变量
x,y对x的计算值(从左上角水平方向的像素个数)有何y(垂直像素的数量),对每个帧进行评估,x的默认值为(iw-ow)/2,y的默认值为(ih-oh)/2

img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Go语言开发知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以戳这里获取

spect参数,将会改变输出SAR(样本宽比)以补偿新的DAR(显示长宽比)

语法:

crop=ow[:oh[:x[:y[:keep_aspect]]]]

变量用于ow和oh参数的表达式中的可用变量
x,y对x的计算值(从左上角水平方向的像素个数)有何y(垂直像素的数量),对每个帧进行评估,x的默认值为(iw-ow)/2,y的默认值为(ih-oh)/2

[外链图片转存中…(img-13no3Zvd-1715377380524)]
[外链图片转存中…(img-fE853L3x-1715377380525)]
[外链图片转存中…(img-eA1sy4cX-1715377380525)]

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Go语言开发知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以戳这里获取

  • 11
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值