JavaCV推流实战(MP4文件),java ioc面试题

先自我介绍一下,小编浙江大学毕业,去过华为、字节跳动等大厂,目前阿里P7

深知大多数程序员,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年最新Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
img
img
img
img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以添加V获取:vip1024b (备注Java)
img

正文

@Slf4j

public class PushMp4 {

/**

  • 本地MP4文件的完整路径(两分零五秒的视频)

*/

private static final String MP4_FILE_PATH = “/Users/zhaoqin/temp/202111/20/sample-mp4-file.mp4”;

/**

  • SRS的推流地址

*/

private static final String SRS_PUSH_ADDRESS = “rtmp://192.168.50.43:11935/live/livestream”;

/**

  • 读取指定的mp4文件,推送到SRS服务器

  • @param sourceFilePath 视频文件的绝对路径

  • @param PUSH_ADDRESS 推流地址

  • @throws Exception

*/

private static void grabAndPush(String sourceFilePath, String PUSH_ADDRESS) throws Exception {

// ffmepg日志级别

avutil.av_log_set_level(avutil.AV_LOG_ERROR);

FFmpegLogCallback.set();

// 实例化帧抓取器对象,将文件路径传入

FFmpegFrameGrabber grabber = new FFmpegFrameGrabber(MP4_FILE_PATH);

long startTime = System.currentTimeMillis();

log.info(“开始初始化帧抓取器”);

// 初始化帧抓取器,例如数据结构(时间戳、编码器上下文、帧对象等),

// 如果入参等于true,还会调用avformat_find_stream_info方法获取流的信息,放入AVFormatContext类型的成员变量oc中

grabber.start(true);

log.info(“帧抓取器初始化完成,耗时[{}]毫秒”, System.currentTimeMillis()-startTime);

// grabber.start方法中,初始化的解码器信息存在放在grabber的成员变量oc中

AVFormatContext avFormatContext = grabber.getFormatContext();

// 文件内有几个媒体流(一般是视频流+音频流)

int streamNum = avFormatContext.nb_streams();

// 没有媒体流就不用继续了

if (streamNum<1) {

log.error(“文件内不存在媒体流”);

return;

}

// 取得视频的帧率

int frameRate = (int)grabber.getVideoFrameRate();

log.info(“视频帧率[{}],视频时长[{}]秒,媒体流数量[{}]”,

frameRate,

avFormatContext.duration()/1000000,

avFormatContext.nb_streams());

// 遍历每一个流,检查其类型

for (int i=0; i< streamNum; i++) {

AVStream avStream = avFormatContext.streams(i);

AVCodecParameters avCodecParameters = avStream.codecpar();

log.info(“流的索引[{}],编码器类型[{}],编码器ID[{}]”, i, avCodecParameters.codec_type(), avCodecParameters.codec_id());

}

// 视频宽度

int frameWidth = grabber.getImageWidth();

// 视频高度

int frameHeight = grabber.getImageHeight();

// 音频通道数量

int audioChannels = grabber.getAudioChannels();

log.info(“视频宽度[{}],视频高度[{}],音频通道数[{}]”,

frameWidth,

frameHeight,

audioChannels);

// 实例化FFmpegFrameRecorder,将SRS的推送地址传入

FFmpegFrameRecorder recorder = new FFmpegFrameRecorder(SRS_PUSH_ADDRESS,

frameWidth,

frameHeight,

audioChannels);

// 设置编码格式

recorder.setVideoCodec(avcodec.AV_CODEC_ID_H264);

// 设置封装格式

recorder.setFormat(“flv”);

// 一秒内的帧数

recorder.setFrameRate(frameRate);

// 两个关键帧之间的帧数

recorder.setGopSize(frameRate);

// 设置音频通道数,与视频源的通道数相等

recorder.setAudioChannels(grabber.getAudioChannels());

startTime = System.currentTimeMillis();

log.info(“开始初始化帧抓取器”);

// 初始化帧录制器,例如数据结构(音频流、视频流指针,编码器),

// 调用av_guess_format方法,确定视频输出时的封装方式,

// 媒体上下文对象的内存分配,

// 编码器的各项参数设置

recorder.start();

log.info(“帧录制初始化完成,耗时[{}]毫秒”, System.currentTimeMillis()-startTime);

Frame frame;

startTime = System.currentTimeMillis();

log.info(“开始推流”);

long videoTS = 0;

int videoFrameNum = 0;

int audioFrameNum = 0;

int dataFrameNum = 0;

// 假设一秒钟15帧,那么两帧间隔就是(1000/15)毫秒

int interVal = 1000/frameRate;

// 发送完一帧后sleep的时间,不能完全等于(1000/frameRate),不然会卡顿,

// 要更小一些,这里取八分之一

interVal/=8;

// 持续从视频源取帧

while (null!=(frame=grabber.grab())) {

videoTS = 1000 * (System.currentTimeMillis() - startTime);

// 时间戳

recorder.setTimestamp(videoTS);

// 有图像,就把视频帧加一

if (null!=frame.image) {

videoFrameNum++;

}

// 有声音,就把音频帧加一

if (null!=frame.samples) {

audioFrameNum++;

}

// 有数据,就把数据帧加一

if (null!=frame.data) {

dataFrameNum++;

}

// 取出的每一帧,都推送到SRS

recorder.record(frame);

// 停顿一下再推送

Thread.sleep(interVal);

}

log.info(“推送完成,视频帧[{}],音频帧[{}],数据帧[{}],耗时[{}]秒”,

videoFrameNum,

audioFrameNum,

dataFrameNum,

(System.currentTimeMillis()-startTime)/1000);

// 关闭帧录制器

recorder.close();

// 关闭帧抓取器

grabber.close();

}

public static void main(String[] args) throws Exception {

grabAndPush(MP4_FILE_PATH, SRS_PUSH_ADDRESS);

}

}

  • 上述代码中每一行都有详细注释,就不多赘述了,只有下面这四处关键需要注意:
  1. MP4_FILE_PATH是本地MP4文件存放的地方,请改为自己电脑上MP4文件存放的位置

  2. SRS_PUSH_ADDRESS是SRS服务的推流地址,请改为自己的SRS服务部署的地址

  3. grabber.start(true)方法执行的时候,内部是帧抓取器的初始化流程,会取得MP4文件的相关信息

  4. recorder.record(frame)方法执行的时候,会将帧推送到SRS服务器

  • 编码完成后运行此类,控制台日志如下所示,可见成功的取到了MP4文件的帧率、时长、解码器、媒体流等信息,然后开始推流了:

23:21:48.107 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 开始初始化帧抓取器

23:21:48.267 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 帧抓取器初始化完成,耗时[163]毫秒

23:21:48.277 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 视频帧率[15],视频时长[125]秒,媒体流数量[2]

23:21:48.277 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 流的索引[0],编码器类型[0],编码器ID[27]

23:21:48.277 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 流的索引[1],编码器类型[1],编码器ID[86018]

23:21:48.279 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 视频宽度[320],视频高度[240],音频通道数[6]

23:21:48.294 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 开始初始化帧抓取器

23:21:48.727 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 帧录制初始化完成,耗时[433]毫秒

23:21:48.727 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 开始推流

  • 接下来试试能不能拉流播放

用VLC播放

  • 请安装VLC软件,并打开

  • 如下图红框,点击菜单中的Open Network…,然后输入前面代码中写的推流地址(我这里是rtmp://192.168.50.43:11935/live/livestream):

在这里插入图片描述

  • 如下图,成功播放,而且声音也正常:

在这里插入图片描述

附加知识点

  • 经过上面的实战,我们熟悉了播放和推流的基本操作,掌握了常规信息的获取以及参数设置,除了代码中的知识,还有以下几个隐藏的知识点也值得关注
  1. 设置ffmpeg日志级别的代码是avutil.av_log_set_level(avutil.AV_LOG_ERROR),把参数改为avutil.AV_LOG_INFO后,可以在控制台看到更丰富的日志,如下图红色区域,里面显示了MP4文件的详细信息,例如两个媒体流(音频流和视频流):

在这里插入图片描述

  1. 第二个知识点是关于编码器类型和编码器ID的,如下图,两个媒体流(AVStream)的编码器类型分别是01,两个编码器ID分别是2786018,这四个数字分别代表什么呢?

言尽于此,完结

无论是一个初级的 coder,高级的程序员,还是顶级的系统架构师,应该都有深刻的领会到设计模式的重要性。

  • 第一,设计模式能让专业人之间交流方便,如下:

程序员A:这里我用了XXX设计模式

程序员B:那我大致了解你程序的设计思路了

  • 第二,易维护

项目经理:今天客户有这样一个需求…

程序员:明白了,这里我使用了XXX设计模式,所以改起来很快

  • 第三,设计模式是编程经验的总结

程序员A:B,你怎么想到要这样去构建你的代码

程序员B:在我学习了XXX设计模式之后,好像自然而然就感觉这样写能避免一些问题

  • 第四,学习设计模式并不是必须的

程序员A:B,你这段代码使用的是XXX设计模式对吗?

程序员B:不好意思,我没有学习过设计模式,但是我的经验告诉我是这样写的

image

从设计思想解读开源框架,一步一步到Spring、Spring5、SpringMVC、MyBatis等源码解读,我都已收集整理全套,篇幅有限,这块只是详细的解说了23种设计模式,整理的文件如下图一览无余!

image

搜集费时费力,能看到此处的都是真爱!

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以添加V获取:vip1024b (备注Java)
img

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

但是我的经验告诉我是这样写的

[外链图片转存中…(img-Dsj5HAO1-1713611121918)]

从设计思想解读开源框架,一步一步到Spring、Spring5、SpringMVC、MyBatis等源码解读,我都已收集整理全套,篇幅有限,这块只是详细的解说了23种设计模式,整理的文件如下图一览无余!

[外链图片转存中…(img-tYoNBYRi-1713611121919)]

搜集费时费力,能看到此处的都是真爱!

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以添加V获取:vip1024b (备注Java)
[外链图片转存中…(img-ZdYRLshn-1713611121919)]

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值