JavaCV推流实战(MP4文件)

最新推荐文章于 2024-05-23 15:42:34 发布
最新推荐文章于 2024-05-23 15:42:34 发布
阅读量1k 收藏 29
点赞数 14
分类专栏： 程序员 文章标签： java 学习 经验分享
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_83064295/article/details/139149780
版权

  • 从上述文件可见，JavaCV的依赖只有一个javacv-platform，挺简洁

  • 接下来开始编码，在编码前，先把整个流程画出来，这样写代码就清晰多了：

在这里插入图片描述

  • 从上图可见流程很简单，这里将所有代码写在一个java类中：

package com.bolingcavalry.grabpush;

import lombok.extern.slf4j.Slf4j;

import org.bytedeco.ffmpeg.avcodec.AVCodecParameters;

import org.bytedeco.ffmpeg.avformat.AVFormatContext;

import org.bytedeco.ffmpeg.avformat.AVStream;

import org.bytedeco.ffmpeg.global.avcodec;

import org.bytedeco.ffmpeg.global.avutil;

import org.bytedeco.javacv.FFmpegFrameGrabber;

import org.bytedeco.javacv.FFmpegFrameRecorder;

import org.bytedeco.javacv.FFmpegLogCallback;

import org.bytedeco.javacv.Frame;

/**

  • @author willzhao

  • @version 1.0

  • @description 读取指定的mp4文件，推送到SRS服务器

  • @date 2021/11/19 8:49

*/

@Slf4j

public class PushMp4 {

/**

  • 本地MP4文件的完整路径(两分零五秒的视频)

*/

private static final String MP4_FILE_PATH = “/Users/zhaoqin/temp/202111/20/sample-mp4-file.mp4”;

/**

  • SRS的推流地址

*/

private static final String SRS_PUSH_ADDRESS = “rtmp://192.168.50.43:11935/live/livestream”;

/**

  • 读取指定的mp4文件，推送到SRS服务器

  • @param sourceFilePath 视频文件的绝对路径

  • @param PUSH_ADDRESS 推流地址

  • @throws Exception

*/

private static void grabAndPush(String sourceFilePath, String PUSH_ADDRESS) throws Exception {

// ffmepg日志级别

avutil.av_log_set_level(avutil.AV_LOG_ERROR);

FFmpegLogCallback.set();

// 实例化帧抓取器对象，将文件路径传入

FFmpegFrameGrabber grabber = new FFmpegFrameGrabber(MP4_FILE_PATH);

long startTime = System.currentTimeMillis();

log.info(“开始初始化帧抓取器”);

// 初始化帧抓取器，例如数据结构（时间戳、编码器上下文、帧对象等），

// 如果入参等于true，还会调用avformat_find_stream_info方法获取流的信息，放入AVFormatContext类型的成员变量oc中

grabber.start(true);

log.info(“帧抓取器初始化完成，耗时[{}]毫秒”, System.currentTimeMillis()-startTime);

// grabber.start方法中，初始化的解码器信息存在放在grabber的成员变量oc中

AVFormatContext avFormatContext = grabber.getFormatContext();

// 文件内有几个媒体流（一般是视频流+音频流）

int streamNum = avFormatContext.nb_streams();

// 没有媒体流就不用继续了

if (streamNum<1) {

log.error(“文件内不存在媒体流”);

return;

}

// 取得视频的帧率

int frameRate = (int)grabber.getVideoFrameRate();

log.info(“视频帧率[{}]，视频时长[{}]秒，媒体流数量[{}]”,

frameRate,

avFormatContext.duration()/1000000,

avFormatContext.nb_streams());

// 遍历每一个流，检查其类型

for (int i=0; i< streamNum; i++) {

AVStream avStream = avFormatContext.streams(i);

AVCodecParameters avCodecParameters = avStream.codecpar();

log.info(“流的索引[{}]，编码器类型[{}]，编码器ID[{}]”, i, avCodecParameters.codec_type(), avCodecParameters.codec_id());

}

// 视频宽度

int frameWidth = grabber.getImageWidth();

// 视频高度

int frameHeight = grabber.getImageHeight();

// 音频通道数量

int audioChannels = grabber.getAudioChannels();

log.info(“视频宽度[{}]，视频高度[{}]，音频通道数[{}]”,

frameWidth,

frameHeight,

audioChannels);

// 实例化FFmpegFrameRecorder，将SRS的推送地址传入

FFmpegFrameRecorder recorder = new FFmpegFrameRecorder(SRS_PUSH_ADDRESS,

frameWidth,

frameHeight,

audioChannels);

// 设置编码格式

recorder.setVideoCodec(avcodec.AV_CODEC_ID_H264);

// 设置封装格式

recorder.setFormat(“flv”);

// 一秒内的帧数

recorder.setFrameRate(frameRate);

// 两个关键帧之间的帧数

recorder.setGopSize(frameRate);

// 设置音

必看视频！获取2024年最新Java开发全套学习资料 备注Java

频通道数，与视频源的通道数相等

recorder.setAudioChannels(grabber.getAudioChannels());

startTime = System.currentTimeMillis();

log.info(“开始初始化帧抓取器”);

// 初始化帧录制器，例如数据结构（音频流、视频流指针，编码器），

// 调用av_guess_format方法，确定视频输出时的封装方式，

// 媒体上下文对象的内存分配，

// 编码器的各项参数设置

recorder.start();

log.info(“帧录制初始化完成，耗时[{}]毫秒”, System.currentTimeMillis()-startTime);

Frame frame;

startTime = System.currentTimeMillis();

log.info(“开始推流”);

long videoTS = 0;

int videoFrameNum = 0;

int audioFrameNum = 0;

int dataFrameNum = 0;

// 假设一秒钟15帧，那么两帧间隔就是(1000/15)毫秒

int interVal = 1000/frameRate;

// 发送完一帧后sleep的时间，不能完全等于(1000/frameRate)，不然会卡顿，

// 要更小一些，这里取八分之一

interVal/=8;

// 持续从视频源取帧

while (null!=(frame=grabber.grab())) {

videoTS = 1000 * (System.currentTimeMillis() - startTime);

// 时间戳

recorder.setTimestamp(videoTS);

// 有图像，就把视频帧加一

if (null!=frame.image) {

videoFrameNum++;

}

// 有声音，就把音频帧加一

if (null!=frame.samples) {

audioFrameNum++;

}

// 有数据，就把数据帧加一

if (null!=frame.data) {

dataFrameNum++;

}

// 取出的每一帧，都推送到SRS

recorder.record(frame);

// 停顿一下再推送

Thread.sleep(interVal);

}

log.info(“推送完成，视频帧[{}]，音频帧[{}]，数据帧[{}]，耗时[{}]秒”,

videoFrameNum,

audioFrameNum,

dataFrameNum,

(System.currentTimeMillis()-startTime)/1000);

// 关闭帧录制器

recorder.close();

// 关闭帧抓取器

grabber.close();

}

public static void main(String[] args) throws Exception {

grabAndPush(MP4_FILE_PATH, SRS_PUSH_ADDRESS);

}

}

  • 上述代码中每一行都有详细注释，就不多赘述了，只有下面这四处关键需要注意：

  1. MP4_FILE_PATH是本地MP4文件存放的地方，请改为自己电脑上MP4文件存放的位置

  2. SRS_PUSH_ADDRESS是SRS服务的推流地址，请改为自己的SRS服务部署的地址

  3. grabber.start(true)方法执行的时候，内部是帧抓取器的初始化流程，会取得MP4文件的相关信息

  4. recorder.record(frame)方法执行的时候，会将帧推送到SRS服务器

  • 编码完成后运行此类，控制台日志如下所示，可见成功的取到了MP4文件的帧率、时长、解码器、媒体流等信息，然后开始推流了：

23:21:48.107 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 开始初始化帧抓取器

23:21:48.267 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 帧抓取器初始化完成，耗时[163]毫秒

23:21:48.277 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 视频帧率[15]，视频时长[125]秒，媒体流数量[2]

23:21:48.277 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 流的索引[0]，编码器类型[0]，编码器ID[27]

23:21:48.277 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 流的索引[1]，编码器类型[1]，编码器ID[86018]

23:21:48.279 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 视频宽度[320]，视频高度[240]，音频通道数[6]

23:21:48.294 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 开始初始化帧抓取器

23:21:48.727 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 帧录制初始化完成，耗时[433]毫秒

23:21:48.727 [main] INFO com.bolingcavalry.grabpush.PushMp4 - 开始推流

  • 接下来试试能不能拉流播放

用VLC播放

  • 请安装VLC软件，并打开

  • 如下图红框，点击菜单中的Open Network…，然后输入前面代码中写的推流地址（我这里是rtmp://192.168.50.43:11935/live/livestream）：

在这里插入图片描述

  • 如下图，成功播放，而且声音也正常：

在这里插入图片描述

附加知识点

  • 经过上面的实战，我们熟悉了播放和推流的基本操作，掌握了常规信息的获取以及参数设置，除了代码中的知识，还有以下几个隐藏的知识点也值得关注
  1. 设置ffmpeg日志级别的代码是avutil.av_log_set_level(avutil.AV_LOG_ERROR)，把参数改为avutil.AV_LOG_INFO后，可以在控制台看到更丰富的日志，如下图红色区域，里面显示了MP4文件的详细信息，例如两个媒体流（音频流和视频流）：

在这里插入图片描述

  1. 第二个知识点是关于编码器类型和编码器ID的，如下图，两个媒体流(AVStream)的编码器类型分别是0和1，两个编码器ID分别是27和86018，这四个数字分别代表什么呢？

在这里插入图片描述

  1. 先看编码器类型，用IDEA的反编译功能打开avutil.class，如下图，编码器类型等于0表示视频(VIDEO)，类型等于1表示音频（AUDIO）：

在这里插入图片描述

  1. 再看编码器ID，打开avcodec.java，看到编码器ID为27表示H264：

在这里插入图片描述

  1. 编码器ID值86018的十六进制是0x15002，对应的编码器如下图红框：

总结

面试建议是，一定要自信，敢于表达，面试的时候我们对知识的掌握有时候很难面面俱到，把自己的思路说出来，而不是直接告诉面试官自己不懂，这也是可以加分的。

以上就是蚂蚁技术四面和HR面试题目，以下最新总结的最全，范围包含最全MySQL、Spring、Redis、JVM等最全面试题和答案，仅用于参考

一份还热乎的蚂蚁金服面经（已拿Offer）面试流程4轮技术面+1轮HR

HJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA56iL5bqP5ZGY5qyj5a64,size_18,color_FFFFFF,t_70,g_se,x_16)

  1. 再看编码器ID，打开avcodec.java，看到编码器ID为27表示H264：

在这里插入图片描述

  1. 编码器ID值86018的十六进制是0x15002，对应的编码器如下图红框：

总结

面试建议是，一定要自信，敢于表达，面试的时候我们对知识的掌握有时候很难面面俱到，把自己的思路说出来，而不是直接告诉面试官自己不懂，这也是可以加分的。

以上就是蚂蚁技术四面和HR面试题目，以下最新总结的最全，范围包含最全MySQL、Spring、Redis、JVM等最全面试题和答案，仅用于参考

[外链图片转存中…(img-0GZ4m9wC-1716450096542)]

2401_83064295
关注
  • 14
    点赞
  • 踩
  • 29
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
JavaCV之rtmp推流（FLV和M3U8）
qq_52703909的博客
02-21 1953
JavaCV与FFmpegFFmpeg是一款开源的多媒体处理工具集，它包含了一系列用于处理音频、视频、字幕等多媒体数据的库和工具。JavaCV集成了FFmpeg库，使得Java开发者可以使用FFmpeg的功能，比如视频解码、编码、格式转换等。
JavaCV多媒体入门 - 采集本地摄像头推流到流媒体服务器或存储视频
09-27 715
我这里引入的是比较新的依赖包1.5.9版本的。我是用windows环境开发的，所以相关的依赖添加的是支持windows的jar包，其他linux、mac需要引入系统相对应的包。也可以一次性引入全平台的包。示例代码运行以后，就能看到弹出一个窗口播放摄像头的画面了，并且会推流到流媒体服务器/录制摄像头视频camera.mp4到项目根目录。录制的视频播放你会发现画面和弹出的Camera Example画面作比较非常的不清晰，及没有声音。当然这个的前提是你的电脑需要有“摄像头”，一般笔记本都是有摄像头的，哈哈。
JavaCV的摄像头实战之七：推流(带声音)
最新发布
2401_83064295的博客
05-23 937
针对最近很多人都在面试，我这边也整理了相当多的面试专题资料，也有其他大厂的面经。希望可以帮助到大家。下面的面试题答案都整理成文档笔记。也还整理了一些面试资料&最新2021收集的一些大厂的面试真题（都整理成文档，小部分截图）最新整理电子书有点像直播的样子了），得益于JavaCV的强大，整个过程是如此的轻松愉快，接下来请继续关注欣宸原创，《JavaCV的摄像头实战》系列还会呈现更多丰富的应用；针对最近很多人都在面试，我这边也整理了相当多的面试专题资料，也有其他大厂的面经。希望可以帮助到大家。
JavaCV的摄像头实战之五：推流
程序员欣宸的博客
12-02 3094
用JavaCV推流到媒体服务器，再用播放器在线播放
CameraSteamUtils_java实时推流_JAVACV_源码
10-04
JAVACV提供了RTMP（Real-Time Messaging Protocol）推流功能，RTMP是一种协议，用于将音视频数据实时传输到支持RTMP的服务器，如Adobe的Flash Media Server或开源的Nginx-RTMP模块。在Java中实现RTMP推流，主要涉及...
javacv加载字幕文件并合成视频
05-03
通过javacv加载字幕文件，然后跟视频合并。首先使用FFmpegFrameGrabber类加载视频文件和字幕文件。然后创建一个FFmpegFrameRecorder对象来将它们合并成一个视频文件。最后，通过循环读取视频和字幕的帧，并将它们...
javacv实现同屏浏览
04-16
javacv推送桌面到rtmp服务器，拉取rtmp流并播放，实现同屏浏览 采用的javacv版本javacv-platform-1.5-bin，将javacv-platform-1.5-bin的所有jar都拷贝到了工程的lib目录，并引用了javacpp.jar， javacv-platform.jar...
Java 使用javaCV、ffmpeg拉流H265 RTSP转推H264 RTMP可获取流访问人数（源代码）
09-08
2）、可选择使用javaCV推流、ffmpeg推流两种方式。 3）、javaCV仅支持拉去或推送H264压缩方式的流。 4）、ffmpeg采用命令的方式拉流和推流，支持H265和H264。 5）、支持获取流的访问数，可设置自动关闭0访问数的...
线程关闭javacv关闭20190508.rar
05-08
在JavaCV库中，线程管理和关闭是关键操作，特别是在涉及到实时视频推流的应用场景中。JavaCV是一个Java接口，提供了对多个计算机视觉库的访问，包括OpenCV、FFmpeg等，广泛用于图像处理和流媒体操作。在这个“线程...
javaCV将socket获取的视频流推到流媒体（RTMP）服务器jar
01-12
javaCV将socket获取的视频流推到流媒体（RTMP）服务器所需要的jar
java8源码-ffmpeg-web-pusher:基于FFmpeg、SpringBoot、JavaCV开发的远程推流服务，可通过http-a
06-04
java8 源码 FFmpegWebPusher 基于FFmpeg、SpringBoot、JavaCV开发的远程推流服务，可通过http-api实现远程拉流、推流、转发流等功能，实现拉流直播、第三方直播等功能。 P.S. 之前使用node实现的简易版， 环境与依赖 IDE: IDEA : IDEA-2018 Build: Maven : 3.6.3 VERSION: SpringBoot : 2.2.2 VERSION: JDK : Oracle 8u201 VERSION: FFMPEG : 4.0.6 VERSION: GLIBC : 2.29 特性 通过SpringBoot提供 Restful API 使用Java线程池技术，支持并发推流 使用，相比直接调用ffmpeg命令行，更加灵活，支持更多的定制。 容器化部署，简化部署流程 使用 1. 容器部署 由于同时需要java8以及ffmpeg环境，为了部署方便，通过容器的方式简化部署流程。 镜像地址： # 拉取镜像 docker pull zwboy/ffmpeg-web-pusher # 运行容器 docker run -d -i
1078解析推流源代码(netty+javacv+spring+maven+rtp+rtmp)
07-18
解析1078部标终端推流,并转发至rtmp流服务器.代码有点乱但是本人保证可用. 1078分了2014和2016.该版本是否都支持我已近刚忘记了.但是大同小异对不对~~就是解析的时候注意下就行了
安卓 图片合成视频（利用javacv）
04-20
利用javacv将指定的图片合成视频，先输入一个目录（文件夹名称），点击开始后过一段时间视频合成完毕后程序会自动退出，然后去输入的文件夹下寻找视频
JavaCV推流实战(MP4文件)，java面试基本问题
2401_83977605的博客
04-01 1044
千千万万要记得：多刷题！！多刷题！！之前算法是我的硬伤，后面硬啃了好长一段时间才补回来，算法才是程序员的灵魂！！！！篇幅有限，以下只能截图分享部分的资源！！（1）多线程（这里以多线程为代表，其实整理了一本JAVA核心架构笔记集）（2）刷的算法题（还有左神的算法笔记）（3）面经+真题解析+对应的相关笔记（很全面）（4）视频学习（部分）ps：当你觉得学不进或者累了的时候，视频是个不错的选择在这里，最后只一句话：祝大家offer拿到手软！！p1024b （备注Java）**
基于JavaCV技术实现RTSP推流和拉流功能
热门推荐
xxxlllbbb的博客
03-25 1万+
RTSP简介 RTSP（Real Time Streaming Protocol）是由Real Network和Netscape共同提出的如何有效地在IP网络上传输流媒体数据的应用层协议。RTSP对流媒体提供了诸如暂停，快进等控制，而它本身并不传输数据，RTSP的作用相当于流媒体服务器的远程控制。服务器端可以自行选择使用TCP或UDP来传送串流内容，它的语法和运作跟HTTP 1.1类似，但并不特别...
javacv 推流直播
12-08
Javacv是一个基于Java的计算机视觉库，它可以用来实现视频流的采集、处理和推流。要通过Javacv实现推流直播，首先需要使用Javacv来捕获视频流并进行必要的处理，然后将处理后的视频流推送到指定的服务器上。具体步骤如下： 1. 导入Javacv库：在Java项目中导入Javacv库，可以使用Maven等工具来引入Javacv相关的依赖。 2. 捕获视频流：使用Javacv提供的API，从摄像头、文件或其他视频源中捕获视频流，可以对视频进行处理，比如裁剪、滤镜等。 3. 设置推流参数：配置推流服务器的地址、端口、推流地址和其他相关参数。 4. 推送视频流：使用Javacv提供的推流API，将处理后的视频流推送到指定的直播服务器上，比如RTMP服务器。 5. 监控推流状态：可以添加监听器来监控推流状态，实时获取推流的情况，比如是否连接成功、推流状态等。 通过以上步骤，就可以利用Javacv来实现推流直播的功能。当然，在实际应用中，还需要考虑音视频同步、低延迟等问题，同时需要确保推流服务器的稳定性和可靠性，以提供更好的直播体验。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值