项目依赖
<!-- javacv依赖 -->
<dependency>
<groupId>org.bytedeco</groupId>
<artifactId>javacv</artifactId>
<version>1.4.3</version>
</dependency>
<!-- ffmpeg依赖 -->
<dependency>
<groupId>org.bytedeco.javacpp-presets</groupId>
<artifactId>ffmpeg-platform</artifactId>
<version>4.0.2-1.4.3</version>
</dependency>
<!-- opencv依赖 -->
<dependency>
<groupId>org.bytedeco.javacpp-presets</groupId>
<artifactId>opencv-platform</artifactId>
<version>3.4.3-1.4.3</version>
</dependency>
main方法使用opencv调用本地视频头示例
public static void main(String[] args) throws Exception{
//调用摄像头
OpenCVFrameGrabber grabber = new OpenCVFrameGrabber(0);
grabber.start(); //开始获取摄像头数据
CanvasFrame canvas = new CanvasFrame("摄像头");//新建一个窗口
canvas.setDefaultCloseOperation(JFrame.EXIT_ON_CLOSE);
canvas.setAlwaysOnTop(true);
while(true){
if(!canvas.isDisplayable()){//窗口是否关闭
grabber.stop();//停止抓取
System.exit(2);//退出
break;
}
canvas.showImage(grabber.grab());//获取摄像头图像并放到窗口上显示
Thread.sleep(200);//50毫秒刷新一次图像
}
}
main方法使用ffmpeg截取视频指定帧的图像示例代码
/**
该示例代码应用场景为,解决苹果手机在公众号H5页面中上传视频后,无法预览视频第1帧的问题。
思路就是前端无法实现,那就后台上传视频成功后额外处理视频截取第1帧的图像保存起来。
前端渲染时直接加载第1帧图像url,点击后再加载视视频url进行播放。
**/
public static void main(String[] args) throws Exception{
//获取指定视频
FFmpegFrameGrabber fFmpegFrameGrabber = new FFmpegFrameGrabber("D:\\test\\video\\3.mp4");
//Frame对象
Frame frame = null;
//视频帧数累计数
int frameIndex = 0;
fFmpegFrameGrabber.start();
//获取视频总帧数
int totalIndex = fFmpegFrameGrabber.getLengthInFrames();
while (frameIndex <= totalIndex) {
frame = fFmpegFrameGrabber.grabImage();
//获取视频的第1帧图像并写入到本地磁盘
if (frame != null && frameIndex == 1) {
// 文件绝对路径+名字
String fileName = "D:\\test\\img\\" + UUID.randomUUID().toString() + "_" + String.valueOf(frameIndex) + ".jpg";
// 文件储存对象
File outPut = new File(fileName);
BufferedImage frameToBufferedImage = FrameToBufferedImage(frame);
ImageIO.write(frameToBufferedImage, "jpg", outPut);
break;
}
frameIndex++;
}
fFmpegFrameGrabber.stop();
fFmpegFrameGrabber.close();
}
FAQ
1、maven依赖后,会导致整个项目工程打包发布后的体积变得十分巨大
原因是ffmpeg和opencv两个依赖默认会把android,ios,linux,macos,windows以及各自不同cpu芯片下,86/64等所有版本的Jar会全部依赖进来,项目打包后体积剧增500M+
解决方法也比较简单,只需要根据我们生产环境真实平台环境,选取其中1个Jar包就可以了。下面以Linux 64位操作系统为例,maven配置如下:
<!-- javacv依赖 -->
<dependency>
<groupId>org.bytedeco</groupId>
<artifactId>javacv</artifactId>
<version>1.4.3</version>
</dependency>
<!-- 引入ffmpeg依赖时单独把linux 64位的ffmpeg依赖引入即可 -->
<dependency>
<groupId>org.bytedeco.javacpp-presets</groupId>
<artifactId>ffmpeg</artifactId>
<version>4.0.2-1.4.3</version>
<classifier>linux-x86_64</classifier>
</dependency>
<!-- 引入ffmpeg依赖时单独把linux 64位的opencv依赖引入即可 -->
<dependency>
<groupId>org.bytedeco.javacpp-presets</groupId>
<artifactId>opencv</artifactId>
<version>3.4.3-1.4.3</version>
<classifier>linux-x86_64</classifier>
</dependency>
2、使用ffmpeg进行视频处理,截取第1帧时图像,如果项目在生产环境是部署在docker容器中时,由于我们docker容器一般使用的是精简的Linux系统,所以有可能会导致按帧截取图像时报错:Could not initialize class org.bytedeco.javacpp.avutil 但我们在分析问题时发现这个类是存在的,此时的原因是linux环境缺少安装ffmpeg软件包。如果docker容器是基于frolvlad构建的。那么我们只需要进入容器执行以下步骤即可:
apk update
apk search ffmpeg
apk add ffmpeg=3.4-r1
apk search musl
apk add musl=1.1.24-r9
//执行ffmpeg安装完成后,重启docker容器即可