JavaCV的摄像头实战之六：保存为mp4文件(有声音)，kafka和rabbitmq区别面试题

line.open(audioFormat);

// 数据线与音频数据的IO建立联系

line.start();

// 每次取得的原始数据大小

final int audioBufferSize = SAMPLE_RATE * CHANNEL_NUM;

// 初始化数组，用于暂存原始音频采样数据

audioBytes = new byte[audioBufferSize];

// 创建一个定时任务，任务的内容是定时做音频采样，再把采样数据交给帧录制器处理

sampleTask = new ScheduledThreadPoolExecutor(1);

}

/**

• 程序结束前，释放音频相关的资源

*/

public void releaseOutputResource() {

// 结束的标志，避免采样的代码在whlie循环中不退出

isFinish = true;

// 结束定时任务

sampleTask.shutdown();

// 停止数据线

line.stop();

// 关闭数据线

line.close();

}

/**

• 启动定时任务，每秒执行一次，采集音频数据给帧录制器

• @param frameRate

*/

public void startSample(double frameRate) {

// 启动定时任务，每秒执行一次，采集音频数据给帧录制器

sampleTask.scheduleAtFixedRate((Runnable) new Runnable() {

@Override

public void run() {

try

{

int nBytesRead = 0;

while (nBytesRead == 0 && !isFinish) {

// 音频数据是从数据线中取得的

nBytesRead = line.read(audioBytes, 0, line.available());

}

// 如果nBytesRead<1，表示isFinish标志被设置true，此时该结束了

if (nBytesRead<1) {

return;

}

// 采样数据是16比特，也就是2字节，对应的数据类型就是short，

// 所以准备一个short数组来接受原始的byte数组数据

// short是2字节，所以数组长度就是byte数组长度的二分之一

int nSamplesRead = nBytesRead / 2;

short[] samples = new short[nSamplesRead];

// 两个byte放入一个short中的时候，谁在前谁在后？这里用LITTLE_ENDIAN指定拜访顺序，

ByteBuffer.wrap(audioBytes).order(ByteOrder.LITTLE_ENDIAN).asShortBuffer().get(samples);

// 将short数组转为ShortBuffer对象，因为帧录制器的入参需要该类型

ShortBuffer sBuff = ShortBuffer.wrap(samples, 0, nSamplesRead);

// 音频帧交给帧录制器输出

recorder.recordSamples(SAMPLE_RATE, CHANNEL_NUM, sBuff);

}

catch (FrameRecorder.Exception e) {

e.printStackTrace();

}

}

}, 0, 1000 / (long)frameRate, TimeUnit.MILLISECONDS);

}

}

• 上述代码中，有两处要注意：

1. 重点关注recorder.recordSamples，该方法将音频存入了mp4文件

2. 定时任务是在一个新线程中执行的，因此当主线程结束录制后，需要中断定时任务中的while循环，因此新增了volatile类型的变量isFinish，帮助定时任务中的代码判断是否立即结束while循环

改造原本只存视频的代码

• 接着是对《JavaCV的摄像头实战之三：保存为mp4文件》一文中RecordCameraSaveMp4.java的改造，为了不影响之前章节在github上的代码，这里我新增了一个类RecordCameraSaveMp4WithAudio.java，内容与RecordCameraSaveMp4.java一模一样，接下来咱们来改造这个RecordCameraSaveMp4WithAudio类

• 先增加AudioService类型的成员变量：

// 音频服务类

private AudioService audioService = new AudioService();

• 接下来是关键，initOutput方法负责帧录制器的初始化，现在要加上音频相关的初始化操作，并且还要启动定时任务去采集和处理音频，如下所示，AudioService的三个方法都在此调用了，注意定时任务的启动要放在帧录制器初始化之后：

@Override

protected void initOutput() throws Exception {

// 实例化FFmpegFrameRecorder

recorder = new FFmpegFrameRecorder(RECORD_FILE_PATH, // 存放文件的位置

getCameraImageWidth(), // 分辨率的宽，与视频源一致

getCameraImageHeight(), // 分辨率的高，与视频源一致

0); // 音频通道，0表示无

// 文件格式

recorder.setFormat(“mp4”);

// 帧率与抓取器一致

recorder.setFrameRate(getFrameRate());

// 编码格式

recorder.setPixelFormat(AV_PIX_FMT_YUV420P);

// 编码器类型

recorder.setVideoCodec(avcodec.AV_CODEC_ID_MPEG4);

// 视频质量，0表示无损

recorder.setVideoQuality(0);

// 设置帧录制器的音频相关参数

audioService.setRecorderParams(recorder);

// 音频采样相关的初始化操作

audioService.initSampleService();

// 初始化

recorder.start();

// 启动定时任务，采集音频帧给帧录制器

audioService.startSample(getFrameRate());

• output方法保存原样，只处理视频帧（音频处理在定时任务中）

@Override

protected void output(Frame frame) throws Exception {

// 存盘

recorder.record(frame);

}

• 释放资源的方法中，增加了音频资源释放的操作：

@Override

protected void releaseOutputResource() throws Exception {

// 执行音频服务的资源释放操作

audioService.releaseOutputResource();

// 关闭帧录制器

recorder.close();

小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数初中级Java工程师，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新Java开发全套学习资料》送给大家，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频

如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注Java）

最后

分享一套我整理的面试干货，这份文档结合了我多年的面试官经验，站在面试官的角度来告诉你，面试官提的那些问题他最想听到你给他的回答是什么，分享出来帮助那些对前途感到迷茫的朋友。

面试经验技巧篇

• 经验技巧1 如何巧妙地回答面试官的问题
• 经验技巧2 如何回答技术性的问题
• 经验技巧3 如何回答非技术性问题
• 经验技巧4 如何回答快速估算类问题
• 经验技巧5 如何回答算法设计问题
• 经验技巧6 如何回答系统设计题
• 经验技巧7 如何解决求职中的时间冲突问题
• 经验技巧8 如果面试问题曾经遇见过，是否要告知面试官
• 经验技巧9 在被企业拒绝后是否可以再申请
• 经验技巧10 如何应对自己不会回答的问题
• 经验技巧11 如何应对面试官的“激将法”语言
• 经验技巧12 如何处理与面试官持不同观点这个问题
• 经验技巧13 什么是职场暗语

面试真题篇

• 真题详解1 某知名互联网下载服务提供商软件工程师笔试题
• 真题详解2 某知名社交平台软件工程师笔试题
• 真题详解3 某知名安全软件服务提供商软件工程师笔试题
• 真题详解4 某知名互联网金融企业软件工程师笔试题
• 真题详解5 某知名搜索引擎提供商软件工程师笔试题
• 真题详解6 某初创公司软件工程师笔试题
• 真题详解7 某知名游戏软件开发公司软件工程师笔试题
• 真题详解8 某知名电子商务公司软件工程师笔试题
• 真题详解9 某顶级生活消费类网站软件工程师笔试题
• 真题详解10 某知名门户网站软件工程师笔试题
• 真题详解11 某知名互联网金融企业软件工程师笔试题
• 真题详解12 国内某知名网络设备提供商软件工程师笔试题
• 真题详解13 国内某顶级手机制造商软件工程师笔试题
• 真题详解14 某顶级大数据综合服务提供商软件工程师笔试题
• 真题详解15 某著名社交类上市公司软件工程师笔试题
• 真题详解16 某知名互联网公司软件工程师笔试题
• 真题详解17 某知名网络安全公司校园招聘技术类笔试题
• 真题详解18 某知名互联网游戏公司校园招聘运维开发岗笔试题

资料整理不易，点个关注再走吧

名电子商务公司软件工程师笔试题

• 真题详解9 某顶级生活消费类网站软件工程师笔试题
• 真题详解10 某知名门户网站软件工程师笔试题
• 真题详解11 某知名互联网金融企业软件工程师笔试题
• 真题详解12 国内某知名网络设备提供商软件工程师笔试题
• 真题详解13 国内某顶级手机制造商软件工程师笔试题
• 真题详解14 某顶级大数据综合服务提供商软件工程师笔试题
• 真题详解15 某著名社交类上市公司软件工程师笔试题
• 真题详解16 某知名互联网公司软件工程师笔试题
• 真题详解17 某知名网络安全公司校园招聘技术类笔试题
• 真题详解18 某知名互联网游戏公司校园招聘运维开发岗笔试题

[外链图片转存中…(img-CCdkxS61-1711050635141)]

资料整理不易，点个关注再走吧

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录