刷抖音上瘾后，决定探究如果做一款类似抖音短视频app(1)

二、短视频处理播放

视频的处理和播放主要是视频的清晰度、观看流畅度方面的体验。在这方面来讲，可以采用“窄带高清”技术，在节省码率的同时能够提供更加清晰的观看体验，经过测试，同等视频质量下最高可以节省20-40%带宽。除了带宽之外，短视频内容的存储和CDN优化也尤为重要，通常我们需要上传到云存储服务器的内容是短视频内容和封面内容。

而CDN优化带给短视频平台的则是进一步的短视频首次载入和循环播放方面的体验。比如针对首播慢的问题，像阿里云播放器支持QUIC协议，基于CDN的调度，可以使短视频首次播放秒开的成功率达到98%，此外在循环播放时还可以边播放边缓存，用户反复观看某一短视频时就不用耗费流量了。

三、录制视频的方式

在Android系统当中，如果需要一台Android设备来获取到一个MP4这样的视频文件的话，主流的方式一共与三种：MediaRecorder、MediaCodec+MediaMuxer、FFmpeg。

MediaRecorder：是Android系统直接提供给我们的录制类，用于录制音频和视频的一个类，简单方便，不需要理会中间录制过程，结束录制后可以直接得到音频文件进行播放，录制的音频文件是经过压缩的，需要设置编码器，录制的音频文件可以用系统自带的播放器播放。

• 优点：大部分以及集成，直接调用相关接口即可，代码量小，简单稳定；

• 缺点：无法实时处理音频；输出的音频格式不是很多。

MediaCodec+MediaMuxer： MediaCodec 与 MediaMuxer结合使用同样能够实现录制的功能。MediaCodec是Android提供的编解码类,MediaMuxer则是复用类(生成视频文件)。从易用性的角度上来说肯定不如MediaRecorder，但是允许我们进行更加灵活的操作，比如需要给录制的视频添加水印等各种效果。

• 优点: 与MediaRecorder一样低功耗速度快，并且更加灵活

• 缺点: 支持的格式有限，兼容性问题

FFmpeg： FFmpeg（Fast forword mpeg，音视频转换器）是一个开源免费跨平台的视频和音频流方案，它提供了录制/音视频编解码、转换以及流化音视频的完整解决方案。主要的作用在于对多媒体数据进行解协议、解封装、解码以及转码等操作

• 优点：格式支持非常的强，十分的灵活，功能强大，兼容性好；

• 缺点：C语言些的音视频编解码程序，使用起来不是很方便。

虽然从数据看来FFmpeg是最好的，但是我们得首先排除这种，因为他的易用性是最差的；其次，MediaRecorder也是需要排除的，所以在这里我比较推荐MediaCodec+MediaMuxer这种方式。

四、编码器参数

码率：数据传输时单位时间传送的数据位数，kbps：千位每秒。码率和质量成正比，也和文件体积成正比。码率超过一定数值，对图像的质量没有多大的影响。

帧数：每秒显示多少个画面，fps

关键帧间隔：在H.264编码中，编码后输出的压缩图像数据有多种，可以简单的分为关键帧和非关键帧。关键帧能够进行独立解码，看成是一个图像经过压缩的产物。而非关键帧包含了与其他帧的“差异”信息，也可以称呼为“参考帧”，它的解码需要参考关键帧才能够解码出一个图像。非关键帧拥有更高的压缩率。

五、MediaCodec+MediaMuxer的使用

MediaMuxer和MediaCodec这两个类，它们的参考文http://developer.android.com/reference/android/media/MediaMuxer.html和http://developer.android.com/reference/android/media/MediaCodec.html，里边有使用的框架。这个组合可以实现很多功能，比如音视频文件的编辑（结合MediaExtractor），用OpenGL绘制Surface并生成mp4文件，屏幕录像以及类似Camera app里的录像功能（虽然这个用MediaRecorder更合适）等。

它们一个是生成视频，一个生成音频，这里把它们结合一下，同时生成音频和视频。基本框架和流程如下：

首先是录音线程，主要参考HWEncoderExperiments。通过AudioRecord类接收来自麦克风的采样数据，然后丢给Encoder准备编码：

AudioRecord audio_recorder; 
audio_recorder = new AudioRecord(MediaRecorder.AudioSource.MIC, 
SAMPLE_RATE, CHANNEL_CONFIG, AUDIO_FORMAT, buffer_size); 
// … 
audio_recorder.startRecording(); 
while (is_recording) { 
byte[] this_buffer = new byte[frame_buffer_size]; 
read_result = audio_recorder.read(this_buffer, 0, frame_buffer_size); // read audio raw data 
// … 
presentationTimeStamp = System.nanoTime() / 1000; 
audioEncoder.offerAudioEncoder(this_buffer.clone(), presentationTimeStamp); // feed to audio encoder

}

这里也可以设置AudioRecord的回调（通过setRecordPositionUpdateListener()）来触发音频数据的读取。offerAudioEncoder()里主要是把audio采样数据送入音频MediaCodec的InputBuffer进行编码：

ByteBuffer[] inputBuffers = mAudioEncoder.getInputBuffers(); 
int inputBufferIndex = mAudioEncoder.dequeueInputBuffer(-1); 
if (inputBufferIndex >= 0) { 
ByteBuffer inputBuffer = inputBuffers[inputBufferIndex]; 
inputBuffer.clear(); 
inputBuffer.put(this_buffer); 
… 
mAudioEncoder.queueInputBuffer(inputBufferIndex, 0, this_buffer.length, presentationTimeStamp, 0); 
}

下面，参考Grafika-SoftInputSurfaceActivity，并加入音频处理。主循环大体分四部分：

try { 
// Part 1 
prepareEncoder(outputFile); 
… 
// Part 2 
for (int i = 0; i < NUM_FRAMES; i++) { 
generateFrame(i); 
drainVideoEncoder(false); 
drainAudioEncoder(false); 
}

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数初中级安卓工程师，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新Android移动开发全套学习资料》送给大家，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频
如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注Android）

总结

作为一名从事Android的开发者，很多人最近都在和我吐槽Android是不是快要凉了？而在我看来这正是市场成熟的表现，所有的市场都是温水煮青蛙，永远会淘汰掉不愿意学习改变，安于现状的那批人，希望所有的人能在大浪淘沙中留下来，因为对于市场的逐渐成熟，平凡并不是我们唯一的答案！
在最后我整理了一份资料，而且我们为了感谢很多支持的学者，资料是无偿分享的，需要的同学可以来学习学习
领取方式：GitHub地址

.net/topics/618156601)**
[外链图片转存中…(img-MpyVAk95-1710688617768)]
[外链图片转存中…(img-oOiglGuA-1710688617768)]