[Android][MediaRecorder] Android MediaRecorder框架简洁梳理

最新推荐文章于 2024-07-29 07:41:07 发布
最新推荐文章于 2024-07-29 07:41:07 发布
阅读量6.7k 收藏 85
点赞数 26
分类专栏： android_framework
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/TaylorPotter/article/details/104878815
版权

Android MediaRecorder框架简洁梳理

(Base on Android Q)
主要是为了梳理MediaRecorder模块代码,熟悉流程
本文的简化图由draw.io绘制,详细时序图由plantUml绘制
绘制原材料在百度云盘中 链接: https://pan.baidu.com/s/1IJ7Qo2Jl3o6GthPtAiD95Q 提取码: qu4w
,可以自行down下来修改添加

一.MediaRecorder整体架构

主要简单梳理数据流向,方便复习记忆

1.1 MediaRecorder录制数据流框架

在这里插入图片描述
简单过程:
1.Camera应用中至少有两个Surface,一个使用于preview的,另一个使用来record的,record的surface是PersistentSurface类型,PersistentSurface中的GraphicBufferSource类型的成员变量mBufferSource最终由编码器创建引用;
2.CameraServer中持有Record Surface的producer引用和Preview Surface的producer引用,因此预览和录制CameraServer都充当着生产者的角色;
3.在向CameraProvider发request的时候先dequeueBuffer送至HAL去填充,填充完HAL发回result这时queueBuffer将数据填充至BufferQueue中,由BufferQueue的原理,可知这时候BufferQueue的Consumer将回调onFrameAvailable函数去收到数据准备完成通知,接下来Consumer使用acquireBuffer去消费即可,消费完即releaseBuffer去释放Buffer;
4.对于preview,消费者就是Surfaceflinger了,合成消费后拿去显示,对于record,消费者就是编码器了,举例OMX一种,编码器获取到数据消费用于编码;
5.编码器编完码之后将调用Framework中MediaServer的回调,将编码后的数据传递至MediaRecorder;
6.MediaRecorder在start之后将启动一个WriteThread,两个TrackThread(分别是Video和Audio),当TrackThread跟踪到有相应数据后将video或audio的数据分装成Chunk数据结构,保存在MPEG4Writer成员变量mChunks中.这时WriteThread发现有数据可写会将mChunks中的chunk写到文件中.

1.2 PersistentSurface及GraphicBufferSource实现的BufferQueue框架

在这里插入图片描述
1.CameraApp使用的Java层PersistentSurface继承Java层的Surface,因此它首先是个Surface,其次他一个成员变量指向Native层的 PersistentSurface 实例对象,也指向Natvie层创建的Surface对象;
2.Surface一般用来作为生产者的容器,这里一样,Java PersistentSurface的 natvie Surface给到CameraServer用于生产数据容器,Producer是CameraServer;
3.Native PersistentSurface的两个参数mBufferProducer和mBufferSource最终是由编码器创建,其mBufferProducer指向CameraServer中的Record Surface,mBufferSource作为消费者引用在编码器内部实现,mBufferSource是GraphicBufferSource类型,在其走在构造函数时会创建BufferQueue;
4.mBufferSource应是指向引用编码器内部的数据结构或实例,Acodec可以通过GraphicBufferSource类型的成员变量(由PersistentSurface的mBufferSource赋值来)对编码器进行一些参数设置.

1.3 写文件的过程及重要类

在这里插入图片描述

二.MediaRecorder init,prepare,start,stop简单过程

上面已经将重要过程过基本讲述了完了,下面是简单地梳理MediaRecorder的代码过程,文末将附上详细的代码跟进过程,简化图为了方便记忆主要过程,都基于详细代码跟进之后归纳重点的地方.

2.1 MediaRecorder init

在这里插入图片描述
详细过程见附件,其中附上PersistentSurface的创建及设置详细过程

2.2 MediaRecorder prepare

在这里插入图片描述
MediaCodecSource 即对应videoEncoder和audioEncoder的初始化:
在这里插入图片描述
prepare的详细过程见附件.

2.3 MediaRecorder start

在这里插入图片描述
MediaRecord Start 与编码器数据传递至recorder的详细过程见附件

2.4 MediaRecorder stop

在这里插入图片描述

三.MediaRecorder 代码详细跟进

3.1 MediaRecorder init flow

在这里插入图片描述

3.2 PersistentSurface init and setInputSurface flow

在这里插入图片描述

3.3 PersistentSurface prepare flow

在这里插入图片描述

3.4 MediaRecorder start flow

在这里插入图片描述

3.5 MediaRecorder Buffer Callback from OMX to MediaRecorder

在这里插入图片描述

3.6 MediaRecorder stop flow

在这里插入图片描述

【一】Android MediaRecorder整体架构源码浅析
CloverLHao的博客
12-09 3559
资料：本文基于android 7.1.2 版本源码分析。 功能：MediaRecorder即可以录制音频，也可以录制视频。 一、 MediaRecorder整体框架图 1.1、 MediaRecorder整体层级关系图 – 各个具体类之间的依赖关系图： 概要总结： 如上在运行时，整个MediaRecorder大致上可以分为Client和Server两个部分，分别在两个进程中运行，它们之间使用Binder机制实现IPC通信。 MediaPlayerService是多媒体框架中非常重要的一个服务，从框架图中可以
Android Camera 架构
2401_86391954的博客
09-04 1964
应用开发者调用AOSP提供的接口即可,AOSP的接口即Android提供的相机应用的通用接口,这些接口将通过Binder与Framework层的相机服务进行操作与数据传递;位于,相机Framework服务是承上启下的作用,上与应用交互,下与HAL曾交互。硬件抽象层,Android 定义好了Framework服务与HAL层通信的协议及接口,HAL层如何实现有各个Vendor自己实现,如Qcom的老架构mm-Camera,新架构Camx架构,Mtk的P之后的Hal3架构.
Android mediaRecorder框架简述(一)
Android进阶三部曲 - 刘望舒
12-10 8950
下面是框架简图： 首先调用mediaRecorder.java中的方法比如start方法，会调用jni： 也就是调用android_media_recorder.cpp的start方法：  接着到mediaRecorder.cpp,mediaRecorder是由mediaplayerService创建的,而mediaRecoder.cpp和mediap
Android的MediaRecorder架构介绍
12-29 5591
<br />本帖最后由 guannameduo 于 2009-7-11 18:07 编辑<br /><br />第一部分 MediaRecorder概述<br />Android的MediaRecorder包含了Audio和video的记录功能，在Android的界面上，Music和Video两个应用程序都是调用MediaRecorder实现的。<br />MediaRecorder在底层是基于OpenCore(PacketVideo)的库实现的，为了构建一个MediaRecorder程序，上层还包含了进程
Android mediaRecorder框架简述(二)
Android进阶三部曲 - 刘望舒
12-10 6111
这里有个setupVideiEncoder,看来这里应该是对视频编码的地方 根据不同的编码类型来设置不同的参数，这个方法代码有些多直截取部分代码： 来看看关键的一句，这里创建了OMXCodec 然后把创建了的编码器赋值给MediaSource，这里的MediaSource可以看作是OMXCodec的封装,这样编码器的准备工作就已经做好了： 接着我们回到startMPEG4Recor
Android Camera简单整理(一)-Camera Android架构(基于Q)
arvin_xiong的博客
06-30 2032
Camera整体架构简单整理一.Android Camera整体架构简述1.1 Android Camera 基本分层1.2 Android Camera工作大体流程二. Camera App层简述三. Camera Framework层简述3.1 CameraServer初始化3.2 App调用CameraServer的相关操作四 Camera Hal3 子系统五. 下面需要梳理的重点-正在进行。
一，视频录制MediaRecorder类调用参数详解
tunmengsmile的博客
09-02 4695
一. 类概述： 用于录制音频和视频的一个类。 二. 状态图如下： MediaRecorder的各个状态的介绍： Initial： 初始状态，当使用new()方法创建一个MediaRecorder对象或者调用了 reset()方法时 该MediaRecorder对象处于Initial状态。在设定视频源或者音频源之后将转换为Initialized状态。另 外，在除Released状态外的其它状态通过调用reset()方法都可以使MediaRecorder进入该状态。 Initialized: 已初始化状态，可
Android Camera 架构好文推荐
程序员Android
07-29 648
和你一起终身学习，这里是程序员Android经典好文推荐，通过阅读本文，您将收获以下知识点:一、Android Camera整体架构简述1.1 Android Camera 基本分层1.2 Android Camera工作大体流程二、 Camera App层简述三、Camera Framework层简述3.1 CameraServer初始化3.2 App调用CameraServer的相关操作3.2...
Android使用MediaRecorder实现录像功能
08-30
主要为大家详细介绍了Android使用MediaRecorder实现录像功能，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
MediaRecorder视频录制
12-14
视频录制，后台视频录制源码，在AndroidStudio 下运行
Android MediaRecorder 架构分析(PPT)
07-08
我自己学习的过程中对Android Mediarecorder 架构的认识, 只写到了PVMediaRecorder.若有什么不对的地方,欢迎指教:)
Android MediaRecorder系统结构
omnispace的博客
04-15 1146
前面有分析过Camera的实现，现在来看看MediaRecorder的实现，这里我不会太去关注它的分层结构，我更关注它的逻辑！ APP层 /path/to/aosp/frameworks/base/media/java/android/media/MediaRecorder.java JNI层 /path/to/aosp/frameworks/base/media/jni/android_me
Android MediaRecorder架构详解
omnispace的博客
10-28 2666
1. 简介 在android中录制音频有两种方式，MediaRecorder和AudioRecord。两者的区别如下： (1) MediaRecorder 简单方便，不需要理会中间录制过程，结束录制后可以直接得到音频文件进行播放；录制的音频文件是经过压缩的，需要设置编码器；录制的音频文件可以用系统自带的播放器播放。 (2) AudioRecorder 在声音录制过程中
AndroidMediaRecorder架构详解
phoebe的专栏
03-27 8987
AndroidMediaRecorder架构详解 通过对android mediarecorder架构的详解，了解各模块调用的流程，不仅可以实现在应用层调用录音接口进行录音，还能直接调用libraries层录音接口函数进行C层录音。同时，若需要监控录音，则可以Hook系统进程/system/bin/mediaserver的ioctl函数，从而拦截该进程的binder通信过程，通过解析binder通信数据包，就可以监控到手机中所有录音软件的录音行为。
MediaRecorder
itheimach的专栏
11-05 483
MediaRecorderUsed to record audio and video.用来音视频的录制与播放，状态图如下：A common case of using MediaRecorder to record audio works as follows，使用流程如下： // initial MediaRecorder recorder = new MediaRecorder(); //
【二】Android MediaRecorder C++底层架构音视频处理过程和音视频同步源码分析
CloverLHao的博客
12-09 2847
注：基于Android 8.1.0源码版本分析，主要是从分析C++层StageFright框架层的StageFrightRecorder类展开的，并且只分析关键相关问题的源码，其他调用和执行流程可参考上次的《MediaRecorder整体架构浅析》【Android 7.1.2源码版本】。 一、 MediaRecorder音视频处理过程（包括了编码处理过程） 音视频处理过程图 详细分析在下文第3中。 2. 音视频Puller处理过程图 详细分析在下文第3中。 3. 音视频处理过程源码分析 （一）、先找
【四】Android MediaRecorder C++底层架构音视频处理过程和音视频同步源码分析
CloverLHao的博客
12-09 1480
分析此前未分析完的queue->pushBuffer(mbuf);： 首先分析queue变量的来历：Mutexed::Locked queue(mQueue); 因此其实就是加锁后的mQueue变量，而该变量就是Queue类型的数据： 如下结构： struct Queue { Queue() : mReadPendingSince(0), mPaused(false), mPulling(false) {
回溯法的代码模版c语言
最新发布
03-27
### Backtracking Algorithm Code Template in C Language Below is a general backtracking algorithm template implemented in the C programming language. This implementation can be adapted for various problems such as solving puzzles, generating permutations, or finding subsets. ```c #include <stdio.h> #include <stdbool.h> #define MAX_SIZE 100 // Function prototype declarations bool isValid(int step); void processSolution(); void backtrack(int step); int n; // Size of the problem int solution[MAX_SIZE]; // Array to store current partial solutions // Main function that initializes variables and starts the recursion void solveBacktrackingProblem(int size) { n = size; int step = 0; // Start from the first step backtrack(step); // Begin the recursive backtracking process } // Recursive backtracking function void backtrack(int step) { if (step == n) { // Base case: If all steps are completed processSolution(); // Process the final valid solution } else { for (int i = 0; i < n; ++i) { // Iterate through possible choices at this step solution[step] = i; // Make a choice if (isValid(step)) { // Check if the current state is valid backtrack(step + 1); // Recur with next step } } } } // Placeholder function to check validity of the current configuration bool isValid(int step) { // Add specific validation logic here based on your problem requirements. return true; // For now, assume everything is valid } // Placeholder function to handle processing when a full solution is found void processSolution() { printf("Found Solution:\n"); for (int i = 0; i < n; ++i) { printf("%d ", solution[i]); } printf("\n"); } ``` This generic backtracking framework includes placeholders (`processSolution` and `isValid`) where you would insert custom logic depending on the particular problem being solved. The example demonstrates how to recursively explore potential configurations while pruning invalid ones early using constraints defined within `isValid`. For instance, consider applying it towards generating all unique binary strings of length N by modifying these helper functions accordingly: #### Example Application – Generating Binary Strings Using Backtrack Methodology Modify the above program slightly so each position has only two options—either '0' or '1'. Update both utility methods thusly: ```c bool isValid(int step){ /* No additional checks needed since every assignment will result into either zero or one */ return true ; } void processSolution(){ char str[n+1]; memset(str,' ',sizeof(char)*(n)); for(int idx=0 ;idx<n;++idx ){ str[idx]=(solution[idx]==0)?’0’:’1'; } str[n]='\0'; // Null terminate string after filling characters up until index ‘n-1' puts(str); } ``` Now calling `solveBacktrackingProblem(3)` generates outputs like `"000", "001", ..., "111"` representing all combinations exhaustively explored via depth-first traversal strategy inherent inside our generalized approach presented earlier. ---
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值