一文带你了解Android音频API

最新推荐文章于 2024-08-28 09:48:06 发布
最新推荐文章于 2024-08-28 09:48:06 发布
阅读量2.9k 收藏 21
点赞数 3
分类专栏： Android 文章标签： android 语音识别 java 经验分享 api
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_61845324/article/details/120308640
版权

Android系统提供了四个层面的音频API：

  1. Java层MediaRecorder&MediaPlayer系列；
  2. Java层AudioTrack&AudioRecorder系列；
  3. Jni层opensles；
  4. JNI层AAudio（Android O引入）

下面分别介绍这些API的使用及特点。

1. MediaRecorder&MediaPlayer

MediaRecorder与MediaPlayer并不能算完整意义的音频API，它们只是系统音频API的封装，除了采集/播放，他们集成了编码/解码、复用/解复用等能力。它们在最底层还是调用了AudioRecorder、AudioTrack。下面主要介绍它们的几个主要的配置项。

1.1 MediaRecorder

MediaRecorder因为已经集成了录音、压缩编码、封装复用等功能，所以使用起来相对比较简单。

MediaRecorder 使用起来相对简单，主要设置以下几项：

  1. 音源setAudioSource，系统提供的选项：
    1. AudioSource.DEFAULT：默认音频源；
    2. AudioSource.MIC：麦克风；
    3. AudioSource.VOICE_UPLINK：上行电话录音，android.Manifest.permission#CAPTURE_AUDIO_OUTPUT；
    4. AudioSource.VOICE_DOWNLINK：下行电话录音，android.Manifest.permission#CAPTURE_AUDIO_OUTPUT；
    5. AudioSource.VOICE_CALL：上下行电话录音，android.Manifest.permission#CAPTURE_AUDIO_OUTPUT；
    6. AudioSource.CAMCORDER：设定录音来源于同方向的相机麦克风相同，若相机无内置相机或无法识别，则使用预设的麦克风
    7. AudioSource.VOICE_RECOGNITION：用于语音识别；
    8. AudioSource.VOICE_COMMUNICATION：用于语音通话；
    9. AudioSource.UNPRECESSED：原始音频；
    10. AudioSource.VOICE_PERFORMANCE：低延迟用于满足实时音频处理；
    11. AudioSource.REMOTE_SUBMIX：用于传输系统混音的音频流到远端， android.Manifest.permission.CAPTURE_AUDIO_OUTPUT；
    12. AudioSource.ECHO_REFERENCE：回声抑制参考信号，SystemApi，android.Manifest.permission.CAPTURE_AUDIO_OUTPUT；
    13. AudioSource.RADIO_TUNER：电台广播声音，SystemApi；
    14. AudioSource.HOTWORD：抢占式的热词检测，SystemApi。
  2. 编码器setAudioEncoder
    1. Audio.Encoder.DEFAULT：
    2. Audio.Encoder.AMR_NB：
    3. Audio.Encoder.AMR_WB：
    4. Audio.Encoder.AAC：
    5. Audio.Encoder.HE_AAC：
    6. Audio.Encoder.AAC_ELD：4.1+
    7. Audio.Encoder.VORBIS：
    8. Audio.Encoder.OPUS：Android 10+
  3. 复用器setOutputFormat
    1. OutputFormat.DEFAULT
    2. OutputFormat.THREE_GPP：3GP；
    3. OutputFormat.MPEG_4：mp4；
    4. OutputFormat.RAW_AMR：.aac or .amr；
    5. OutputFormat.AMR_NB：amr nb；
    6. OutputFormat.AMR_WB：amr wb；
    7. OutputFormat.AAC_ADIF：aac adif；
    8. OutputFormat.AAC_ADTS：aac adts；
    9. OutputFormat.OUTPUT_FORMAT_RTP_AVP：网络流；
    10. OutputFormat.MPEG_2_TS：ts封装；
    11. OutputFormat.WEBM：webm 容器；
    12. OutputFormat.HEIF： heif容器；
    13. OutputFormat.OGG：ogg容器。
  4. 输出文件路径setOutputFile

示例代码：

MediaRecorder recorder = new MediaRecorder();
 recorder.setAudioSource(MediaRecorder.AudioSource.MIC);
 recorder.setOutputFormat(MediaRecorder.OutputFormat.THREE_GPP);
 recorder.setAudioEncoder(MediaRecorder.AudioEncoder.AMR_NB);
 recorder.setOutputFile(PATH_NAME);
 recorder.prepare();
 recorder.start();   // Recording is now started
 ...
 recorder.stop();
 recorder.reset();   // You can reuse the object by going back to setAudioSource() step
 recorder.release(); // Now the object cannot be reused

上面代码只是基本使用方式，具体使用还需结合项目具体需求制定具体逻辑，但是MediaRecorder使用时需实例化，所以在不用时一定要记得即时释放，以免造成内存泄漏。

MediaRecorder状态图：

一文带你了解Android音频API

总结：MediaRecorder 实现录音比较简单的，代码量相对较少，较为简明，但也有不足之处，例如输出文件格式选择较少，录音过程不能暂停等。

1.2 MediaPlayer

MediaPlayer使用示例：

MediaPlayer mediaPlayer = new MediaPlayer();
if (android.os.Build.VERSION.SDK_INT >= android.os.Build.VERSION_CODES.LOLLIPOP) {
      AudioAttributes audioAttributes = new AudioAttributes.Builder()
          .setUsage(AudioAttributes.USAGE_ALARM)
          .setContentType(AudioAttributes.CONTENT_TYPE_SPEECH)
          .build();
      mediaPlayer.setAudioAttributes(audioAttributes);
    } else {
      mediaPlayer.setAudioStreamType(AudioManager.STREAM_ALARM);
    }
mediaPlayer.reset();
mediaPlayer.setOnCompletionListener(new MediaPlayer.OnCompletionListener() {
          @Override
          public void onCompletion(MediaPlayer mp) {
            // 播放完成
          }
        });
mediaPlayer.setDataSource(path);
mediaPlayer.prepare();
mediaPlayer.start();
//or mediaPlayer.prepareAsync()并在setOnPreparedListener(android.media.MediaPlayer.OnPreparedListener)设置的回调中start

1.2.1 状态图：

一文带你了解Android音频API

1.2.2setAudioStreamType提供的选项：

  1. AudioSystem.STREAM_VOICE_CALL：电话通话；
  2. AudioSystem.STREAM_SYSTEM：系统声音；
  3. AudioSystem.STREAM_RING：电话响铃声；
  4. AudioSystem.STREAM_MUSIC：音乐播放；
  5. AudioSystem.STREAM_ALARM：闹钟；
  6. AudioSystem.STREAM_NOTIFICATION：通知

AudioAttributes用来替代stream types，它可以设置比stream types更多的属性，有三个方面：

  1. usage（why）：为什么要播放这个声音？
  2. content type（what）：播放的内容是什么？是可选项，有些usage，比如CONTENT_TYPE_MOVIE是movie usage。
  3. flags（how）：如何影响播放。

1.2.3 setDataSource说明

setDataSource设置播放源，可以是本地文件也可以是网络文件。如果是网络文件和本地比较大的文件，在主线程中调用prepare可能会导致ANR，所以尽量用prepareAsync，然后再onPrepared回调中调用start。

2. AudioRecorder&AudioTrack

2.1 AudioRecorder

AndioRecord 类的主要功能是让各种 Java 应用能够管理音频资源，以便它们通过此类能够录制平台的声音输入硬件所收集的声音。它的实现就是通过 "pulling 同步"（reading读取）AudioRecord 对象的声音数据来完成的。在录音过程中，应用所需要做的就是通过后面三个类方法中的一个去及时地获取 AudioRecord 对象的录音数据。 AudioRecord 类提供的三个获取声音数据的方法分别是 read(byte[], int, int), read(short[], int, int), read(ByteBuffer, int)。无论选择使用哪一个方法都必须事先设定方便用户的声音数据的存储格式。

开始录音的时候，一个 AudioRecord 需要初始化一个相关联的声音buffer，这个 buffer 主要是用来保存新的声音数据。这个 buffer 的大小，我们可以在对象构造期间去指定。它表明一个 AudioRecord 对象还没有被读取（同步）声音数据前能录多长的音(即一次可以录制的声音容量)。声音数据从音频硬件中被读出，数据大小不超过整个录音数据的大小（可以分多次读出），即每次读取初始化 buf

最低0.47元/天 解锁文章
码中之牛
关注
专栏目录
android之相机 VideoSource和AudioSource
qq_33201020的博客
02-22 1977
public class MediaRecoderActivity extends AppCompatActivity { private SurfaceView sv_recoder; private MediaRecorder mediaRecorder; @Override protected void onCreate(Bundle savedInsta
Android音频API介绍
轻口味的专栏
06-05 1176
Player:Recorder:更多API细节可以参考官方提供的《OpenSL_ES_Specification_1.0.1.pdf》。播放逻辑可参考oarplayer中的 https://github.com/qingkouwei/oarplayer/blob/master/oarplayer/src/main/cpp/oar_audio_player.c 音频输出代码。
Android回声消除
安卓开发&音视频开发
08-19 658
随着移动互联网的发展，语音通话、语音聊天、互动直播等应用越来越普及，这些应用中的回声问题成为影响用户体验的重要因素之一。回声，即用户在通话过程中听到自己声音的重复，是由于麦克风采集到了扬声器播放出的声音，再次通过网络发送给对方，形成回声循环。本文将详细介绍在Android平台上如何实现回声消除（Acoustic Echo Cancellation，简称AEC）。
Android音频API整理
hugang的博客
01-22 247
Android音频API 里面介绍了各种音频api的使用，还有性能优化的方法
Android深入浅出之Audio
forlong401的专栏--有问题上：http://www.androidren.com
11-01 6677
Android深入浅出之Audio 第一部分 AudioTrack分析 http://www.cnblogs.com/innost/archive/2011/01/09/1931457.html Android深入浅出之Audio 第二部分 AudioFlinger分析 http://www.cnblogs.com/innost/archive/2011/01/15/1936425.
android基础_音频播放API + 视频播放API +SurfaceView介绍
zengkaiqiang562的博客
08-12 2050
播放音频的API MediaPlayer MediaPlayer状态图解： 播放本地音乐： public void play(View v) { String path = et_path.getText().toString(); //1.判空操作，2，判断是否真的存在这个文件，有可能用户输入的是非法的文件路径 try { ...
安卓多媒体API——音频录制MediaRecorder
旧日灯塔
04-25 466
序 三分钟前了视频录制，实际上视频录制不是已经包括音频录制了吗？ https://blog.csdn.net/nishigesb123/article/details/89507576 但如果单独的想要录制一段语音该如何操作呢？（遮住摄像头，误） 比如像微信一样，录制一段指定时长的语音，这篇文章就记录了安卓中的音频录制。 归档到多媒体。 MediaRecorder 概述 andro...
一文带你了解适配Android 11分区存储
SOHU_TECH的博客
02-04 2750
本文字数：5037字预计阅读时间：35分钟分区存储概念为了让用户更好地控制自己的文件并减少混乱，Android 10针对应用推出的一个新的存储范例，新的存储模型会让以 Android 10...
android音频裁剪（2）——Wav裁剪
DaltSoftware的博客
05-09 3388
在android音频裁剪（1）——MP3裁剪一文中我分享了对mp3文件裁剪方法。在本文中我将分享对另外一种音频格式——wav格式音频的裁剪。不同于mp3格式的裁剪，对于wav裁剪并不是通过android提供的多媒体库对音频进行处理，而是直接通过java代码对wav音频进行裁剪，所以以下方法对于wav音频裁剪具有平台通用性。 俗话说的好，知己知彼，百战不殆，要对wav文件进行处理，首先要去详细了解w
一文读懂 Android FFmpeg 视频解码过程与实战分析
2401_84149836的博客
04-18 1155
使用返回视频媒体流下一帧到AVPacket中。如果函数返回的 int 值是 0 则是Success，如果小于 0 则是Error或者EOF。因此如果在播放视频时返回的是小于 0 的值，调用函数重置解码器的状态，flush 缓冲区中的内容，然后再 seek 到当前传入的时间戳处，完成解码后的回调，再让同步锁进行等待。// 读取码流中的音频若干帧或者视频一帧，// 这里是读取视频一帧（完整的一帧），获取的是一帧视频的压缩数据，接下来才能对其进行解码// 防止解最后一帧时视频已经没有数据。
android音频录制
06-19
目前，使用手机拍照、摄像几乎成了手机必备的功能。而Android系统的多媒体框架也为开发者提供了MediaRecorder类来实现视频录制功能。在使用MediaRecorder时我们要注意以下几点： 第一：无法使用模拟器进行测试，在使用MediaRecorder进行音视频录制时，需要用真机进行测试，模拟器不具备摄像头的功能。 第二：在要AndroidManifest.xml中添加音频录制和照相机权限，另外，我们采集的音视频最后是不是要保存到SDCard上呢，所以呢也要添加SDCard的读写权限
android usb audio class,USB 数字音频  |  Android 开源项目  |  Android Open Source Project...
weixin_42297665的博客
05-28 974
本文综述了 Android 对 USB 数字音频和相关 USB 协议的支持。目标读者本文的目标读者是 Android 设备原始设备制造商 (OEM)、SoC 供应商、USB 音频外设供应商、高级音频应用开发者以及希望详细了解 Android 上的 USB 数字音频内件的其他人士。Nexus 设备的最终用户则应该查看 Nexus 帮助中心内的使用 USB 主机模式录制和播放音频一文。虽然这篇文章并非...
Android-MediaRecorder之setAudioSource
cheriyou_的博客
04-20 3798
　　上一篇文章介绍了怎么通过MediaRecorderlu录制音频，详见(https://blog.csdn.net/cheriyou_/article/details/105544086 在创建MediaRecorder之后第一步就是设置AudioSource，那么audiosource具体是做什么用的？下面我们一步步分析。 1. 首先看看setAudioSource的过程 stat...
Android 音频基础（二）——录音（AudioRecord）
qq_34163551的博客
07-02 2176
在Android的世界中，一般有两种音频采集的方式，MediaRecorder和AudioRecord,但是MediaRecorder最终还是走到AudioRecord里，让AudioRecord和AudioFlinger进行交互，所以这篇博文就不介绍MediaRecoder了，主要介绍下AudioRecord的录音（音频采集）情况。 基本参数 1. ...
探秘Audio Source：将你的Android设备变成USB麦克风
gitblog_00052的博客
06-24 401
探秘Audio Source：将你的Android设备变成USB麦克风 audiosource:microphone: Use an Android device as a USB microphone项目地址:https://gitcode.com/gh_mirrors/au/audiosource 1、项目介绍 Audio Source是一个独特的开源项目，它能让你的Android设备变身...
探索音频新领域：Audio Source —— 将你的安卓设备变身高质量USB麦克风
最新发布
gitblog_00273的博客
08-28 317
探索音频新领域：Audio Source —— 将你的安卓设备变身高质量USB麦克风 audiosource:microphone: Use an Android device as a USB microphone项目地址:https://gitcode.com/gh_mirrors/au/audiosource 在寻找提升远程交流体验的创新方式吗？Audio Source项目为你打开了一个全...
android播放器开源项目,HwAudioSource 播放器
weixin_39707851的博客
05-26 421
HwAudioSource 将音频来源设备直接连接到 Android 混音器。动机在 Android 中使用设备到设备或硬件音频补丁程序时，可能会存在一些限制。这些限制会导致无法接收 PLAY、PAUSE 和 STOP 等媒体键事件，因为这些事件会绕过 Android 音频堆栈，因此需要配备硬件以将补丁程序混合到 Android 的其他音频中。使用 HwAudioSourceHwAudioSour...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值