Android音视频(二)音频AudioRecord和AudioTrack

Android音视频(一) Camera2 API采集数据

AudioRecord和AudioTrack是Android系统提供的用于实现录音、播放音频的功能类,使用这两个类做音频的采集与播放还是非常简单的。

AudioRecord

private void startRecorder() {
        try {
            // 1、输出pcm文件
            mAudioFile = new File(Environment.getExternalStorageDirectory().getAbsolutePath() + "/RecorderTest/" +
                    System.currentTimeMillis() + ".pcm");
            mAudioFile.getParentFile().mkdirs();
            mAudioFile.createNewFile();
            mFileOutputStream = new FileOutputStream(mAudioFile);

            // 2、配置AudioRecord
              // 声音来源
            int audioSource = MediaRecorder.AudioSource.MIC;
              // 采样率 Hz
            int sampleRate = 44100;
              // 音频通道的配置 MONO 单声道
            int channelConfig = AudioFormat.CHANNEL_IN_MONO;
              // 返回音频数据的格式 
            int audioFormat = AudioFormat.ENCODING_PCM_16BIT;
              //AudioRecord能接受的最小的buffer大小
            int minBufferSize = AudioRecord.getMinBufferSize(sampleRate, channelConfig, audioFormat);
            mAudioRecorder = new AudioRecord(audioSource, sampleRate, channelConfig,
                    audioFormat, Math.max(minBufferSize, 2048));
            
            // 3、开始录音
            mAudioRecorder.startRecording();

            
            // 4、一边从AudioRecord中读取声音数据到初始化的buffer,一边将buffer中数据导入数据流,写入文件中
            while (mIsRecording) { // 标志位,是否停止录音
                int read = mAudioRecorder.read(mBuffer, 0, 2048);
                if (read > 0) {
                    mFileOutputStream.write(mBuffer, 0, read);
                    // 也可以在这里对音频数据进行处理,压缩、直播等
                } 
            }
            
            // 5、停止录音,释放资源
            mAudioRecorder.stop();
            mAudioRecorder.release();
            mAudioRecorder = null;
            mFileOutputStream.close();

        } catch (IOException | RuntimeException e) {
            e.printStackTrace();
        } finally {
            if (mAudioRecorder != null) {
                mAudioRecorder.release();
                mAudioRecorder = null;
            }
        }
    }

MediaRecorder 和 AudioRecord

Android SDK 中有两套音频采集的API,分别是:MediaRecorder 和 AudioRecord。

  1. MediaRecorder是一个更加上层一点的API,它可以直接把手机麦克风录入的音频数据进行编码压缩(如AMR、MP3等)并存成文件
  2. AudioRecord则更接近底层,能够更加自由灵活地控制,可以得到原始的一帧帧PCM音频数据。

如果只是想简单地做一个录音机,录制音频文件,就使用 MediaRecorder,而如果需要对音频做进一步的算法处理、或者采用第三方的编码库进行压缩、以及网络传输、直播等应用,则建议使用 AudioRecord。

AudioTrack

private void doPaly(File mAudioFile) {
        // 音频流的类型
        // STREAM_ALARM:警告声 
        // STREAM_MUSIC:音乐声
        // STREAM_RING:铃声
        // STREAM_SYSTEM:系统声音,例如低电提示音,锁屏音等
        // STREAM_VOCIE_CALL:通话声
        int streamType = AudioManager.STREAM_MUSIC;
    
        // 采样率 Hz
        int sampleRate = 44100;
        // 单声道
        int channelConfig = AudioFormat.CHANNEL_OUT_MONO;
        
        // 音频数据表示的格式
        int audioFormat = AudioFormat.ENCODING_PCM_16BIT;
    
        // MODE_STREAM:在这种模式下,通过write一次次把音频数据写到AudioTrack中。这和平时通过
        // write系统调用往文件中写数据类似,但这种工作方式每次都需要把数据从用户提供的Buffer中拷贝到
        // AudioTrack内部的Buffer中,这在一定程度上会使引入延时。为解决这一问题,AudioTrack就引入
        // 了第二种模式。
    
        // MODE_STATIC:这种模式下,在play之前只需要把所有数据通过一次write调用传递到AudioTrack
        // 中的内部缓冲区,后续就不必再传递数据了。这种模式适用于像铃声这种内存占用量较小,延时要求较
        // 高的文件。但它也有一个缺点,就是一次write的数据不能太多,否则系统无法分配足够的内存来存储
        // 全部数据。
        int mode = AudioTrack.MODE_STREAM;

        int minBufferSize = AudioTrack.getMinBufferSize(sampleRate, channelConfig, audioFormat);

        AudioTrack audioTrack = new AudioTrack(streamType, sampleRate, channelConfig, audioFormat, Math.max(minBufferSize, 2048), mode);

        FileInputStream mFileInputStream = null;
        try {
            mFileInputStream = new FileInputStream(mAudioFile);
            int read;
            audioTrack.play();
            while ((read = mFileInputStream.read(mBuffer)) > 0) {
                int ret = audioTrack.write(mBuffer, 0, read);
                switch (ret) {
                    case AudioTrack.ERROR_BAD_VALUE:
                    case AudioTrack.ERROR_INVALID_OPERATION:
                    case AudioManager.ERROR_DEAD_OBJECT:
                        palyFaile();
                        break;
                    default:
                        break;
                }
            }
        } catch (RuntimeException | IOException e) {
            e.printStackTrace();
            palyFaile();
        } finally {
            mIsPalying = false;
            if (mFileInputStream != null) {
                closeQuietly(mFileInputStream);
            }
            audioTrack.stop();
            audioTrack.release();
        }
    }

AudioTrack 与 MediaPlayer

在Android中播放声音也是有两套API:MediaPlayer和AudioTrack,两者还是有很大的区别的。

  1. MediaPlayer可以播放多种格式的声音文件,例如MP3,AAC,WAV,OGG,MIDI等。MediaPlayer会在framework层创建对应的音频解码器。
  2. AudioTrack只能播放已经解码的PCM流,如不需要解码的wav文件。

MediaPlayer在framework层还是会创建AudioTrack,把解码后的PCM数流传递给AudioTrack,AudioTrack再传递给AudioFlinger进行混音,然后才传递给硬件播放,所以是MediaPlayer包含了AudioTrack。

Demo

作者:MzDavid
原文 Android音视频(二)音频AudioRecord和AudioTrack - 掘金

★文末名片可以免费领取音视频开发学习资料,内容包括(FFmpeg ,webRTC ,rtmp ,hls ,rtsp ,ffplay ,srs)以及音视频学习路线图等等。

见下方!↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓

 

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要实现web android语音,您可以按照以下步骤进行操作: 1. 在Android端,您可以使用AudioRecord类来录制音频数据,并使用WebSocket将其实时传输到服务器。您需要设置采样率、声道数等参数,并将录制的音频数据转换为字节数组。然后,您可以使用OkHttp或Java-WebSocket等库来实现WebSocket连接,并将字节数组发送到服务器。 2. 在服务器端,您需要解码接收到的字节数组,并将其转换为音频数据。您可以使用Java Sound API或其他音频处理库来实现。然后,您可以使用WebSocket将处理后的音频数据实时发送回客户端。 3. 在web端,您可以使用WebRTC或其他音视频通信库来实现语音通话。您需要创建一个音频流,并将其连接到服务器端的WebSocket,以接收实时音频数据。然后,您可以使用AudioContext和MediaStream等API来播放接收到的音频流。 4. 在Android端和web端,您可以使用AudioTrack类来播放音频数据。Android端的AudioTrack可以直接播放从服务器接收到的音频数据,而web端的AudioTrack可以播放通过WebRTC接收到的音频数据。 5. 对于后端,您可以使用Spring Boot框架来搭建WebSocket服务器,并使用Spring WebSocket API来实现WebSocket连接和消息处理。您需要定义一个WebSocketHandler类来处理接收到的音频数据,并将其发送到连接的客户端。 需要注意的是,实现语音通话需要考虑网络延迟和带宽等问题。您可以设置合适的传输速率和压缩算法来优化传输效率,同时使用QoS技术来保证语音通话的质量。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值