关于
AudioQueue
的录音和播放,都使用了
3缓存
机制,这样避免资源开销,内存分配,循环使用该
3个buffer
即可。
对于AudioQueue的录音,一般只需要了解如下:
- 如何初始化
- 如何开始,暂停,结束
- 如何配置录音参数
- 如何获取录音数据
- 如何处理异常状况
一般来说一个模块都需要初始化,音频初始化则需要配置
采样率 通道数
以及格式,使用AudioStreamBasicDescription
来配置
思维流程
- 设置好参数信息,这样
AudioQueue
就知道我们需要什么样的数据了 - 创建
AudioQueue
实例并设置一个Record
回调,Record
回调会在录制到一帧声音之后返回 - 创建三个空
buffer
,并加入到AudioQueue
,我们重复利用这个三个buffer
,在录制的Record
回调返回后,会返回一个buffer
,同时这个buffer
会自动移出队列,我们拿到buffer中的数据后再讲其加入到队列中。 - 开始我们的录制,收到Record回调
参数配置以及初始化
_aqc.mDataFormat.mSampleRate = 16000.0; //采样率
_aqc.mDataFormat.mBitsPerChannel = 16; //在一个数据帧中,每个通道的样本数据的位数。
_aqc.mDataFormat.mChannelsPerFrame = 1; //每帧数据通道数
_aqc.mDataFormat.mFormatID = kAudioFormatLinearPCM; //数据格式 PCM or AAC ...
_aqc.mDataFormat.mFramesPerPacket = 1; //每包数据帧数
_aqc.mDataFormat.mBytesPerFrame = (_aqc.mDataFormat.mBitsPerChannel / 8) * _aqc.mDataFormat.mChannelsPerFrame;
_aqc.mDataFormat.mBytesPerPacket = _aqc.mDataFormat.mBytesPerFrame * _aqc.mDataFormat.mFramesPerPacket;
_aqc.mDataFormat.mFormatFlags = kLinearPCMFormatFlagIsSignedInteger | kLinearPCMFormatFlagIsPacked;
_aqc.frameSize = kFrameSize; //这里设置2048
//初始化,分别是参数、回调、self指针or this ,Null,Runloop模式,自动创建的队列
AudioQueueNewInput(&_aqc.mDataFormat, AQInputCallback, (__bridge void *)(self), NULL, kCFRunLoopCommonModes, 0, &_aqc.queue);
//这里分配三个缓存的内存并加入队列
for (int i=0; i<kNumberBuffers; i++)
{
AudioQueueAllocateBuffer(_aqc.queue, _aqc.frameSize, &_aqc.mBuffers[i]);
AudioQueueEnqueueBuffer(_aqc.queue, _aqc.mBuffers[i], 0, NULL);
}
_aqc.run = 1;
AudioQueueStart(_aqc.queue, NULL); //这里开始queue
这里或许有如下疑惑:
1.采样率是什么?
首先需要理解音频的量化:模拟信号
转数字信号
的过程
模拟信号就是波形线,我们需要将时间t=1s内的波形全部转为数字(数字信号),这样才能存储在内存中。举个栗子:即0.0001秒的波形值为1.4,0.0002秒的波形值为3.8,这个波形值的存储位数即为采样位深 mBitsPerChannel
。那么采样率就是采样的频率,即将1s划分为多少份来记录波形值。通常的采样率有16khz,44khz等等。
2.一帧数据是什么?
一帧数据,即将源音频文件划分多少帧,取其一帧或者几帧,通过包发出,所以一个数据包中可能有几帧。
一帧音频,可能是双通道,单通道,双通道对比单通道数据大小要乘以2
一帧PCM数据大小计算: PCM Buffersize=采样率 * 采样时间 * 采样位深/8 * 通道数(Bytes)
对于16khz采样率,单通道,采样位深16Bit
的1s音频大小为
16000x1x16/8 = 32000
字节
如果1s为30帧,即20ms一帧
则每帧的数据大小为32000/20=1600
字节。
所以在上方代码中,设置每帧大小kFrameSize=2048
,即32000/2048=15.625帧
,每秒至少要有16帧,才能满足。
开始暂停结束
AudioQueueStart(_aqc.queue, NULL); //这里开始queue
AudioQueuePause(_aqc.queue); //暂停
AudioQueueStop(_aqc.queue, true); //停止
结束的时候要注意释放相关资源:
if (status != noErr) {
for(int i = 0; i < kNumberBuffers; i++) {
AudioQueueFreeBuffer(_aqc.queue, _aqc.mBuffers[i]);
}
}
AudioQueueDispose(_aqc.queue, true);
数据处理
static void AQInputCallback (void * inUserData,
AudioQueueRef inAudioQueue,
AudioQueueBufferRef inBuffer,
const AudioTimeStamp * inStartTime,
UInt32 inNumPackets,
const AudioStreamPacketDescription * inPacketDesc