Fmod studio 获取spectrum波谱数据

最近项目需要做口形识别时,需要提取语音的波形数据,由于项目使用Unity+ Fmond studio,故找了找相关的API。

参考代码:

开始时初始化:RuntimeManager.cs

public FMOD.DSP m_FFTDsp;

public const int WindowSize = 1024;

FMOD.ChannelGroup master;

lowlevelSystem.getMasterChannelGroup(out master);

master.addDSP(FMOD.CHANNELCONTROL_DSP_INDEX.HEAD, m_FFTDsp);


播放声音时:

public float[] SpectrumData

{

get

{

uint spectrumLen;

IntPtr unmanagedData; FMODUnity.RuntimeManager.Instance.m_FFTDsp.getParameterData((int)FMOD.DSP_FFT.SPECTRUMDATA, out unmanagedData, out spectrumLen);

FMOD.DSP_PARAMETER_FFT fftData = (FMOD.DSP_PARAMETER_FFT)Marshal.PtrToStructure(unmanagedData, typeof(FMOD.DSP_PARAMETER_FFT));

var spectrum = fftData.spectrum;


if (fftData.numchannels > 0)

{

return spectrum[0]; //返回的是第0声道的数据

}

return null;

}

}


这样的方案有个不足,那就是会引起内存的频繁的GC。参考Fmod studio官方的代码: fomd_dsp.cs

Fmod studio 获取spectrum波谱数据 - 山顶的微风 - 山顶的微风

其中的一个解决方案,是使用静态变量,来处理,由于本文只需取0声道的数据,故可以改成:

public static readonly int BUFFSIZE = 2048;

        public static float[] bufferData = new float[BUFFSIZE]; //使用静态变量,防止内存频繁g c

        public float[] GetSpectrumData()

        {

            Array.Clear(bufferData, 0, BUFFSIZE);

            Marshal.Copy(spectrum_internal[0], bufferData, 0, length);


            return bufferData;

        } 


boluns

20160905



  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值