speex前置处理

最新推荐文章于 2024-03-12 11:00:06 发布
最新推荐文章于 2024-03-12 11:00:06 发布
阅读量2.1k 收藏 2
点赞数
分类专栏： 音频编程

1.简介

语音在采集和传输过程中，由于语音源的差异、信道的衰减、噪声的干扰以及远近效应，导致信号幅度相差很大。所有在语音处理之前我们需要对语音数据进行前置处理，包括预处理（AGC、VAD、回音消除）、重采样和噪声抑制。

所有的代码都是基于speex开源库，具体内容可以参考http://speex.org/。

2.接口说明

预处理模块包括自动增益控制、静音检测和回音消除。以下是接口函数，具体参考speex\ speex_preprocess.h。

 

函数名称

功能简介

speex_preprocess_state_init

创建预处理器

speex_preprocess_state_destroy

销毁预处理器

speex_preprocess_run

处理一帧数据

speex_preprocess

处理一帧数据（废弃的）

speex_preprocess_estimate_update

更新预处理器

speex_preprocess_ctl

设置和读取预处理器的参数

 

2.1.1  speex_preprocess_state_init

函数原形

SpeexPreprocessState *speex_preprocess_state_init(int frame_size, int sampling_rate);

功能

创建预处理器

参数

Frmae_size   [in]每帧的大小（建议帧长为20ms）

Sample_rate  [in]采样率（支持8k、16k、44k）

返回值

成功返回预处理器指针，失败返回NULL

说明

加入是16k的语音数据，帧长20ms等于320个采样

 

2.1.2  speex_preprocess_state_destroy

函数原形

void speex_preprocess_state_destroy(SpeexPreprocessState *st);

功能

销毁预处理器

参数

St           [in]处理器指针

返回值

Void

说明

 

 

2.1.3  speex_preprocess_run

函数原形

int speex_preprocess_run(SpeexPreprocessState *st, spx_int16_t *x);

功能

处理一帧语音数据

参数

St           [in]处理器指针

X            [in|out]数据缓存，处理后的数据也存入该缓存中

返回值

如果VAD打开，返回值为1表示有语音，为0表示静音或者噪音

说明

 

 

2.1.4  speex_preprocess

函数原形

int speex_preprocess(SpeexPreprocessState *st, spx_int16_t *x, spx_int32_t *echo);

功能

处理一帧语音数据（废弃的函数，简介调用speex_preprocess_run）

参数

St           [in]处理器指针

X            [in|out]数据缓存，处理后的数据也存入该缓存中     

返回值

 

说明

 

 

2.1.5  speex_preprocess_estimate_update

函数原形

void speex_preprocess_estimate_update(SpeexPreprocessState *st, spx_int16_t *x);

功能

更新预处理器，不会计算输出语音

参数

St           [in]处理器指针

X            [in]数据缓存

返回值

Void

说明

 

 

2.1.6  speex_preprocess_ctl

函数原形

int speex_preprocess_ctl(SpeexPreprocessState *st, int request, void *ptr);

功能

设置预处理器的参数

参数

St           [in]处理器指针

Request      [in]参数的类型（由宏来代表不同的参数）

Ptr          [in|out]参数的值（设置参数时为in，获得参数参数时为out，这个由宏决定）

返回值

成功返回0，失败返回-1（表明未知的请求参数）

说明

以下数标识参数类型的宏

/** Set preprocessor denoiser state 降噪*/

#define SPEEX_PREPROCESS_SET_DENOISE 0

/** Get preprocessor denoiser state */

#define SPEEX_PREPROCESS_GET_DENOISE 1

 

/** Set preprocessor Automatic Gain Control state 自动增益控制 */

#define SPEEX_PREPROCESS_SET_AGC 2

/** Get preprocessor Automatic Gain Control state */

#define SPEEX_PREPROCESS_GET_AGC 3

 

/** Set preprocessor Voice Activity Detection state 静音检测 */

#define SPEEX_PREPROCESS_SET_VAD 4

/** Get preprocessor Voice Activity Detection state */

#define SPEEX_PREPROCESS_GET_VAD 5

 

/** Set preprocessor Automatic Gain Control level (float) */

#define SPEEX_PREPROCESS_SET_AGC_LEVEL 6

/** Get preprocessor Automatic Gain Control level (float) */

#define SPEEX_PREPROCESS_GET_AGC_LEVEL 7

 

/** Set preprocessor dereverb state */

#define SPEEX_PREPROCESS_SET_DEREVERB 8

/** Get preprocessor dereverb state */

#define SPEEX_PREPROCESS_GET_DEREVERB 9

 

/** Set preprocessor dereverb level */

#define SPEEX_PREPROCESS_SET_DEREVERB_LEVEL 10

/** Get preprocessor dereverb level */

#define SPEEX_PREPROCESS_GET_DEREVERB_LEVEL 11

 

/** Set preprocessor dereverb decay */

#define SPEEX_PREPROCESS_SET_DEREVERB_DECAY 12

/** Get preprocessor dereverb decay */

#define SPEEX_PREPROCESS_GET_DEREVERB_DECAY 13

 

/** Set probability required for the VAD to go from silence to voice */

#define SPEEX_PREPROCESS_SET_PROB_START 14

/** Get probability required for the VAD to go from silence to voice */

#define SPEEX_PREPROCESS_GET_PROB_START 15

 

/** Set probability required for the VAD to stay in the voice state (integer percent) */

#define SPEEX_PREPROCESS_SET_PROB_CONTINUE 16

/** Get probability required for the VAD to stay in the voice state (integer percent) */

#define SPEEX_PREPROCESS_GET_PROB_CONTINUE 17

 

/** Set maximum attenuation of the noise in dB (negative number) */

#define SPEEX_PREPROCESS_SET_NOISE_SUPPRESS 18

/** Get maximum attenuation of the noise in dB (negative number) */

#define SPEEX_PREPROCESS_GET_NOISE_SUPPRESS 19

 

/** Set maximum attenuation of the residual echo in dB (negative number) */

#define SPEEX_PREPROCESS_SET_ECHO_SUPPRESS 20

/** Get maximum attenuation of the residual echo in dB (negative number) */

#define SPEEX_PREPROCESS_GET_ECHO_SUPPRESS 21

 

/** Set maximum attenuation of the residual echo in dB when near end is active (negative number) */

#define SPEEX_PREPROCESS_SET_ECHO_SUPPRESS_ACTIVE 22

/** Get maximum attenuation of the residual echo in dB when near end is active (negative number) */

#define SPEEX_PREPROCESS_GET_ECHO_SUPPRESS_ACTIVE 23

 

/** Set the corresponding echo canceller state so that residual echo suppression can be performed (NULL for no residual echo suppression) 消除回声 */

#define SPEEX_PREPROCESS_SET_ECHO_STATE 24

/** Get the corresponding echo canceller state */

#define SPEEX_PREPROCESS_GET_ECHO_STATE 25

 

/** Set maximal gain increase in dB/second (int32) */

#define SPEEX_PREPROCESS_SET_AGC_INCREMENT 26

 

/** Get maximal gain increase in dB/second (int32) */

#define SPEEX_PREPROCESS_GET_AGC_INCREMENT 27

 

/** Set maximal gain decrease in dB/second (int32) */

#define SPEEX_PREPROCESS_SET_AGC_DECREMENT 28

 

/** Get maximal gain decrease in dB/second (int32) */

#define SPEEX_PREPROCESS_GET_AGC_DECREMENT 29

 

/** Set maximal gain in dB (int32) */

#define SPEEX_PREPROCESS_SET_AGC_MAX_GAIN 30

 

/** Get maximal gain in dB (int32) */

#define SPEEX_PREPROCESS_GET_AGC_MAX_GAIN 31

 

/*  Can't set loudness */

/** Get loudness */

#define SPEEX_PREPROCESS_GET_AGC_LOUDNESS 33

 

/*  Can't set gain */

/** Get current gain (int32 percent) */

#define SPEEX_PREPROCESS_GET_AGC_GAIN 35

 

/*  Can't set spectrum size */

/** Get spectrum size for power spectrum (int32) */

#define SPEEX_PREPROCESS_GET_PSD_SIZE 37

 

/*  Can't set power spectrum */

/** Get power spectrum (int32[] of squared values) */

#define SPEEX_PREPROCESS_GET_PSD 39

 

/*  Can't set noise size */

/** Get spectrum size for noise estimate (int32)  */

#define SPEEX_PREPROCESS_GET_NOISE_PSD_SIZE 41

 

/*  Can't set noise estimate */

/** Get noise estimate (int32[] of squared values) */

#define SPEEX_PREPROCESS_GET_NOISE_PSD 43

 

/* Can't set speech probability */

/** Get speech probability in last frame (int32).  */

#define SPEEX_PREPROCESS_GET_PROB 45

 

/** Set preprocessor Automatic Gain Control level (int32) */

#define SPEEX_PREPROCESS_SET_AGC_TARGET 46

/** Get preprocessor Automatic Gain Control level (int32) */

#define SPEEX_PREPROCESS_GET_AGC_TARGET 47

 

3.实例代码

3.1  AGC

#define NN 320

/*

    语音数据为单通道、16bit、16k

*/

int _tmain(int argc, _TCHAR* argv[])

{

 

     short in[NN];

     int i;

     SpeexPreprocessState *st;

     int count=0;

     float f;

 

     st = speex_preprocess_state_init(NN, 16000);

    

     i=1;

     speex_preprocess_ctl(st, SPEEX_PREPROCESS_SET_AGC, &i);

     f=16000;

     speex_preprocess_ctl(st, SPEEX_PREPROCESS_SET_AGC_LEVEL, &f);

 

 

     while (1)

     {

         int vad;

         fread(in, sizeof(short), NN, stdin);

         if (feof(stdin))

              break;

         vad = speex_preprocess_run(st, in);

         //fprintf (stderr, "%d\n", vad);

         fwrite(in, sizeof(short), NN, stdout);

         count++;

     }

     speex_preprocess_state_destroy(st);

 

     return 0;

}

 


玄岳
关注
专栏目录
语音的前置处理（一）
06-12 1344
语音的前置处理（一） 1.简介 语音在采集和传输过程中，由于语音源的差异、信道的衰减、噪声的干扰以及远近效应，导致信号幅度相差很大。所有在语音处理之前我们需要对语音数据进行前置处理，包括预处理（AGC、VAD、回音消除）、重采样和噪声抑制。 所有的代码都是基于speex开源库，具体内容可以参考http://speex.org/。 本开发手册暂时只提供AGC的接口和测试代码，
关于speex使用（入门笔记）
Zmn的博客
08-03 5766
未经本人允许禁止转载
Speex预处理器
charleslei的专栏
11-28 730
Speex预处理器
speex开源库之前置处理（preprocess）
Learn and live
07-23 4714
speex的预处理包括自动增益控制（AGC）、静音检测（VAD）、回声消除、重采样、噪声抑制。 开源库下载地址： http://speex.org/downloads/ API简介 常用API speex_preprocess_state_init 【功能】 预处理器初始化 【原型】 SpeexPreprocessState *speex_preprocess_sta
音频前处理：回声消除、噪声抑制等(音视频SDK高级功能六)
zego实时音视频
11-17 4515
音频前处理技术一般用于去除语音中的干扰。本篇文章介绍即构科技音视频SDK高级功能第六篇，ZegoLiveRoom SDK 为开发者提供了音频前处理的功能，还是以iOS环境为例。 关于如何使用SDK，请参照《SDK集成指引》。SDK 已经针对采集的音频数据进行了回声消除、噪声抑制等的处理，因此通常情况下，开发者无需再重复处理。如果开发者想对 SDK 采集的原始数据进行自定义处理，实现特殊功能(例如变...
linux运行speex,linux 用speex库压缩音频
weixin_34336068的博客
04-30 383
int sound::encode(){FILE *fin,*fout1,*fout2,*fout3;//三个文件指针，fin为已录制好的音频文件short in[FRAME_SIZE];short out[FRAME_SIZE];float input[FRAME_SIZE];float output[FRAME_SIZE];//设置几个缓冲区char cbits[200];int nbByte...
STM32F上SPEEX中文使用手册
07-21
语音采集使用微控制器内置的ADC，通常需要一个前置放大器连接麦克风。而语音播放则是通过微控制器内置的16位定时器实现PWM输出，经过低通滤波器去除高频成分后，再经过功率放大器驱动扬声器播放。 - **ADC**: STM32...
Speex 库在 STM32F103xxxSTM32F101xxx 上使用的应用笔记
06-21
- **音频输入**：声音信号通过前置放大器接入单片机的ADC模块，该模块负责将模拟信号转换为数字信号供后续处理。 - **音频输出**：数字信号经过Speex库处理后，由单片机的定时器配置成PWM信号输出。输出的PWM信号需...
PCM音频处理——使用WebRTC音频降噪模块与其他方式的对比
翻肚鱼儿的博客
08-11 6394
1.Speex音频降噪模块 相关文章链接：开源库Speex编解码，speex开源库分析（前置处理） Speex是很强大的编解码库，也包含一些降噪，自动增益，回音消除等模块功能，Speex是开源的，Opus是Speex的更优替代方案，但是Opus没有降噪去噪模块，就具体我所在公司，我们公司使用的是Speex编码，没有使用更新的Opus，经过实际实验，Speex的去噪效果有限，话不多说，上过程：部分代码： #define USE_SPEEX_DENOISE 0 class CHHAudioEncoder
speex开发
evsqiezi
08-19 2685
预处理模块包括自动增益控制、静音检测和回音消除。以下是接口函数，具体参考speex\ speex_preprocess.h。   函数名称 功能简介 speex_preprocess_state_init 创建预处理器 speex_preprocess_state_destroy 销毁预处理器
Speex手册中文版
03-16
Speex手册中文版。对于需要用speex库进行语音处理，回声消除，降噪的会是很好的帮助文档。
C#封装C++编写的Speex实现wav音频降噪(字节数组)
zxy13826134783的博客
05-23 1910
在上一篇博文https://blog.csdn.net/zxy13826134783/article/details/105882490的基础上进一步研究，上一篇博客后面使用C#调用Speex是以文件名的方式进行数据传输，明显是不符合远程传输的要求，要实现远程传输，Speex必须能处理音频的字节数组，本文正是基于这种方式进行实现 必须在阅读C#封装C++基础上进行本文后面的操作：https://blog.csdn.net/zxy13826134783/article/details/10595831.
speex噪音消除
Vincentywj的博客
10-20 3828
#ifdef HAVE_CONFIG_H #include "config.h" #endif#include "speex/speex_preprocess.h" #include <stdio.h>#define NN 160int main() { short in[NN]; int i; SpeexPreprocessState *st; int count=0;
php 调用speex解码库,android 用speex做回音消除
weixin_39993623的博客
04-02 226
Android回音消除困扰了我将近一个星期终于解决了。项目一边是使用Java FX的PC端，一边是Android设备进行实时语言通话。废话不多说直接上代码。 speex_jni.cpp#include #include #include #include #include #include #includeSpeexEchoState *st;SpeexPreprocessState *den;e...
speex库音频降噪(含代码)
若歌的博客
08-22 1992
speex库中音频降噪效果不错，应该是应用最广泛的吧，speex库下载地址https://www.speex.org/downloads/，可以直接下载二进制代码使用，像配置OpenCV一样配置speex库就可以了。speex库的API参考文档下载：http://download.csdn.net/detail/yizhaoyanbo/9856894。 贴出C语言实现的音频降噪代码如下。 ...
Speex 音频编解码
热门推荐
代码人生
08-26 2万+
// demo.cpp : Defines the entry point for the console application. // #include "stdafx.h" #include #include #include #define FRAME_SIZE 160 int main(int argc, char **argv) { char *inFile; FILE *fin,*fout1,*fout2; short in[FRAME
speexsdp消除回声
最新发布
hxchuan000的专栏
03-12 714
可以看头文件说明：配置frame_size贞大小10-20ms，filter_length滤波长度100-500ms。比如采样频率是16K，frame_size就是160-320，filter_length就是1600-8000。make && ./testecho 麦克输入.pcm 喇叭输出(远端传来的).pcm 消回声数据.pcm。filter_length调大，达到稳定时间越长。这是testecho.c样例的程序。
Speex回声消除
梅逊雪——记录科学研究
08-02 1726
AEC，回声消除老大难问题
使用speex对pcm,wav进行降噪处理
北雨南萍
10-24 7964
1. speex的降噪模块的简介 speex的语音处理模块要使用独立于 speex codec库的libspeexdsp 库。 这个分离的库是在1.2版本后实现； 它这库包括了： 预处理，回声消除，jitter buffer 和重采样模块； 在Unix/Linux环境下，使用 -lspeexdsp -lm 来编译和链接。   和libspeex一样，库libspeexdsp的库函数都是...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值