c#项目使用webrtc的降噪模块方法

最新推荐文章于 2023-02-27 10:21:12 发布
最新推荐文章于 2023-02-27 10:21:12 发布
阅读量1.2k 收藏 3
点赞数
分类专栏： 跨语言调用 文章标签： c# webrtc 语音降噪
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u014220286/article/details/88936005
版权
本文介绍了如何从webrtc中分离出语音降噪模块，使用cmake生成VS2017工程，并进行编译。接着在C#中调用编译得到的ns.exe进行语音降噪处理，提升语音识别性能。
摘要由CSDN通过智能技术生成

分离webrtc的降噪（Noise Suppression）部分

webrtc是Google开源的优秀音视频处理及传输代码库，其中包含了audio processing、video processing算法。语音降噪模块就包含在audio processing中。本文的降噪算法引用自https://github.com/cpuimage/WebRTC_NS，用c语言编写，需要编译成exe可执行程序供c#程序调用。

使用cmake生成vs2017工程

cmake是一款生成c/c++项目的工具，下载地址：https://cmake.org/download/。
https://github.com/cpuimage/WebRTC_NS源码中包含了cmake所需的CMakeLists.txt.使用cmake工具生成vs工程的时候有两个坑需要注意：

  • CMakeLists.txt的最后一句“target_link_libraries(ns m)”需要注释掉，否则会报link-error.
  • cmake生成的工程main.c编码为uft.因为源文件里边有汉字，需改变编码为GBK。改变编码的方法为在vs2017打开的工程中，点击“文件”下面的“高级保存选项”。如果没有“高级保存选项”的请百度如何调出。

编译c源程序

在vs2017中按f5编译源程序。生成完之后会

最低0.47元/天 解锁文章
tcl2014
关注
专栏目录
WebRTC AEC中的舒适噪声算法
学如不及,犹恐失之
07-07 168
在回声消除技术中，舒适噪声生成（Comfort Noise Generator, CNG）算法是一种常用方法，用于减轻回声消除过程中带来的不适感和声音失真。CNG通过添加特定的噪声信号，模拟人耳的听觉特性，提升声音的自然度和舒适度。CNG算法的基本原理是将噪声信号与回声消除处理后的信号混合，使得混合信号在听觉上更加自然和舒适。其步骤如下：首先进行背景噪声估计，然后根据估计的背景噪声功率生成随机噪声，最后对生成的噪声进行加权处理。
WebRtcVadSharp：用于WebRTC语音活动检测（VAD）组件的.NET标准接口
02-13
WebRtcVadSharp 语音活动检测（VAD）组件的.NET标准适配器。 WebRTC VAD使用来检测语音，通常比更常见的能量阈值模型更有效。 请参阅下面的简要概述，或访问Wiki获得更。 安装 WebRtcVadSharp在上可用： Install-Package WebRtcVadSharp 这将安装.NET标准适配器（WebRtcVadSharp.dll）和包含支持WebRTC算法的非托管库（WebRtcVad.dll）。 用法 在最简单的情况下，您只需要实例化一个对象并为它提供一个byte[]音频。 bool DoesFrameContainSpeech ( byte [] audioFrame ) { using var vad = new WebRtcVad (); return vad . HasSpeech ( audioFrame , Sample
单独编译和使用webrtc音频降噪模块(附完整源码+测试音频文件)
weixin_30699465的博客
05-08 414
单独编译和使用webrtc音频增益模块(附完整源码+测试音频文件) 单独编译和使用webrtc音频回声消除模块(附完整源码+测试音频文件) webrtc的音频处理模块分为降噪ns，回音消除aec，回声控制acem，音频增益agc，静音检测部分。另外webrtc已经封装好了一套音频处理模块APM，如果不是有特殊必要，使用者如果要用到回声消除等较为复杂的模块时，最好使用全部的音频处理模块...
使用谱减法对语音信号进行降噪(librosa),C#使用Speex
zxy13826134783的博客
05-01 4365
基本思想是把时域信号转换到频域进行处理，处理完毕后再转回时域信号，具体算法可以参考： https://blog.csdn.net/godloveyuxu/article/details/69225790 使用C#对语音信号降噪处理比较困难，查阅资料知道可以使用Webrtc或者speex进行降噪，不过核心思想都是把C++转成dll库供C#调用，由于对C++不是很熟悉，折腾了好久都没有实现，...
WebRtc服务搭建(一)
程序课代表的博客
09-13 4030
声明:本人使用的是腾讯云平台Ubuntu16.4 64系统，其他平台同理: 首先开放云服务器入队规则端口：3478、8080、8089、80、443,其中，3478端口UDP和TCP协议都需开放 搭建AppRTC 安装需要的各种工具(除了apt之外还可以下载安装包或者源码自己编译安装): 1、安装JDK apt update apt install openjdk-8-j...
WebRTC音频系统 音频发送和接收
shichaog的专栏
02-04 4444
在交互式实时通信场景中，实时通信音频数据的编码发送不同于直播场景 RTMP 之类的推流方案不同，实时通信的实时性优先，而直播场景的可靠性优先，因而实时通信场景上层一般采用UDP/RTP协议，而直播推流场景采用RTMP/TCP协议，实时通信的实时性优先，并不意味着质量要求不高，基于UDP传输的丢包、抖动乱序都会带来通信质量的下降，因而在接收端WebRTC采用了NetEQ技术，而在发送端则需要根据探测到的网络条件、接收端发回来的 RTCP 包来动态调整控制编码码率。创建并注册transport。
webrtc降噪和增益的部分代码
07-10
4. 文档：可能包含关于代码实现原理、使用方法和注意事项的说明。 通过阅读和理解这些代码，开发者可以学习如何在自己的WebRTC应用中集成类似的降噪和增益控制功能，从而提升用户体验。如果你想要深入了解这部分...
Unity语音+WebRtc降噪（含源码）
04-20
在这个项目中，WebRTC被用于降噪处理，这表明开发者可能使用了WebRTC的音频处理模块，如回声消除(AEC)、噪声抑制(NS)和自动增益控制(AGC)，以提升语音通话质量。 降噪是实时通信中一个关键的技术环节，尤其是在网络...
webrtc降噪流程图
02-25
WebRTC 降噪流程图 WebRTC 降噪流程图是基于谱减法和维纳滤波器的降噪算法，旨在消除语音信号中的噪声。整个流程图可以分为四个部分：信号分析、噪声估计和过滤、信号合成。 信号分析 在信号分析阶段，首先对输入...
webrtc降噪源码
11-15
下载别人的,用完了还是上传上去,帮助更多的人,积分也不要别人那么多
WebRtcDemo
07-11
最新编译的webrtc anroid demo ,音视频互通
C#语音通信开源框架，语音处理，杂音过滤。
01-28
C#语音通信开源框架，语音处理，杂音过滤，语音编码，支持大部分编码。支持回音处理，发现是最好的框架了，很多通信软件都用这个框架 NSpeex。找了很久啊，方便后来者工作学习。
音频降噪(android-webrtc-ns).zip
12-28
本项目专注于WebRTC中的噪声抑制（NS）模块，将它独立出来并编译为Android平台使用的SO库。下面我们将深入探讨这一技术。 首先，我们要理解什么是噪声抑制（Noise Suppression，简称NS）。在音频通信中，背景噪声是...
C#仿matlab函数进行语音降噪（有bug）
muyiliu的博客
02-27 519
前段时间接到一个项目：侦听调频广播，实现频谱、瀑布图显示，话音播放、存储及语音时域图绘制。其中，话音播放时感觉其噪声很大，必须对其降噪。在C#网上搜索了很多关于C#降噪的，没搜到。利用MATLAB编写降噪函数，并生成dll，但是发现调用Matlab的dll挺耗时的，所以不采用这种方式。于是我仿MATLAB降噪的函数，写出了C#版降噪函数。播放的话音明显实现了，但是其中有一个bug，就是降噪后会有哒哒哒的声音，找了好久没找到原因。如果能找出bug的兄弟，望告知一下。4.调用降噪处理函数。
C#实现卡尔曼滤波器去噪（简易版）
mingzhi_wu的博客
04-25 6626
基于.Net的C#实现卡尔曼滤波去噪
音频降噪算法 附完整C代码
weixin_34321753的博客
04-22 2930
降噪是音频图像算法中的必不可少的。 目的肯定是让图片或语音 更加自然平滑，简而言之，美化。 图像算法和音频算法都有其共通点。 图像是偏向空间处理，例如图片中的某个区域。 图像很多时候是以二维数据为主，矩形数据分布。 音频更偏向时间处理，例如语音中的某段时长。 音频一般是一维数据为主，单声道波长。 处理方式也是差不多，要不单通道处理，然后合并，或者直接多通道处理。 只是处理...
WebRTC 简单入门与实践
热门推荐
ZEGO即构科技
03-11 1万+
一、前言 WebRTC 技术已经广泛在各个行业及场景中被应用，但对多数开发者来说，实时音视频及相关技术却是比较不常接触到的。 做为一名 Web 开发者，WebRTC 这块的概念着实花了不少时间才搞明白，一是 WebRTC 本身有较多的独有概念，二是虽然带“Web”字样，但依赖底层概念和网络却是 Web 开发很少接触到的； 本篇文章以 0 经验音视频开发者 视角，类比常用的 Web 技术，期望帮助您简单入门 WebRTC 技术，耐心看完本篇文章，你将： 了解什么是 WebRTC 掌握 WebRTC
C-wave 降噪处理代码
重剑无锋，大巧不工
03-09 1228
        转自: 点击打开链接        一段wave波形降噪处理代码。        .h#pragma once typedef signed short Int16; typedef signed int Int32; //body of the "fmt" chunk typedef struct { Int16 FormatTag; Int16 Channels;...
C#实现WAV音频单声道提取
学习，思考，记录
10-16 4525
喜欢买碟或者卡拉ok的朋友一定不会对声道这个术语陌生。通常我们在音像店买回来的VCD或者DVD都是双声道的形式，唱片商在录制唱片时往往提供了两个或多个声道，以保存不同的音频内容，以形成立体声效。左声道保存的大多为一些背景声效，如卡拉OK的消音伴唱。而右声道保存的往往是较为主要的声音，比如主唱的歌声。利用多声道技术，听众可以清晰地分辨出各种乐器来自的方向，从而使音乐更富想象力，更加接近于临场感受。
C# 使用webrtc-streamer
最新发布
11-11
根据提供的引用内容，webrtc-streamer是一个基于WebRTC的流媒体服务器，可以用于实时视频流传输。如果您想在C#中使用webrtc-streamer，可以使用WebRTC .NET库。这个库提供了一个WebRTC的C#实现，可以用于在C#应用程序中实现WebRTC功能。您可以使用这个库来连接webrtc-streamer服务器并传输视频流。 以下是使用WebRTC .NET库连接webrtc-streamer服务器的示例代码： ```csharp using System; using System.Threading.Tasks; using WebRTC; namespace WebRTCExample { class Program { static async Task Main(string[] args) { // 创建PeerConnectionFactory var options = new PeerConnectionFactoryOptions(); var factory = new PeerConnectionFactory(options); // 创建PeerConnection var configuration = new RTCConfiguration { IceServers = new[] { new RTCIceServer { Urls = new[] {"stun:stun.l.google.com:19302"} } } }; var pc = factory.CreatePeerConnection(configuration); // 创建VideoTrack var videoDevice = await MediaDevice.GetUserMedia(new MediaStreamConstraints { Video = new VideoMediaTrackConstraints { Width = new ConstrainULong {Exact = 640}, Height = new ConstrainULong {Exact = 480}, FrameRate = new ConstrainDouble {Exact = 30} } }); var videoTrack = videoDevice.GetVideoTracks()[0]; // 添加VideoTrack到PeerConnection var sender = pc.AddTrack(videoTrack); // 连接webrtc-streamer服务器 var offer = await pc.CreateOffer(); await pc.SetLocalDescription(offer); // 将offer发送给webrtc-streamer服务器 // 等待webrtc-streamer服务器返回answer var answer = await pc.WaitForAnswer(); // 设置webrtc-streamer服务器返回的answer await pc.SetRemoteDescription(answer); // 等待连接建立 await Task.Delay(5000); // 关闭连接 await pc.Close(); videoDevice.Stop(); } } } ``` 请注意，这只是一个示例代码，您需要根据您的实际情况进行修改。另外，您需要在项目中添加WebRTC .NET库的引用。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值