SincNet训练总结

最新推荐文章于 2024-08-12 09:00:32 发布
最新推荐文章于 2024-08-12 09:00:32 发布
阅读量1.9k 收藏 11
点赞数 2
分类专栏： 语音识别 深度学习 文章标签： SincNet 说话人识别 声纹识别 TIMIT 语音识别
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43030766/article/details/89295069
版权
本文档详细记录了在Ubuntu 16.04环境下，使用SincNet进行说话人识别的全过程。首先，从GitHub和TIMIT官网获取资源，接着对TIMIT数据集进行标准化处理，解决了在安装soundfile库时遇到的问题。然后，调整SincNet_TIMIT.cfg配置文件，启动模型训练，并在训练过程中解决了GPU使用问题。经过35小时的训练，完成了1500次迭代，模型和日志已保存，但部署和测试仍在进行。
摘要由CSDN通过智能技术生成

环境：Linux，Ubuntu16.04

下载GitHub资源

git clone https://github.com/mravanelli/SincNet

下载TIMIT数据集

可从官网下载，也可从我的网盘下载。
提取码：g9ax
TIMIT数据集介绍资料link

1. 把TIMIT数据集做一个标准化处理

在SincNet路径下执行：

python3 TIMIT_preparation.py /<YourPath>/timit  /<YourPath>/output_timit data_lists/TIMIT_all.scp

这里 /YourPath/timit指你下载的TIMIT数据集的路径。
YourPath/output_timit指处理完后TIMIT数据保存的路径。
data_lists/TIMIT_all.scp指配置文件的路径，不用修改。

第一次运行时报错：
报错提示
再安装soundfile时又报错：

sduo pip3 install soundfile
最低0.47元/天 解锁文章
zz_Rebas
关注
专栏目录
SincNet: 一种可解释的卷积滤波器结构
z小白的博客
02-19 1万+
简介 深度学习发展至今，在很多人工智能应用领域扮演者重要的角色。深度学习能够从数据中学习复杂而抽象的特征表示，但是这个充满意义的学习模式目前依然缺乏“可解释”性，也就是常说的“黑盒子”。例如，深度学习模型对对抗性实例（adversarial examples）极其敏感（模型表现不好），使得研究者不得不思考对模型的理解。这种缺乏“可解释”性可能是阻碍未来深度学习技术发展的一个重要瓶颈。 Beng...
SincNet原理和代码学习
weixin_51228224的博客
08-29 2826
文章提出一种端到端的CNN架构，SincNet。它要求第一卷积层学习到更有意义的滤波器，通过参数化的Sinc函数实现带通滤波。标准CNN中滤波器需要学习所有权重，而本架构中，只需要学习低截止频率和高截止频率，这提供了紧凑和有效的方法来设计定制滤波器组。在说话人识别和说话人验证任务上进行的实验表明，本文所提出的结构收敛速度更快，在原始波形上的性能均优于标准CNN。...
SincNet：SincNet是一种用于有效处理原始音频样本的神经体系结构
02-04
SincNet SincNet是用于处理原始音频样本的神经体系结构。 这是一种新颖的卷积神经网络（CNN），它鼓励第一个卷积层发现更多有意义的滤波器。 SincNet基于参数化的Sinc函数，这些函数实现了带通滤波器。 与学习每个滤波器的所有元素的标准CNN相比，所提出的方法只能从数据中直接学习低和高截止频率。 这提供了一种非常紧凑而有效的方式来导出专门针对所需应用进行了调整的定制滤波器组。 该项目发布了一系列代码和实用程序，可通过SincNet进行说话人识别。 使用TIMIT数据库提供了说话人识别的示例。 如果您对应用于语音识别的SincNet感兴趣，可以查看PyTorch-Kaldi
探索声音的奥秘：SincNet —— 原始音频处理的新纪元
最新发布
gitblog_00204的博客
08-12 324
探索声音的奥秘：SincNet —— 原始音频处理的新纪元 SincNetSincNet is a neural architecture for efficiently processing raw audio samples.项目地址:https://gitcode.com/gh_mirrors/si/SincNet 在探索人类语音识别的广阔天地中，一项名为SincNet的技术正在引领一场新...
SincNet: 基于原始音频样本的深度学习框架
gitblog_00665的博客
08-10 421
SincNet: 基于原始音频样本的深度学习框架 SincNetSincNet is a neural architecture for efficiently processing raw audio samples.项目地址:https://gitcode.com/gh_mirrors/si/SincNet 1. 项目介绍 SincNet 是一个深度学习框架，专注于高效处理原始音频样本。它采...
Pytorch-TIMIT说话人识别代码-Sincnet网络 简洁版本（适合黑白盒攻击使用）
qq_37633207的博客
10-15 2350
Pytorch-TIMIT说话人识别 先上链接： 码云（包括代码和模型以及测试数据）：https://gitee.com/djc_QRICK/timit-pytorch 简化 删掉了很多乱七八糟的东西，剩下的就是非常纯净的代码和模型 整个代码的功能仅仅包括模型的输入和预测，以及预先训练的模型 模型采用Sincnet 数据集采用TIMIT 整体上来说这是个CSI系统也就是闭集的说话人识别 适合想做黑白盒攻击的朋友们使用 基于pytorch1.6 最好有cuda，没有cuda需要微调代码（影响不大） 效果图
keras-sincnet:“从具有SincNet的原始波形中的扬声器识别”中对SincNet进行Keras实现
03-15
标题：“keras-sincnet: 从具有SincNet的原始波形中的扬声器识别”中对SincNet进行Keras实现 在深度学习领域，语音识别是热门的研究方向之一，而SincNet是近年来提出的一种用于语音特征提取的模型，尤其适用于从...
探秘SincNet：语音识别的新星，高效且可定制
gitblog_00030的博客
04-09 505
探秘SincNet：语音识别的新星，高效且可定制 SincNetSincNet is a neural architecture for efficiently processing raw audio samples.项目地址:https://gitcode.com/gh_mirrors/si/SincNet 是一个基于TensorFlow和PyTorch的开源项目，它专注于语音特征提取，为深...
可解释的卷积滤波器 SincNet
海上机械师
05-22 5063
2018 年以后，SincNet 具有更快的收敛速度、更佳的表示能力和更好的可解释性，但也暴露出其对抗攻击的脆弱性。笔者详细分析 SincNet 四部分：设计原理、可解释性、无监督学习应用和对抗攻击。考虑到 SincNet 在频域方面的物理意义，它将为语音处理应用的研发提供极大的便利，例如说话人识别与语音识别。
二维sinc函数波形
06-01
在matlab中对二维sinc函数进行了模拟，画出了图像。横纵坐标为-5至5.
SincFilter
09-16
这个是SincFilter，主要用于对AD读出的数据流进行抽样滤波
使用Sinc卷积从原始音频数据进行轻量级的端到端语音识别
暮木的博客
03-10 1309
论文： Lightweight End-to-End Speech Recognition from Raw Audio Data Using Sinc-Convolutions 摘要： 许多端到端自动语音识别（ASR）系统仍依赖于经过预处理的频域特征，这些特征是手工制作的以模仿人类的听力。集成可学习特征提取的最新进展推动了我们的工作。为此，文本提出了将Sinc卷积与深度卷积相结合的轻型Sinc卷积（LSC），作为端到端ASR系统的低参数机器学习特征提取。 本文将LSC(轻型Sinc卷积)融合进C.
基于SincNet的原始波形说话人识别
凌逆战的博客
10-24 1999
speaker recognition from raw waveform with SincNet Mirco Ravanelli, Yoshua Bengio 　　作为一种可行的替代i-vector的说话人识别方法，深度学习正日益受到欢迎。利用卷积神经网络(CNNs)直接对原始语音样本进行处理，取得了良好的效果。而不是使用标准的手工制作的功能，后一种CNNs从波形中学习低电平的语...
sinc函数
weixin_30918633的博客
10-07 8638
Sinc滤波器 在信号处理领域，Sinc滤波器一个全部除去给定带宽之上的信号分量而只保留低频信号的理想电子滤波器。在频域它的形状象一个矩形函数，在时域它的形状象一个Sinc函数。由于理想的 Sinc 滤波器（人们熟知的矩形滤波器）有无限的延迟，所以现实世界中的滤波器只能是它的一个近似，但是它仍然在概念演示或者验证中得到了广泛应用，如采样定理以及Whittaker–Shannon插值公式。 ...
【Python数据分析—NumPy】7.NumPy专用函数
每天都在学习的小博主
04-21 2076
7.NumPy专用函数 文章目录1、排序(np.lexsort())2、复数排序(np.sort_complex())3、搜索(np.argmax()、np.argmin()、np.nanargmax()、np.argwhere()、np.searchsorted()、np.insert()、np.extract()、np.nonzero())4、金融函数5、窗函数6、专用数学函数(np.i0()、np.sinc())总结 1、排序(np.lexsort())    2、复数排序(np.sort_c
sinc函数的性质
热门推荐
GoodGoodStudy
10-14 1万+
从wiki上查到的：        怎么推导来的？怎么用？
sincNET代码
05-24
sincNET 是用于语音信号处理的一种卷积神经网络结构，其主要特点是在卷积层中使用了 sinc 函数作为滤波器。 以下是使用 PyTorch 实现 sincNET 的代码示例： ```python import torch import torch.nn as nn import ...
评论 8
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值