- 博客(24)
- 收藏
- 关注
RSS订阅原创 ubuntu18+2080ti+cuda+tensorflow+cudnn安装
Ubuntu下的TensorFlow环境配了好久，踩坑不少。安装前先去看看TensorFlow和cuda、cudnn的对应版本关系，省的装错了不匹配，还要重新卸载，卸载时候又是问题一大堆。。这里有对应关系https://blog.csdn.net/qq_34840129/article/details/939139011.装显卡驱动，保守起见，我装的430的（最新的是440）先删除可能存在的已有驱动，裸的Ubuntu应该是没有驱动的，不过安全起见 还是走一下程序sudo apt-get
2020-11-29 15:49:14
277
原创 ubuntu之间的SSH
不怎么用，简要的记录一下使用的过程，做个备忘。后续有更多用法时再来补充。环境：两台Ubuntu18.04首先两台电脑上安装openssh-serversudo apt-get install openssh-server可能会报错说：无法修正错误，因为您要求某些软件包保持现状。。。。。。。。。网上有解决办法我试了一下，没有解决。问题原因应该是电脑上预装了openssh-client，把他卸了，然后再装openssh-server。然后修改/etc/ssh/sshd_confi.
2020-10-19 17:05:44
153
原创 Ubuntu18-ESPnet搭建过程（二）ESPnet搭建
下载ESPNet:https://github.com/espnet/espnet这里分享一个下载GITHUB项目的代理点，速度能快上很多：http://gitd.cc/官方安装文档：https://espnet.github.io/espnet/installation.htmlESPNet的搭建过程网上有很多，他们在搭建的时候，会再另行安装Python或者anaconda。但是对于电脑上已经有了环境的人来说个人感觉并非最优的方式。以下给出个人方式：解压，进入tools文件夹。先.
2020-10-10 11:32:20
847
1
原创 Ubuntu18-ESPnet搭建过程（一） kaldi安装
记录一下在Ubuntu下搭建ESPnet的过程。主要参考官方文档：https://espnet.github.io/espnet/installation.html#supported-linux-distributions-and-other-requirements整个流程安装官方文档来进行，仅记录有不一样的地方和报错的地方。报错1：报错语句 ./extras/install_openblas.sh 原因：该脚本下需要下载OpenBLAS文件，终端下载很慢，超时报错。...
2020-10-09 17:39:03
848
转载 解决训练过程中pytorch显存一直变大
在代码中添加以下两行可以解决：torch.backends.cudnn.enabled = Truetorch.backends.cudnn.benchmark = True原文：https://www.jianshu.com/p/8486076ddd10
2020-09-16 17:29:39
1796
3
原创 Linux终端指令计时方式
因为某些原因，需要对在终端下运行的某个程序进行计时：采用Linux的date指令：date+%s可以获得从 1970 年 1 月 1 日 00:00:00 UTC 到目前为止的秒数。然后我们就可以根据前后时间差来计算用时。S = $(date+%s)；你的指令;E=$(date+%s);time=$(($E-$S));echo $time把上面你的指令修改为你需要执行的程序或者指令即可。...
2020-07-27 15:20:43
1129
1
原创 windows下运行.sh文件
Ubuntu系统出了点问题，最近几天使用Windows开发。遇到了之前使用的.sh文件需要在Windows下运行。在Windows下装git，好在我之前已经装过，很方便直接拿来用。找到git根目录下的bin文件夹下的sh.exe打开，cd+.sh文件的路径 即可。 这里注意不要使用\， 要使用/ 尽量不要有中文。...
2020-06-23 15:22:54
3678
1
原创 WaveRNN语音对齐问题（未解决）
记录一下对WaveRNN语音对齐问题（输出语音和原语音尺度不一致）的尝试。现在还没有解决这个问题。。项目地址：https://github.com/fatchord/WaveRNN这个项目实现了TTS的功能，不过整个模型架构不仅仅是一个WaveRNN。模型会先通过一个tacotron模块对文本进行编解码，然后获得文本信息的Mel特征。之后再将mel特征输入至WaveRNN网络，进而获得语音输出。而这个mel特征的尺度直接决定了我们生成的音频的尺度大小。那么是否可以生成指定大小的mel特征呢？
2020-06-12 17:45:27
471
1
原创 pytorch训练过程可视化----TensorboardX
在tensorflow下训练模型的时候可以很方便的使用tensorboard来对整个训练过程进行可视化监控.但在pytorch下,我们可以通过使用tensorboardX来对模型进行可视化.github项目地址:https://github.com/lanpa/tensorboardX这里只简单的记录一下如何记录下训练过程的loss,step.首先PIP tensorboardX这个就不多说了然后通过以下代码定义SummaryWriter() 实例from tensorbo..
2020-06-03 11:07:37
385
原创 pycharm创建虚拟环境权限不够的问题ERROR: Could not install packages due to an EnvironmentError: [Errno 13]
在开发过程中,经常需要针对不同的项目创建不同的虚拟环境.之前一直是使用pycharm创建virtualenv虚拟环境.一直没出现什么问题.今天却在一个新的虚拟 环境中pip 安装库的时候,出现权限不够的问题....首先 你在创建虚拟环境的时候,应该弹出让你输入root密码的提示,它代表着你是以管理员的身份创建的,如果连这个都没出现,你的环境十之八九是要出现问题.但是,即使出现了这个提示,也不一定就代表你的环境就没问题(虽然我以前都没问题,但现在出现了错误....)这个时候,有..
2020-05-30 13:27:55
9043
1
原创 Ubuntu下python--pesq(客观语音质量评估)
想要对比一下两语音相似性，在Windows下有pesq工具可以直接拿来使用。在Ubuntu下，没要知道可以直接拿来用的工具。好在在python下有现成的库函数可以使用。先安装pypesq库（安装方式看你自己怎么选择了）。用法：十分方便，语音数据多的时候可以自己写个函数进行批处理。...
2020-05-25 14:59:58
4087
12
原创 wavenet_vocoder（预处理MFCC特征提取代码段分析）
从加载进来音频开始看起，前面制作路径列表就不在细述了wav = audio.load_wav(wav_path)if hparams.rescaling: wav = wav / np.abs(wav).max() * hparams.rescaling_max首先遇到hparams.rescaling_max=0.99，即wav / wav内元素绝对值中的最大值，将使得所有元素范围在（-1,1），相当于做个归一化。 mel_spectrogram = audio.melsp.
2020-05-14 17:41:38
1033
3
原创 关于tf.slice()函数
关于tf.slice()函数网上有很多整个函数的介绍，但看了一遍总觉得各家解释的都不够完善。自己又稍微总结了一下。tf.slice(tensor,begin,size)如B=[ [ [1 1 1] [2 2 2] ] [ [3 3 3] [4 4 4] ] [ [5 5 5] [6 6 6] ] ...
2020-04-27 19:08:44
260
原创 WARNING: Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None)) after
电脑重装了，重新PIP安装OPENCV时出现如下报错WARNING: Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None)) after很明显 网速瓦特了。。。。。emmmmm，换用国内的源试一下吧。很快！！ 换个源不仅不报错，而且很快装好。pip install opencv-pyt...
2019-11-25 22:41:58
4190
原创 python tensorflow车型识别(一)：建立数据
入门了tensorflow课程，于是想自己做个车型类别的识别，后期可能还会加入车牌的识别，记录该笔记 方便以后查阅复习。
2019-11-16 20:34:11
2260
4
原创 NLP-词汇表征与词嵌入
在之前的学习中，通常通过one-hot的方式对句子中的各个词汇进行编码 也就是通过one-hot的方式对每一个词汇建立一个矩阵，该矩阵中只有一个1，其他均为0.但这种方式并不利用模型的学习。例如模型已经学会了对一个句子：我想喝一杯橘味（）. 模型已经能够正确预测出在空白处为 ‘果汁’。 但对于一个新的语句 如我想喝一杯苹果味（）。模型又需要重新进行学习才能正确的预测。对于这种情况 通常...
2019-11-16 20:28:38
684
原创 RNN的梯度消失问题
RNN模型结构：可以看出 如果说有一个非常长的句子（则对应会有一个非常深的网络）,这个句子中句尾的某个词严重受句首某些词的影响（英语中的单复数，时态），这时候由于网络非常的深，则在反向传播的过程中极易出现梯度消失或者梯度爆炸的情况（反向传播时）。* 关于梯度消失的详细解释； --引自知乎 https://zhuanlan.zhihu....
2019-11-16 20:22:33
239
原创 RNN网络架构
学习吴恩达老师的AI课程笔记，详细视频课程请移步https://mooc.study.163.com/smartSpec/detail/1001319001.htm循环神经网络展开后类似于一个有N个中间层的前馈神经网络。对于前馈网络的公式有：O=f( X * W+b ) ,W,b为参数,X是当前的输入，f(·)是激活函数，*是矩阵乘法，O是当前的输出。即输出 等于 输入经过线性与非线性映射...
2019-11-16 19:38:27
402
原创 tensorflow复现VGG16及遇到问题
记录一下学习过程中所遇的一些问题，方便日后查阅。用tensorflow框架复现一下VGG16模型VGG-16一共16层，可分为五个大块，各个层用的卷积核都是33 步长1，池化用22 步长2第一块两个卷积 一个池化 深度64第二块两个卷积 一个池化 深度128第三块三个卷积 一个池化 深度 256第四块三个卷积 一个池化 深度 512第五块三个卷积 一个池化 深度 512最后三个全连...
2019-11-16 19:33:31
647
3
原创 随机森林和逻辑回归替换softmax层的问题
在学习机器学习时，想通过将softmax层修改为随机森林或者逻辑回归来进行分类任务。对比不同方案下的正确率及耗时。在进行随机森林和逻辑回归分类时，均建立在迁移的VGG16的预训练参数模型上。在将数据输入到随机森林或逻辑回归中时首先需要将预训练的输出化为二维矩阵。否则将报错。ValueError: setting an array element with a sequence.对于逻辑回归分...
2019-11-16 19:29:52
907
5
原创 半监督学习
半监督学习【假设】要利用未标记样本，必然要做一些将未标记样本所揭示的数据分布信息与类别标记相联系的假设。假设一：" 聚类假设" (duster assumption) ，即假设数据存在簇结构，同一个簇的样本属于同一个类别。假设二：“流形假设” (manifold assumption) ， 即假设数据分布在一个流形结构上，邻近的样本拥有相似的输出值"邻近" 程度常用"相似"程度来刻画，因此...
2019-11-16 19:25:09
206
原创 WGET常用语法
语法wget(选项)(参数)选项-a<日志文件>：在指定的日志文件中记录资料的执行过程；-A<后缀名>：指定要下载文件的后缀名，多个后缀名之间使用逗号进行分隔；-b：进行后台的方式运行wget；-B<连接地址>：设置参考的连接地址的基地地址；-c：继续执行上次终端的任务；-C<标志>：设置服务器数据块功能标志on为激活，off为关闭，...
2019-11-16 19:22:56
420
原创 MYSQL学习笔记（一）
学习MySQL时的随手笔记及代码笔记，学习课程来源https://www.bilibili.com/video/av49181542?p=38第一课DQL : data query languge 数据查询语言DML： 增删改查语言DDL: 数据定义语言TCL： 事务控制语言DQL1.基础查询select 查询列表 from 表名;查询的列表可以是：表中的字段、常量、表...
2019-11-16 19:20:53
88
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人