Pytorch求索
文章平均质量分 74
pytorch学习中的思考与问题记录
腾云丶
这个作者很懒,什么都没留下…
展开
-
pytorch求索(4): 跟着论文《 Attention is All You Need》一步一步实现Attention和Transformer
写在前面此篇文章是前桥大学大神复现的Attention,本人边学边翻译,借花献佛。跟着论文一步一步复现Attention和Transformer,敲完以后收货非常大,加深了理解。如有问题,请留言指出。import numpy as npimport torchimport torch.nn as nnimport torch.nn.functional as Fimport math,...原创 2018-11-23 15:47:30 · 6413 阅读 · 10 评论 -
Pytorch求索(3):使用训练好的词向量
nn.EmbeddingPytorch自带Embedding模块,可以方便使用self.embed = nn.Embedding(vocab_size, embedding_dim)那么,如何使用已经训练好的词向量呢?词向量其实是模型的embedding层的权重,所以,如下方法便可以实现:self.embed = nn.Embedding(vocab_size, embedding_d...原创 2018-10-17 20:39:01 · 7934 阅读 · 8 评论 -
Pytorch求索(2): Pytorch使用visdom进行可视化
Pytorch使用visdom进行可视化文章目录Pytorch使用visdom进行可视化visdom介绍visdom核心概念visdom安装与使用常用APIplot.scatterplot.lineplot.stemplot.heatmapplot.barplot.histogramplot.boxplotplot.surfplot.contourplot.quiverplot.imageplo...原创 2018-10-09 11:13:35 · 8501 阅读 · 1 评论 -
Pytorch求索(1):pytorch与Tensorboard的结合使用
pytorch与tensorboard结合使用TensorboardTensorboard一般都是作为tf的可视化工具,与tf深度集成,它能够展现tf的网络计算图,绘制图像生成的定量指标图以及附加数据等。此外,Tensorboard也是一个独立工具,只要保存的数据遵循一定的格式,Tensorboard就可以读取这些数据并进行可视化Tensorboard_loggerTensorboard_...原创 2018-10-09 09:39:14 · 6349 阅读 · 0 评论