NeilPy的博客

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...

最近看了一些Pytorch的代码，代码中使用了Log_Softmax方法，Loss函数使用了NLLLoss，作为深度学习新手，便上网查了一些资料，将相关知识总结记录以下。本文主要参考了这篇文章，在此基础上加入了一些自己的理解。Softmax我们知道softmax激活函数的计算方式是对输入的每个元素值x求以自然常数e为底的指数，然后再分别除以他们的和，其计算公式如下：Softmax(xi)=...

前言tensor是Pytorch中数据的基础单元，那么如何创建tensor，pytorch中提供了以下四种方式：torch.Tensor()torch.tensor()torch.as_tensor()torch.from_numpy()那么这四种创建tensor的方式有什么区别呢，在具体使用中应该如何选择？1、类型结构的区别除了torch.Tensor()是类之外，其他三个都...

问题描述最近看到pytorch更新后的1.1.0版本原生支持tensorboard，但是在安装1.1.0版本之后，导入tensorboard时出现了错误，错误信息如下：错误原因目前tensorboard释放的稳定版只支持到1.13，通过报错的最后一行可以看出，需要1.14及以上的版本问题解决所以，要解决这个问题，需要安装tenforboard的nightly版本，需要安装tb-nigh...

前言我们在使用pytorch搭建模型的时候，一般只关注模型的forward前向传播，backward后向传播过程中，模型梯度的计算以及参数的更新都是pytorch框架后台自动进行计算的，那么有的时候就会思考，pytorch到底是怎么进行计算的，产生的这些梯度以及参数是如何保存的，而我们想要访问又可以怎样来访问。带着这些疑问，我们来一一解开这些神秘的面纱。Tensor的grad属性首先我们从T...