![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
pytorch
江_小_白
一个菜鸟的学习之路
展开
-
关于with torch.no_grad:的一些小问题
with torch.no_grad:是截断梯度记录的,新生成的数据的都不记录梯度,但是今天产生了一点小疑惑,如果存在多层函数嵌入,是不是函数内所有的数据都不记录梯度,验证了一下,确实是的。原创 2023-12-20 15:10:25 · 501 阅读 · 1 评论 -
pytorch transpose 转置和梯度的传播
今天写代码的时候遇到一个需要进行转置的矩阵,由于涉及到梯度反传,所以有疑问转置之后的矩阵在转置之前的梯度是否存在,经过验证,转。原创 2023-12-16 15:13:02 · 271 阅读 · 0 评论 -
bert相关问题总结
bert一些相关知识原创 2022-12-10 14:38:40 · 966 阅读 · 0 评论 -
报错解决方案- backward
RuntimeError: Trying to backward through the graph a second time (or directly access saved tensors after they have already been freed). Saved intermediate values of the graph are freed when you call .backward() or autograd.grad(). Specify retain_graph=True原创 2022-12-08 18:40:54 · 1102 阅读 · 0 评论 -
报错记录-pytorch 环境版本和import版本不一致
pytorch 从1.6变成了1.8.1+cpu原创 2022-12-08 02:06:38 · 2209 阅读 · 0 评论 -
有关pytorch 的梯度的相关问题
pytorch backward函数使用注意事项原创 2022-11-06 19:45:52 · 424 阅读 · 0 评论 -
RuntimeError: CUDA error: device-side assert triggered和Unable to get repr for <class ‘torch.Tensor
RuntimeError: CUDA error: device-side assert triggered和Unable to get repr for原创 2022-10-10 17:00:15 · 620 阅读 · 0 评论 -
linux torch-geometric安装问题
libcusparse.so.11: cannot open shared object file: No such file or dir原创 2022-09-24 19:48:03 · 660 阅读 · 0 评论 -
nn.GRU()使用
nn.GRU() 使用原创 2022-07-14 17:49:36 · 1943 阅读 · 0 评论 -
Pytorch模型保存与加载,并在加载的模型基础上继续训练
问题描述:pytorch训练时中断怎样保存参数并继续加载训练解决方案:找到一个较好的博客https://www.jianshu.com/p/1cd6333128a1转载 2021-08-29 19:20:34 · 154 阅读 · 0 评论 -
pytorch 保存模型出错
今天在使用pytorch保存模型时,突然出现Can’t pickle typing.Union[torch.Tensor, NoneType]: it’s not the same object的错误,找了好多文章也没找到解决办法,后来把保存代码由save(model,path)换成save(model.state_dict(), path)终于不报错了...原创 2021-07-18 17:15:01 · 1343 阅读 · 0 评论