![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
pytorch
文章平均质量分 73
QingerBig
这个作者很懒,什么都没留下…
展开
-
pytorch(fairseq) debug经验--CUDA ERROR: device-side assert triggered
痛苦又充实的回忆????在跑自己修改的模型时,遇到了这个令人摸不到头脑的问题,从网上的博客中查找,大部分是说,数据集的标签出了问题,从而导致越界,而在项目运行中一直使用的是同一个数据集,同时过去的实验代码都是在同一个数据集及预处理程序下使用的,所以果断排除该问题所导致的。这个问题更坑的地方在于,他抱错的地方并不是错误发生的地方,这就导致了定位的困难,回去看日志信息,捕捉到了一条关键信息,Assertion srcIndex < srcSelectDimSize failed.我意识到,是不是自己原创 2021-01-07 16:54:54 · 908 阅读 · 0 评论 -
Pytorch关于高维tensor的dim上操作的理解--以cosine_similarity的dim参数为例
问题的引出关于pytorch中dim的描述个人总是弄的不是很清楚,好多地方存在着疑问,这次在实验过程中需要比较两个高维tensor的相似度,由于需要确定在哪一维进行比较,故去测试了pytorch中关于tensor维度的一些现象。dim关于dim许多博客都有比我更加专业的解释,dim具体的解释也不是本文的重点,这里盗用其他博客里的一张图,这张图也是我认为对dim比较好的直观的解释(原文链接),本文的重点在于对高维tensor维度上操作,即不同的操作在不同的维度上进行会有怎样的不同Cosine_sim原创 2021-01-07 11:21:56 · 3385 阅读 · 4 评论