Python
萌甘薯
这个作者很懒,什么都没留下…
展开
-
使用 colab &pytorch 训练深度学习模型问题记录(二): stack expects each tensor to be equal size, but got [64] at entry
出现这个Runtime error 很有可能是因为一个 batch 内每条数据长度不一致,检查是否需要 pad 或者 truncate 是否有问题。我在使用 transformers 的 Berttokenizer 处理句子对是遇到这个问题,不同的数据有不同的特点,根据具体情况调整 truncate 策略。encoded_pair = self.tokenizer(sent1, sent2, padding='max_leng原创 2021-02-20 11:38:03 · 2137 阅读 · 0 评论 -
使用 colab &pytorch 训练深度学习模型问题记录(一):tqdm 显示过多细节,显示多行
如遇到上问题,在 colab 的 ipynb 内运行以下代码,问题部分解决。!kill -9 -1原创 2021-02-20 11:16:15 · 585 阅读 · 0 评论 -
Python中TypeError: '_io.TextIOWrapper' object is not subscriptable问题解决/readlines()/with...as...
file_name = '/Users/.../test.txt'with open(file_name,'r', encoding='utf-8') as fin: a = fin.readlines()[1] fin.close原创 2019-06-15 12:55:43 · 32366 阅读 · 0 评论 -
学习python零散笔记(一):纵向拼接array & 寻找多维array中是否存在某一行指定的array
纵向拼接np.concatenate([a,b], axis = 0)np.vstack([a,b]) np.r_[a,b]使用以上方法进行纵向拼接时,要注意被拼接array的维度相同,空的array不可以和非空的拼接。一般都需要对array进行reshape操作。ptsInClust = np.array([0,0]).reshape([1,2])x = np.array(X[i,...原创 2019-08-27 17:32:04 · 912 阅读 · 0 评论