Pytorch
fu_gui_mu_dan
这个作者很懒,什么都没留下…
展开
-
GRU门控循环单元
GRU视频链接Zt—更新门Rt—重置门控制保存之前一层信息多,还是保留当前神经元得到的隐藏层的信息多。Bi-GRUGRU比LSTM参数少。原创 2023-09-06 14:58:25 · 508 阅读 · 0 评论 -
LSTM基础
上一时刻的输出+这一时刻的输入。过去,不过去,过去一部分。原创 2023-09-05 21:38:59 · 470 阅读 · 0 评论 -
valle代码过程
【代码】valle代码过程。原创 2023-07-14 19:03:58 · 547 阅读 · 1 评论 -
命令行查看numpy版本
【代码】命令行查看numpy版本。原创 2023-07-13 15:09:41 · 1697 阅读 · 0 评论 -
ImportError: libpython3.8.so.1.0: cannot open shared object file: No such file or directory
【代码】ImportError: libpython3.8.so.1.0: cannot open shared object file: No such file or directory。原创 2023-07-13 13:16:12 · 570 阅读 · 0 评论 -
The following packages are not available from current channels: - tree_sitter
【代码】The following packages are not available from current channels: - tree_sitter。原创 2023-06-26 09:47:14 · 71 阅读 · 0 评论 -
VSCode中,the debugger in the python extension no longer 3.7
VSCode中,the debugger in the python extension no longer 3.7。原创 2023-06-11 10:07:48 · 1565 阅读 · 0 评论 -
seq2seq,attention,transformer(keras代码实现)
score是和EO一样维度的向量。一般使用Bahdanau注意力。context最后是一个向量。原创 2023-06-05 19:58:34 · 74 阅读 · 0 评论 -
OneHot笔记
将离散数据整数化,其值也可看做欧式空间中某点的坐标。原创 2023-06-05 09:41:04 · 51 阅读 · 0 评论 -
No module named ‘ignite.engine‘
所需要的那个有.engine的ignite是pytorch的一个扩展包。真正的全名叫pytorch-ignite。只不过导入的时候前面那个pytorch省掉了。原创 2023-04-22 08:15:26 · 242 阅读 · 0 评论 -
pytorch 之 I = torch.eye(N)
生成对角线全为1,其余部分全0的二维数组。原创 2023-03-01 09:12:12 · 69 阅读 · 0 评论 -
dgl:GraphConv介绍(原理、api、源码)
dgl:GraphConv介绍(原理、api、源码)原创 2023-02-28 13:51:23 · 777 阅读 · 0 评论 -
source_ids += [tokenizer.unk_token_id for x in dfg]
通过反转词汇表来获得特殊tokens的索引。原创 2023-01-18 19:57:18 · 2098 阅读 · 0 评论 -
tokenizer三种写法
tokenizer_lambda是一个匿名函数。原创 2023-01-17 09:47:04 · 179 阅读 · 0 评论 -
魔法方法,深度学习为什么写forward
model就是调forward,因为内部默认有__call__函数。原创 2023-01-14 09:33:38 · 139 阅读 · 0 评论 -
[:, :,None]和unsqueeze
masked_position = torch.unsqueeze(masked_position, 2)和。masked_position = masked_position[:, :,None] 等价。原创 2023-01-11 17:50:14 · 123 阅读 · 0 评论 -
RobertaTokenizer,RobertaForMaskedLM
【代码】RobertaTokenizer,RobertaForMaskedLM。原创 2023-01-09 09:24:26 · 223 阅读 · 0 评论 -
python中[:, 0, :]
X[:,0]是numpy中数组的一种写法,表示对一个二维数组,取该二维数组第一维中的所有数据,第二维中取第0个数据,直观来说,X[:,0]就是取所有行的第0个数据, X[:,1] 就是取所有行的第1个数据。x[:,n]表示在全部数组(维)中取第n个数据,直观来说,x[:,n]就是取所有集合的第n个数据。x[n,:]表示在n个数组(维)中取全部数据,直观来说,x[n,:]就是取第n集合的所有数据。X[1,:]即取第一维中下标为1的元素的所有值。m代表第m维,n代表m维中取第几段特征数据。原创 2023-01-07 17:44:00 · 1336 阅读 · 0 评论 -
reshape中的-1,x = x.reshape(-1,x.size(-1)*1)
16个数,行数为4,列数自动计算。原创 2023-01-07 16:06:59 · 194 阅读 · 0 评论 -
reshape 将数组拉成一维(一列)
【代码】reshape 将数组拉成一维。原创 2023-01-07 15:10:01 · 416 阅读 · 0 评论