深度学习
回曜灵於太清
这个作者很懒,什么都没留下…
展开
-
Encoder和Decoder
encoder记忆和理解信息,并进行信息提炼。相对于输入,通常会形成一个低秩的向量。decoder回忆与运用这些信息,将低秩的加工后的信息抽取出来,这时也可以混合其它信息,解码成需要用的形式。...原创 2022-04-18 20:26:41 · 634 阅读 · 0 评论 -
Softmax-with-Loss层反向传播的值除以批的大小
在学习《深度学习入门:基于 Python 的理论与实现》153页的代码时,我对SoftmaxWithLoss层的反向传播实现产生了疑问,class SoftmaxWithLoss: def __init__(self): self.loss = None # 损失 self.y = None # softmax的输出 self.t = None # 监督数据(one-hot vector) def forward(self, x, t): self.t = t self.原创 2021-09-18 20:16:18 · 1421 阅读 · 11 评论