3 备注
3.1 使用torch.log()前,需要进行clamp
在写作loss函数时,经常会使用torch.log()函数,例如计算交叉熵时;
在PyTorch中,在使用torch.log()前,记得需要进行clamp操作,
因为log()函数在0和负数的情况下,会出现不稳定的数值结果,
如图所示
在写作loss函数时,经常会使用torch.log()函数,例如计算交叉熵时;
在PyTorch中,在使用torch.log()前,记得需要进行clamp操作,
因为log()函数在0和负数的情况下,会出现不稳定的数值结果,
如图所示