【深度学习】模型参数覆盖问题

场景

定义两个框架一样的模型,并用两个不同的预训练的权重文件赋权,存在模型参数被覆盖的问题

具体情况

以TextCNN框架为案例

# 定义两个模型实例
targetModel = TextCNN(word_dim, vocab,label_num, kernel_sizes, num_channels, dropout=0.1)
defendModel = TextCNN(word_dim, vocab,label_num, kernel_sizes, num_channels, dropout=0.1)

# 分别赋权
targetModel_weight = torch.load(target_model_path)
targetModel.load_state_dict(targetModel_weight['model_state_dict'])
targetModel.to(device)
targetModel.eval()
# 此时打印第一个模型的第一个参数权重
for name, param in targetModel.named_parameters():
    print(f"{name}: {param}")
    break
    
defendModel_weight = torch.load(pretrained_model_path)
defendModel.load_state_dict(defendModel_weight['model_state_dict'])
defendModel.to(device)
defendModel.eval()

# 打印两个模型的第一个参数权重
for name, param in targetModel.named_parameters():
    print(f"{name}: {param}")
    break
for name, param in defendModel.named_parameters():
   print(f"{name}: {param}")
   break

在这里插入图片描述

在这里插入图片描述

可以看到前面定义的模型参数,完全被后面的模型给覆盖了。不知道怎么解决这个问题,挺神奇的~~

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值