【学习笔记】xProtoNet和ProtoNet:可解释的图像分类

本文介绍了可解释的图像分类模型xProtoNet和ProtoNet,这两种模型试图模仿人类的思考模式,通过对图像特征的对比和学习来实现分类。ProtoNet通过与每个类别的原型特征进行相似度计算来确定类别,而xProtoNet则将这一概念应用于医疗图像领域,特别是CT图像分类。训练过程涉及对原型特征的学习和投影,以及动态调整的Patch设计以提高解释性。
摘要由CSDN通过智能技术生成

ProtoNet

论文地址:This Looks Like That: Deep Learning for Interpretable Image Recognition
代码地址:https://github.com/cfchen-duke/ProtoPNet

之前的分类模型

之前的分类模型几乎都Encoder-Decoder的形式,通过Encoder获取图像特征向量之后在通过Decoder进行分类。比如下图,encoder一般是预训练的模型,分类模型主要是训练deocder
encoder-decodr模式
而所谓的可解释也都是在这个部分之外再添加诸如attention的部分,和人的思考模式还是有点区别的。
我们人的思考可能是这样的模式(原文是用鸟来举例子,我觉得很没代入感,我用个二次元的例子):
在这里插入图片描述
我们看到一张图片(左),如果想识别它是不是雷电将军,我们可能会怎么想呢?我们心中肯定有一个雷电将军(右),这个图片说白了是我们心中对于她记忆种特征的一个具象化图。如果和我们心中的将军像到某种程度的话࿰

  • 9
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值