【CVPR2022论文解读】
首先弄清楚什么是 Instance-Aware
图片里除去背景的目标对象,可以看作是结合语意分割的模型。
因此,在整个网络模型里,存在两种特征
- 对象级特征
- 全图特征
为什么需要 Instance-Aware
比如在图片上色网络里,不同的物品具有不同的颜色,过去的网络从整体上进行学习,在多个物品(语意级对象)的颜色表达上效果不好。
- 涉及多目标的时候,转换效果不佳
-
物体外形变化比较大的时候,转换效果不佳
文章的方法:利用transformer网络融合全局信息和对象信息。
另外两篇参考文献: