GAN学习历程之INSTAGAN论文笔记

INSTAGAN:

Instance-aware image-to-image translation
论文地址：https://arxiv.org/pdf/1812.10889.pdf
代码地址：https://github.com/sangwoomo/instagan

• Abstract

  提出：
  为解决一些具有挑战性的问题，尤其是当一个图片有多个目标实例和涉及形状改变的转换任务。
  1. Introduction
  文章介绍了一种利用图像和实例信息作为输入，在保证背景不变的情况下对实例进行转换方法。InstaGAN主要是在cycleGAN的基础上进行改进。
  2.instaGAN architecture
  我们利用CycleGAN的方式来建立我们的InstaGAN。我们方法的核心在于合并额外的实例信息。论文中，仅仅使用了实例分割图，但是我们标记出任何类型的实例信息合并为属性。
  图一 instagan的结构

  

以下是论文中所提到InstanGAN的整体结构，