【GANs】图像编辑与生成的应用调研

调研

课题推荐

• 按照一定风格创造新的角色、图标、头像
• 按照聊天内容生成符合语义的图片（动作、表情、语音）
• 同一个美术角色可以AI换姿势和服饰

备选应用方向

• 外网18个gan的应用方向
• 图像编辑
• 3D对象生成
• 人物姿态图像生成
• 人物卡通图像的转换

综述调研

1906.Generative Adversarial Networks in Computer Vision: A Survey and Taxonomy

• 生成对抗网络在计算机视觉上的综述和分类

2001.A Review on Generative Adversarial Networks: Algorithms, Theory, and Applications （少图）

效果好的论文

Pivotal Tuning for Latent-based Editing of Real Images

• 基于浅码的真实图像编辑的枢轴（pivotal）调整

• 论文21.06 | GitHub | Colab

StyleCLIP: Text-Driven Manipulation of StyleGAN Imagery

• 风格剪辑：文本驱动的StyleGAN的意象操作）

• 真实图片被通过e4e转换为stylegan的隐码（latent space）

• GitHub

e4e:Designing an Encoder for StyleGAN Image Manipulation

• e4e 编码器专门用于补充在 StyleGAN 的潜在空间上执行的现有图像处理技术
• GitHub

PSGAN: Full-body High-resolution Anime Generation with Progressive Structure-conditional Generative Adversarial Networks

• 具有渐进结构条件生成对抗网络的全身高分辨率r日本动漫生成
• 无代码
• 论文18.09 | 官方展示

基于stylegan的真实卡通图片编辑，可控制眼睛等

• https://pkhungurn.github.io/talking-head-anime/

• StyleGAN anime face interpolations

• 代码

• 相关源图片生成

面部的形变 / face rotator

• Anatomically-aware Facial Animation from a Single Image 来自单个图像的解刨感知面部动画（facial animation）
• 代码