【深度学习】脸部修复，CodeFormer，论文，实战

代码： https://github.com/sczhou/CodeFormer

https://huggingface.co/spaces/sczhou/CodeFormer

论文：https://arxiv.org/abs/2206.11253

Towards Robust Blind Face Restoration with Codebook Lookup Transformer

论文

摘要

Blind face restoration是一个高度 ill-posed 的问题，通常需要辅助引导来 1) 改善从降级输入到期望输出的映射，或者 2) 补充在输入中丢失的高质量细节。在本文中，我们展示了在一个小的代理空间中学到的离散码本先验可以通过将盲目的面部恢复建模为 a code prediction task来大大减少恢复映射的不确定性和模糊性，同时为生成高质量面部提供丰富的视觉元素。在这个范式下，我们提出了一个基于 Transformer 的预测网络，命名为 CodeForm