CVPR | 浙大小姐姐提出了秃头生成器,完美保留五官,让程序员简历大加分?

萧箫 发自 凹非寺  量子位 | 公众号 QbitAI

还在为找工作去理发店剃秃头吗?试试这个生成器!

只要输入一张照片,输出的就是完美无瑕的光头,气质立刻从实习提升到主管(手动狗头)

e1260e59ebdfd2f7e30ce36bb347eb27.png

无论你是年轻的程序员小哥,还是长发飘飘的程序媛,都可以通过这个方法“变得更强”:

4854c832aaf81c9d64ac6027b8ab3639.png

有了这个名叫HairMapper的“光头神器”,P头发就是分分钟的事情,五官却完全不受影响:

b2615eadd9d321383f4140338f22a47a.png

嗯,以后有了想做的发型,直接P一个……

要实现这么好的效果,得用三个GAN合力才行。

所有人都能用的“光头神器”

具体来说,HairMapper的原理一共分为三步,生成秃头→保留五官→合并头像。

9f7d326fafd93ae4a2167f54e6223b67.png

首先,作者们利用StyleGAN,做出一个与原头型相近的秃头效果:

0c6892b89278bca8cc25e3408e97ba14.png

这时候我们看到,StyleGAN没办法做到精准地控制五官生成,因此脸型稍微有所变化。

那么接下来,就是利用InterFaceGAN,抠出一个头发以外的脸型和五官形象,同时也保留四周的风景:

9994411447eca24c864fb906fd5dae97.png

最后,将前两步生成的效果合成,就做出了一个完美的“光头”:

cadab154f3ef3a5ec072d02863ebc2d6.png

不过值得一提的是,由于长发、女性光头数据集少等原因,因此作者们额外为女版“光头神器”多加了一个步骤。

在这其中,女性照片要先通过StyleFlow转换成男性照片,再重复上述步骤,最终同样得到一个光头:

76c868172953ea2873f3960c2abf4060.png

这样的效果还是不错的,在数据集中测试显示,即使是发量惊人的女生也能一键脱发(doge)

137d9eb2d9a8210243cba0f3376edb92.png

作者们将HairMapper与其他的秃头生成器做了个对比。

还做成了6000+秃头数据集

事实上,之前并不是没有人做过秃头生成器,只是效果并不太理想。

例如Adobe之前推出过的这个叫StyleFlow的生成器,就能让马斯克变秃:

049d0220c3e43f02ebf68b9ebbfc57aa.gif

但一个是头发没脱干净,另一个是五官也给GAN成了“另外一个人”。除了StyleFlow以外,其他类型的“秃头生成器”也面临这样的问题:

9ebf516744aab72c703b14eda9d34d4d.png

这次的HairMapper在GAN脱发的基础上,保留了原本的五官,使得还原出来的人脸非常真实。

无论男女老少或圆扁尖头:

91af0cffbcc170e0c3679a2cfa354233.png

还是各种不同肤色乃至不同肤质:

3a78e49b173f9c0df581d0431ef54d32.png

甚至是侧脸乃至有阴影,都能在HairMapper的作用下get丝滑的光头特效:

062c156bce3f4975a7159ede8eb2407e.png

目前作者们已经利用这个算法,将Flickr-Faces-HQ(FFHQ)数据集中的6000张人像变成了光头。

以后无论是P头发、还是变身男装/女装大佬,都能用这个开源数据集来训练了:

aa2d73db7046ada73c62ed342b67b119.png

作者介绍

81bb5aeae1441039940b66466217a548.png

一作Yiqian Wu,来自浙江大学计算机辅助设计与图形学(CAD&CG)实验室,目前在读博士生,兴趣是计算机视觉和人像编辑等。

8fbd6adc3e5aabb15e405f0a7acd999a.png

二作Yong-Liang Yang,巴斯大学助理教授,本硕博毕业于清华大学,曾师从胡事民教授,研究方向是计算机图形学、几何建模、VR/AR等。

345a1aa92846f285a5a5e07664a2800c.png

通讯作者金小刚,浙大CAD&CG实验室教授,研究方向包括电影特效模拟、自动驾驶仿真、创造性建模等。

是不是迫不及待想要一试“光头神器”了?

据作者表示,目前HairMapper的预训练代码还在加急制作中,马上就会放出来,而数据集已经可以用了~

项目地址:
https://github.com/oneThousand1000/non-hair-FFHQ

论文地址:
http://www.cad.zju.edu.cn/home/jin/cvpr2022/HairMapper.pdf

猜您喜欢:

7a7b42adaa19a5315d33e45c7d67d7a4.png 戳我,查看GAN的系列专辑~!

一顿午饭外卖,成为CV视觉的前沿弄潮儿!

超110篇!CVPR 2021最全GAN论文汇总梳理!

超100篇!CVPR 2020最全GAN论文梳理汇总!

拆解组新的GAN:解耦表征MixNMatch

StarGAN第2版:多域多样性图像生成

附下载 | 《可解释的机器学习》中文版

附下载 |《TensorFlow 2.0 深度学习算法实战》

附下载 |《计算机视觉中的数学方法》分享

《基于深度学习的表面缺陷检测方法综述》

《零样本图像分类综述: 十年进展》

《基于深度神经网络的少样本学习综述》

b01459042d8680a3bbaf16f77ceec069.png

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值