PhotoWakeUp —— 创新实训(4)

论文再读

 

⑤
正面的身体自遮挡部位区域填充 使用PatchMatch [4]方法
处理背部纹理是一个开放的研究问题[27,10,28]。文中给了两种方法：
1、将正面文理镜像贴到背面
2、使用可选的用户指南进行绘制。
前后纹理用泊松混合缝合[32]

 

⑥
 运动序列来自论文9
他们有个ui界面，可以提供纹理填充方式选择和姿态调整等功能
又与论文15提到的方法进行了对比
又与[6,1]的比较
缺点：
1、阴影（影子）反射等处理不了
2、由于模糊，SMPL模型可能产生不正确的3D姿势。
3、由于重建的网格必须符合轮廓，因此形状可能看起来不切实际，例如鞋子形状错误; 另一方面，这可以处理抽象艺术
4、其他自遮挡问题
5、背影的处理（他们使用了[27,10,28]，给出的结果很模糊）
 

 

填洞
当用f(x)warp时，很容易出现这种情况。再次使用平均值坐标（mean value coordinates）来平滑法线贴图和蒙皮权重图（normals and skinning weights）
方法：对于法线图N中的每个孔H，我们收集孔边界上的点∂H，根据边界点计算点x∈H的平均值坐标，然后使用这些坐标插值边界法线。对蒙皮贴图W执行相同的操作，在∂H周围插入矢量蒙皮权重

 

面部对齐
        单视图面部建模技术[2,5,9]，对整个头部进行建模[7]，并从单个图像[4]进行建模是一个活跃的研究领域，这超出了本文的范围。