笔记目录(部分笔者省略)
Self-Supervised Scene De-occlusion
arXiv:2004.02788v1 [cs.CV] 6 Apr 2020
自监督场景去遮挡
注:限于作者水平,本笔记难免存在不妥之处,欢迎批评指正
原作知乎
问题定义
自监督的部分补全机制
部分补全网络的训练
Partial Completion Networks (PCNets)
PCNet-M for Mask Completion
PCNet-C for Content Completion
顺序恢复的推理过程
基于遮挡顺序的Amodal Completion
内容补全
与image inpainting的不同之处
Ordering-Grounded Amodal Completion
Amodal-Constrained Content Completion
解决疑问
为何要选取所有祖先节点作为遮挡物,而非仅仅直接遮挡的一阶祖先节点
Experiments
应用1: amodal mask自动生成
Amodal completion可视化结果
应用2: 场景编辑和重组
可以解决多个物体循环遮挡
不可解决两个物体互相遮挡
因为如下图中的互相遮挡的情况中,无法定义ordering graph。ordering graph是object level的,而互相遮挡则需要boundary-level de-occlusion。
用于Re-ID领域的思考