1.使用 a deep matting network 为给定的input frame 提取foreground color 和 alpha。使用了一个novel 技术“context-switching block”,这个技术可以有选择性的合并不同的输入线索。
in:
I:an image with a person in the foreground
B: an image of the background
S: a soft segmentation of the person
M: a stack of temporally nearby frames
out:
a foreground image F
alpha matte α
2.self-supervised scheme 用于增强matting的品质。
使用GAN的方式对原始模型进行优化。
G_Real
G_Adobe Adobe Matting Dataset