这是CVPR2018的一篇关于efficient video segmentation的文章,paper链接https://arxiv.org/abs/1802.01218,作者的homepage https://sites.google.com/site/linjieyang89/,tensorflow的code已经被released出来了https://github.com/linjieyangsc/video_seg。
文章要做的事情:
输入:annotated first frame+video 输出:video mask
文章中show出来的与其他方法做对比的exmaple如下所示。
在 DAVIS 2016和YoutubeObjects datasets上面与state-of-the-art对比的实验结果如下所示。
在DAVIS 2017 dataset上面与state-of-the-art对比的实验结果如下所示。
method
paper的framework如下所示。
framework主要分为下面的三部分:
- fully-convolutional main segmentation network。
- visual modulator network。
- spatial modulator network。