这是CVPR2018的一篇关于efficient video segmentation的文章,paper链接https://arxiv.org/abs/1802.01218,作者的homepage https://sites.google.com/site/linjieyang89/,tensorflow的code已经被released出来了https://github.com/linjieyangsc/video_seg
文章要做的事情:
输入:annotated first frame+video   输出:video mask
文章中show出来的与其他方法做对比的exmaple如下所示。
Efficient Video Object Segmentation via Network Modulation
在 DAVIS 2016和YoutubeObjects datasets上面与state-of-the-art对比的实验结果如下所示。
Efficient Video Object Segmentation via Network Modulation
在DAVIS 2017 dataset上面与state-of-the-art对比的实验结果如下所示。
Efficient Video Object Segmentation via Network Modulation

method

paper的framework如下所示。
Efficient Video Object Segmentation via Network Modulation
framework主要分为下面的三部分:

  • fully-convolutional main segmentation network。
  • visual modulator network。
  • spatial modulator network。

相关文章: