arXiv reaDer
ビデオの顕著なオブジェクト検出のためのモーションガイド付き注意
Motion Guided Attention for Video Salient Object Detection
  ビデオの顕著なオブジェクト検出は、ビデオ内で最も視覚的に特徴的なオブジェクトを発見することを目的としています。ビデオの顕著なオブジェクトの検出中にオブジェクトの動きを効果的に考慮する方法は重要な問題です。既存の最先端の方法では、オプティカルフロー画像内のモーションコンテキストを明示的にモデル化および収集したり、空間コンテキストを無視したりしません。本論文では、マルチタスクモーションガイドビデオ顕著オブジェクト検出ネットワークを開発します。これは、2つのサブネットワークを使用して2つのサブタスクを達成することを学習します.1つのサブネットワークは静止画像の顕著オブジェクト検出用で、もう1つはモーション顕著性検出用です。オプティカルフロー画像。さらに、モーション顕著サブネットワークを利用して静止画像のサブネットワークに参加し、強化する一連の新しいモーションガイド付き注意モジュールを紹介します。これらの2つのサブネットワークは、エンドツーエンドのトレーニングによって相互に適応することを学習します。実験結果は、提案された方法が、広範囲のベンチマークで既存の最先端のアルゴリズムを大幅に上回ることを示しています。シンプルで効果的なアプローチが強固なベースラインとして機能し、ビデオの顕著なオブジェクト検出の将来の研究を容易にするのに役立つことを願っています。コードとモデルが利用可能になります。
Video salient object detection aims at discovering the most visually distinctive objects in a video. How to effectively take object motion into consideration during video salient object detection is a critical issue. Existing state-of-the-art methods either do not explicitly model and harvest motion cues or ignore spatial contexts within optical flow images. In this paper, we develop a multi-task motion guided video salient object detection network, which learns to accomplish two sub-tasks using two sub-networks, one sub-network for salient object detection in still images and the other for motion saliency detection in optical flow images. We further introduce a series of novel motion guided attention modules, which utilize the motion saliency sub-network to attend and enhance the sub-network for still images. These two sub-networks learn to adapt to each other by end-to-end training. Experimental results demonstrate that the proposed method significantly outperforms existing state-of-the-art algorithms on a wide range of benchmarks. We hope our simple and effective approach will serve as a solid baseline and help ease future research in video salient object detection. Code and models will be made available.
updated: Thu Oct 03 2019 17:03:23 GMT+0000 (UTC)
published: Mon Sep 16 2019 08:44:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト