arXiv reaDer
境界の合成: 弱い教師ありの顕著なオブジェクト検出のための境界を意識した自己矛盾のないフレームワーク
Synthesize Boundaries: A Boundary-aware Self-consistent Framework for Weakly Supervised Salient Object Detection
完全に監視された顕著なオブジェクト検出 (SOD) は、ピクセル単位の注釈を使用した高価で時間のかかるデータに基づいて、かなりの進歩を遂げました。最近、パフォーマンスを維持しながらラベル付けの負担を軽減するために、落書きベースの SOD メソッドがいくつか提案されています。ただし、エッジ情報が不足している手書きの注釈から正確な境界の詳細を学習することは依然として困難です。この論文では、余分な補助データを導入することなく、設計された合成画像とラベルから正確な境界を学習することを提案します。合成画像は、顕著なオブジェクトの実際の凹面領域をシミュレートする合成凹面領域を挿入することにより、境界情報を作成します。さらに、顕著性検出器をトレーニングするために、グローバル インテグラル ブランチ (GIB) と境界認識ブランチ (BAB) で構成される新しい自己矛盾のないフレームワークを提案します。 GIB は、入力が元の画像である不可欠な顕著なオブジェクトを識別することを目的としています。 BAB は、入力が合成画像である正確な境界の予測を支援することを目的としています。これらの 2 つのブランチは、顕著なオブジェクトを識別しながら正確な境界を予測するように顕著性検出器を導くために、自己無撞着損失を介して接続されています。 5 つのベンチマークでの実験結果は、私たちの方法が最先端の弱く監視された SOD メソッドよりも優れており、完全に監視された方法とのギャップをさらに狭めていることを示しています。
Fully supervised salient object detection (SOD) has made considerable progress based on expensive and time-consuming data with pixel-wise annotations. Recently, to relieve the labeling burden while maintaining performance, some scribble-based SOD methods have been proposed. However, learning precise boundary details from scribble annotations that lack edge information is still difficult. In this paper, we propose to learn precise boundaries from our designed synthetic images and labels without introducing any extra auxiliary data. The synthetic image creates boundary information by inserting synthetic concave regions that simulate the real concave regions of salient objects. Furthermore, we propose a novel self-consistent framework that consists of a global integral branch (GIB) and a boundary-aware branch (BAB) to train a saliency detector. GIB aims to identify integral salient objects, whose input is the original image. BAB aims to help predict accurate boundaries, whose input is the synthetic image. These two branches are connected through a self-consistent loss to guide the saliency detector to predict precise boundaries while identifying salient objects. Experimental results on five benchmarks demonstrate that our method outperforms the state-of-the-art weakly supervised SOD methods and further narrows the gap with the fully supervised methods.
updated: Sun Dec 04 2022 08:22:45 GMT+0000 (UTC)
published: Sun Dec 04 2022 08:22:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト