arXiv reaDer
深さからの顕著性の促進:深い教師なしRGB-D顕著性検出
Promoting Saliency From Depth: Deep Unsupervised RGB-D Saliency Detection
深度センサーの人気と深層学習技術の急速な進歩もあって、RGB-D顕著な物体検出(RGB-D SOD)への関心の高まりが近年目撃されています。残念ながら、既存のRGB-D SODメソッドでは、通常、ピクセルレベルで完全に注釈が付けられた大量のトレーニング画像が必要です。面倒で時間のかかる手動の注釈は、さまざまな実際のシナリオで実際のボトルネックになっています。一方、現在の教師なしRGB-D SOD手法は、依然として手作りの特徴表現に大きく依存しています。これは、トレーニング中に手動のピクセルレベルの注釈を必要としない、教師なしRGB-D顕著性検出アプローチをこの論文で提案するように促します。これは、トレーニングパイプラインの2つの重要な要素によって実現されます。まず、深さを解きほぐした顕著性更新(DSU)フレームワークは、反復的なフォローアップの改良を伴う疑似ラベルを自動的に生成するように設計されています。これにより、顕著性ネットワークをトレーニングするためのより信頼できる監視信号が提供されます。次に、より信頼性の高い疑似ラベルを強調表示するために適切に再重み付けすることにより、ノイズの多い疑似ラベルの問題に取り組むための注意深いトレーニング戦略が導入されます。広範な実験は、困難な教師なしRGB-DSODシナリオに取り組む際の私たちのアプローチの優れた効率と有効性を示しています。さらに、私たちのアプローチは、完全に監視された状況で機能するように適合させることもできます。経験的研究によると、私たちのアプローチを取り入れることで、既存の監視対象RGB-DSODモデルのパフォーマンスが大幅に向上します。
Growing interests in RGB-D salient object detection (RGB-D SOD) have been witnessed in recent years, owing partly to the popularity of depth sensors and the rapid progress of deep learning techniques. Unfortunately, existing RGB-D SOD methods typically demand large quantity of training images being thoroughly annotated at pixel-level. The laborious and time-consuming manual annotation has become a real bottleneck in various practical scenarios. On the other hand, current unsupervised RGB-D SOD methods still heavily rely on handcrafted feature representations. This inspires us to propose in this paper a deep unsupervised RGB-D saliency detection approach, which requires no manual pixel-level annotation during training. It is realized by two key ingredients in our training pipeline. First, a depth-disentangled saliency update (DSU) framework is designed to automatically produce pseudo-labels with iterative follow-up refinements, which provides more trustworthy supervision signals for training the saliency network. Second, an attentive training strategy is introduced to tackle the issue of noisy pseudo-labels, by properly re-weighting to highlight the more reliable pseudo-labels. Extensive experiments demonstrate the superior efficiency and effectiveness of our approach in tackling the challenging unsupervised RGB-D SOD scenarios. Moreover, our approach can also be adapted to work in fully-supervised situation. Empirical studies show the incorporation of our approach gives rise to notably performance improvement in existing supervised RGB-D SOD models.
updated: Sun May 15 2022 04:44:44 GMT+0000 (UTC)
published: Sun May 15 2022 04:44:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト