arXiv reaDer
深部地域競争による教師なし前景抽出
Unsupervised Foreground Extraction via Deep Region Competition
完全に教師なしの方法で画像から前景オブジェクトを抽出するように設計されたアルゴリズムであるDeepRegion Competition(DRC)を紹介します。前景の抽出は、背景からオブジェクトを識別して解きほぐすことに焦点を当てた一般的な画像セグメンテーションの特殊なケースと見なすことができます。この作業では、エネルギーベースの事前設定と生成画像モデリングをMixture of Experts(MoE)の形式で調整することにより、前景の抽出を再考します。ここでは、学習したピクセルの再割り当てを、の規則性をキャプチャするための必須の誘導バイアスとしてさらに紹介します。背景領域。このモデリングでは、前景と背景のパーティションは、期待値最大化(EM)によって自然に見つけることができます。提案された方法が、分割プロセス中の混合成分間の相互作用を効果的に活用することを示します。これは、領域の競合、一般的な画像セグメンテーションの独創的なアプローチに密接に関連しています。実験は、DRCが以前の方法と比較して、複雑な実世界のデータと挑戦的なマルチオブジェクトシーンでより競争力のあるパフォーマンスを示すことを示しています。さらに、DRCは、トレーニング中に見えないカテゴリからでも、新しい前景オブジェクトに一般化できる可能性があることを経験的に示しています。
We present Deep Region Competition (DRC), an algorithm designed to extract foreground objects from images in a fully unsupervised manner. Foreground extraction can be viewed as a special case of generic image segmentation that focuses on identifying and disentangling objects from the background. In this work, we rethink the foreground extraction by reconciling energy-based prior with generative image modeling in the form of Mixture of Experts (MoE), where we further introduce the learned pixel re-assignment as the essential inductive bias to capture the regularities of background regions. With this modeling, the foreground-background partition can be naturally found through Expectation-Maximization (EM). We show that the proposed method effectively exploits the interaction between the mixture components during the partitioning process, which closely connects to region competition, a seminal approach for generic image segmentation. Experiments demonstrate that DRC exhibits more competitive performances on complex real-world data and challenging multi-object scenes compared with prior methods. Moreover, we show empirically that DRC can potentially generalize to novel foreground objects even from categories unseen during training.
updated: Fri Oct 29 2021 02:32:44 GMT+0000 (UTC)
published: Fri Oct 29 2021 02:32:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト