arXiv reaDer
地域オブジェクト性による見えないクラスのマイニング: インクリメンタル セグメンテーションの単純なベースライン
Mining Unseen Classes via Regional Objectness: A Simple Baseline for Incremental Segmentation
漸進的または継続的な学習は、壊滅的な忘却 (新しい概念を学習するときに以前に学んだ知識が忘れられる現象) を軽減するために、画像分類タスクについて広く研究されてきました。クラス増分セマンティック セグメンテーションの場合、このような現象はバックグラウンド シフトによりさらに悪化することがよくあります。つまり、前の段階で学習した一部の概念が現在のトレーニング段階でバックグラウンド クラスに割り当てられるため、これらの古い概念のパフォーマンスが大幅に低下します。この問題に対処するために、このホワイト ペーパーでは、Regional Objectness for Segmentation (MicroSeg) を介して見えないクラスをマイニングするという名前のシンプルで効果的な方法を提案します。私たちのマイクロセグは、オブジェクト性の強い背景領域が、歴史的または将来の段階でそれらの概念に属している可能性があるという仮定に基づいています。したがって、現在のトレーニング段階で古い知識を忘れないようにするために、マイクロセグはまず、提案ジェネレーターを使用して、指定された画像を数百のセグメント提案に分割します。バックグラウンドからの強い客観性を持つこれらのセグメント提案は、最適化中にクラスター化され、新しく定義されたラベルが割り当てられます。このようにして、特徴空間内の古い概念の分布を特徴付ける分布がよりよく認識され、それに応じて背景のシフトによって引き起こされる壊滅的な忘却が軽減されます。 Pascal VOC および ADE20K データセットでの広範な実験では、提案された MicroSeg の有効性を十分に検証する、最先端の技術と競合する結果が示されています。
Incremental or continual learning has been extensively studied for image classification tasks to alleviate catastrophic forgetting, a phenomenon that earlier learned knowledge is forgotten when learning new concepts. For class incremental semantic segmentation, such a phenomenon often becomes much worse due to the background shift, i.e., some concepts learned at previous stages are assigned to the background class at the current training stage, therefore, significantly reducing the performance of these old concepts. To address this issue, we propose a simple yet effective method in this paper, named Mining unseen Classes via Regional Objectness for Segmentation (MicroSeg). Our MicroSeg is based on the assumption that background regions with strong objectness possibly belong to those concepts in the historical or future stages. Therefore, to avoid forgetting old knowledge at the current training stage, our MicroSeg first splits the given image into hundreds of segment proposals with a proposal generator. Those segment proposals with strong objectness from the background are then clustered and assigned newly-defined labels during the optimization. In this way, the distribution characterizes of old concepts in the feature space could be better perceived, relieving the catastrophic forgetting caused by the background shift accordingly. Extensive experiments on Pascal VOC and ADE20K datasets show competitive results with state-of-the-art, well validating the effectiveness of the proposed MicroSeg.
updated: Sun Nov 13 2022 10:06:17 GMT+0000 (UTC)
published: Sun Nov 13 2022 10:06:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト