arXiv reaDer
半教師ありセマンティック セグメンテーションのためのインスタンス固有およびモデル適応型教師
Instance-specific and Model-adaptive Supervision for Semi-supervised Semantic Segmentation
最近、半教師付きセマンティック セグメンテーションは、ラベル付きデータのごく一部で有望なパフォーマンスを達成しました。ただし、ほとんどの既存の研究では、ラベル付けされていないすべてのデータを平等に扱い、ラベル付けされていないインスタンス間の違いとトレーニングの難しさをほとんど考慮していません。ラベル付けされていないインスタンスを区別することで、インスタンス固有の監視を促進して、モデルの進化に動的に適応させることができます。この論文では、インスタンスの違いの重要性を強調し、iMAS と呼ばれる半教師付きセマンティック セグメンテーションのためのインスタンス固有およびモデル適応型の監視を提案します。モデルのパフォーマンスに依存して、iMAS はクラス加重対称交差オーバーユニオンを採用して、ラベルのない各インスタンスの定量的な硬さを評価し、モデルに適応する方法でラベルのないデータのトレーニングを監視します。具体的には、iMAS は、評価された硬度に基づいて、対応する一貫性の損失を重み付けすることにより、ラベルのないインスタンスから徐々に学習します。さらに、iMAS は各インスタンスの拡張を動的に調整し、拡張されたインスタンスの歪みの程度がトレーニング コース全体でモデルの一般化機能に適合するようにします。追加の損失とトレーニング手順を統合しない iMAS は、さまざまな半教師付きパーティション プロトコルの下でのセグメンテーション ベンチマークに対する現在の最先端のアプローチに対して、顕著なパフォーマンスの向上を得ることができます。
Recently, semi-supervised semantic segmentation has achieved promising performance with a small fraction of labeled data. However, most existing studies treat all unlabeled data equally and barely consider the differences and training difficulties among unlabeled instances. Differentiating unlabeled instances can promote instance-specific supervision to adapt to the model's evolution dynamically. In this paper, we emphasize the cruciality of instance differences and propose an instance-specific and model-adaptive supervision for semi-supervised semantic segmentation, named iMAS. Relying on the model's performance, iMAS employs a class-weighted symmetric intersection-over-union to evaluate quantitative hardness of each unlabeled instance and supervises the training on unlabeled data in a model-adaptive manner. Specifically, iMAS learns from unlabeled instances progressively by weighing their corresponding consistency losses based on the evaluated hardness. Besides, iMAS dynamically adjusts the augmentation for each instance such that the distortion degree of augmented instances is adapted to the model's generalization capability across the training course. Not integrating additional losses and training procedures, iMAS can obtain remarkable performance gains against current state-of-the-art approaches on segmentation benchmarks under different semi-supervised partition protocols.
updated: Mon Nov 21 2022 10:37:28 GMT+0000 (UTC)
published: Mon Nov 21 2022 10:37:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト