arXiv reaDer
テクスチャの共起とテクスチャのバイアス除去のための空間的自己相似性を使用した画像変換
Image Translation using Texture Co-occurrence and Spatial Self-Similarity for Texture Debiasing
テクスチャバイアスのあるデータセットでトレーニングされた分類モデルは、バイアスのある表現がモデルに埋め込まれているため、通常、分布外のサンプルではパフォーマンスが低下します。最近、さまざまなバイアス除去方法がバイアスされた表現を解きほぐす試みをしましたが、他の関連情報を変更せずにテクスチャバイアスされた特徴を破棄することは依然として困難な作業です。この論文では、分類器をトレーニングするときにテクスチャバイアスを明示的に軽減するために、ソース画像のコンテンツと異なるセマンティックラベルを持つターゲット画像のテクスチャを使用して追加のトレーニング画像を生成する新しいテクスチャバイアス除去アプローチを提案します。私たちのモデルは、空間的な自己相似性の損失でソース画像からのコンテンツの詳細を保持しながら、テクスチャの共起損失を介してターゲットと生成された画像間のテクスチャの類似性を保証します。生成されたトレーニング画像と元のトレーニング画像の両方が組み合わされて、一貫性のないテクスチャバイアス表現に対して堅牢な改良された分類器がトレーニングされます。テクスチャバイアスを軽減する方法の能力を実証するために、既知のテクスチャバイアスを持つ5つのデータセットを使用します。すべての場合において、私たちの方法は既存の最先端の方法を上回りました。
Classification models trained on datasets with texture bias usually perform poorly on out-of-distribution samples since biased representations are embedded into the model. Recently, various debiasing methods have attempted to disentangle biased representations, but discarding texture biased features without altering other relevant information is still a challenging task. In this paper, we propose a novel texture debiasing approach to generate additional training images using the content of a source image and the texture of a target image with a different semantic label to explicitly mitigate texture biases when training a classifier. Our model ensures texture similarity between the target and generated images via a texture co-occurrence loss while preserving the content details from the source image with a spatial self-similarity loss. Both the generated and original training images are combined to train an improved classifier that is robust against inconsistent texture bias representations. We employ five datasets with known texture biases to demonstrate the ability of our method to mitigate texture bias. In all cases, our method outperformed existing state-of-the-art methods.
updated: Mon Mar 14 2022 01:18:10 GMT+0000 (UTC)
published: Fri Oct 15 2021 08:04:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト