arXiv reaDer
対照的な自己教師あり表現学習による色変種の識別
Color Variants Identification via Contrastive Self-Supervised Representation Learning
この論文では、色の変化の識別の問題に対処するために、深い視覚的表現学習を利用します。特に、ファッション製品のカラーバリエーションの識別について説明します。これは、デザイン(またはスタイル)が完全に一致するが、色が異なるだけのファッション製品を識別する問題を指します。まず、2つの製品がカラーバリエーションであるかどうかを示す手動の注釈を取得することで、この問題を解決します。このような注釈を取得したら、トリプレット損失ベースのニューラルネットワークモデルをトレーニングして、ファッション製品の深い表現を学習します。ただし、本書で取り上げたような大規模な実世界の産業データセットの場合、データセット全体の注釈を取得することは不可能です。したがって、表現を取得するための自己教師あり学習の使用を検討します。既存の最先端の自己監視方式は、監視ありバージョンのカラーバリエーションモデルと競合しないことがわかりました。これに対処するために、さらに、新しい対照的な損失ベースの自己教師ありカラーバリアントモデルを提案します。直感的に、私たちのモデルは、既存の方法でデータ拡張に通常使用されるランダムな切り抜きに焦点を合わせるのではなく、固定された方法でオブジェクトのさまざまな部分に焦点を合わせます。私たちは、私たちの方法を定量的および定性的に評価して、既存の自己監視法、場合によっては教師ありモデルよりも優れていることを示します。
In this paper, we utilize deep visual Representation Learning to address the problem of identification of color variants. In particular, we address color variants identification in fashion products, which refers to the problem of identifying fashion products that match exactly in their design (or style), but only to differ in their color. Firstly, we solve this problem by obtaining manual annotations depicting whether two products are color variants. Having obtained such annotations, we train a triplet loss based neural network model to learn deep representations of fashion products. However, for large scale real-world industrial datasets such as addressed in our paper, it is infeasible to obtain annotations for the entire dataset. Hence, we rather explore the use of self-supervised learning to obtain the representations. We observed that existing state-of-the-art self-supervised methods do not perform competitive against the supervised version of our color variants model. To address this, we additionally propose a novel contrastive loss based self-supervised color variants model. Intuitively, our model focuses on different parts of an object in a fixed manner, rather than focusing on random crops typically used for data augmentation in existing methods. We evaluate our method both quantitatively and qualitatively to show that it outperforms existing self-supervised methods, and at times, the supervised model as well.
updated: Sat Apr 17 2021 15:51:56 GMT+0000 (UTC)
published: Sat Apr 17 2021 15:51:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト