arXiv reaDer
ディープメトリック学習のためのマルチレベル距離正則化
Multi-level Distance Regularization for Deep Metric Learning
マルチレベル距離正則化(MDR)と呼ばれる深いメトリック学習のための新しい距離ベースの正則化方法を提案します。 MDRは、埋め込みベクトル間のペアワイズ距離を、ペア間の類似度を表す複数のレベルに正規化することにより、学習手順を明示的に妨害します。トレーニング段階では、モデルはMDRとディープメトリック学習の既存の損失関数の両方で同時にトレーニングされます。 2つの損失はお互いの目的を妨害し、学習プロセスを困難にします。さらに、MDRは、学習プロセスで一部の例が無視されたり、過度に影響を受けたりするのを防ぎます。これらにより、埋め込みネットワークのパラメーターをより一般化された局所最適点に決定することができます。ベルやホイッスルがなくても、単純なトリプレット損失を伴うMDRは、CUB-200-2011、Cars-196、Stanford Online Products、および店内服の検索など、さまざまなベンチマークデータセットで最先端のパフォーマンスを実現します。 MDRの有効性を示すために、その動作に関するアブレーション研究を広範囲に実行します。 MDRを簡単に採用することで、以前のアプローチのパフォーマンスと一般化能力を向上させることができます。
We propose a novel distance-based regularization method for deep metric learning called Multi-level Distance Regularization (MDR). MDR explicitly disturbs a learning procedure by regularizing pairwise distances between embedding vectors into multiple levels that represents a degree of similarity between a pair. In the training stage, the model is trained with both MDR and an existing loss function of deep metric learning, simultaneously; the two losses interfere with the objective of each other, and it makes the learning process difficult. Moreover, MDR prevents some examples from being ignored or overly influenced in the learning process. These allow the parameters of the embedding network to be settle on a local optima with better generalization. Without bells and whistles, MDR with simple Triplet loss achieves the-state-of-the-art performance in various benchmark datasets: CUB-200-2011, Cars-196, Stanford Online Products, and In-Shop Clothes Retrieval. We extensively perform ablation studies on its behaviors to show the effectiveness of MDR. By easily adopting our MDR, the previous approaches can be improved in performance and generalization ability.
updated: Mon Feb 08 2021 14:16:07 GMT+0000 (UTC)
published: Mon Feb 08 2021 14:16:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト