ディープ メトリック ラーニング (DML) は、埋め込みスペースを一般化することを学習することにより、視覚的な類似性とゼロ ショット アプリケーションのための重要なツールを提供しますが、DML の最近の作業では、トレーニング目標全体で強力なパフォーマンス飽和が示されています。ただし、一般化容量は、埋め込み空間の次元に比例することが知られています。残念ながら、高次元の埋め込みは、ダウンストリーム アプリケーションの検索コストも高くなります。これを改善するために、\emph{同時類似性に基づく自己蒸留 (S2SD) を提案します。 S2SD は、補助的な高次元の埋め込みと特徴空間からの知識の蒸留によって DML を拡張し、テスト時間のコストを維持し、トレーニング時間の変更を無視して、トレーニング中に補完的なコンテキストを活用します。さまざまな目的と標準ベンチマークでの実験とアブレーションにより、S2SD は Recall@1 で最大 7% の顕著な改善を提供すると同時に、新しい最先端を設定することも示しています。コードは https://github.com/MLforHealth/S2SD で入手できます。
Deep Metric Learning (DML) provides a crucial tool for visual similarity and zero-shot applications by learning generalizing embedding spaces, although recent work in DML has shown strong performance saturation across training objectives. However, generalization capacity is known to scale with the embedding space dimensionality. Unfortunately, high dimensional embeddings also create higher retrieval cost for downstream applications. To remedy this, we propose \emph{Simultaneous Similarity-based Self-distillation (S2SD). S2SD extends DML with knowledge distillation from auxiliary, high-dimensional embedding and feature spaces to leverage complementary context during training while retaining test-time cost and with negligible changes to the training time. Experiments and ablations across different objectives and standard benchmarks show S2SD offers notable improvements of up to 7% in Recall@1, while also setting a new state-of-the-art. Code available at https://github.com/MLforHealth/S2SD.