arXiv reaDer
決定可能性ベースの損失関数
A Decidability-Based Loss Function
今日、ディープラーニングは、顔認識や音声認識などのバイオメトリクスを含む幅広い問題の標準的なアプローチです。バイオメトリクスの問題では、多くの場合、ディープラーニングモデルを使用して画像から特徴を抽出します。これは埋め込みとも呼ばれます。さらに、トレーニング中に使用される損失関数は、生成される埋め込みの品質に大きく影響します。この作業では、検証ルーチンの埋め込みの品質を向上させるために、決定可能性インデックスに基づく損失関数が提案されています。私たちの提案であるD-lossは、ハードサンプルの使用やトリッキーなパラメーターチューニングなど、収束が遅くなる可能性のあるトリプレットベースの損失の欠点を回避します。提案されたアプローチは、MNIST、Fashion-MNIST、CIFAR10、CASIA-IrisV4の4つの異なるベンチマークで、Softmax(クロスエントロピー)、Triplets Soft-Hard、およびMultiSimilarityの損失と比較されます。達成された結果は、文献の他の一般的な測定基準と比較した場合の提案の有効性を示しています。 D損失の計算は、単純で、ノンパラメトリックで、実装が簡単であることに加えて、クラス間シナリオとクラス内シナリオの両方に適しています。
Nowadays, deep learning is the standard approach for a wide range of problems, including biometrics, such as face recognition and speech recognition, etc. Biometric problems often use deep learning models to extract features from images, also known as embeddings. Moreover, the loss function used during training strongly influences the quality of the generated embeddings. In this work, a loss function based on the decidability index is proposed to improve the quality of embeddings for the verification routine. Our proposal, the D-loss, avoids some Triplet-based loss disadvantages such as the use of hard samples and tricky parameter tuning, which can lead to slow convergence. The proposed approach is compared against the Softmax (cross-entropy), Triplets Soft-Hard, and the Multi Similarity losses in four different benchmarks: MNIST, Fashion-MNIST, CIFAR10 and CASIA-IrisV4. The achieved results show the efficacy of the proposal when compared to other popular metrics in the literature. The D-loss computation, besides being simple, non-parametric and easy to implement, favors both the inter-class and intra-class scenarios.
updated: Sun Sep 12 2021 14:26:27 GMT+0000 (UTC)
published: Sun Sep 12 2021 14:26:27 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト