arXiv reaDer
Jaccard Metric Losses: ソフト ラベルを使用した Jaccard インデックスの最適化
Jaccard Metric Losses: Optimizing the Jaccard Index with Soft Labels
IoU 損失は、Jaccard インデックスを直接最適化するサロゲートです。セマンティック セグメンテーションでは、損失関数の一部として IoU 損失を利用することは、クロス エントロピー損失などのピクセル単位の損失を単独で最適化するよりも、Jaccard インデックス測定に関して優れたパフォーマンスを発揮することが示されています。最も顕著な IoU 損失は、ソフト Jaccard 損失と Lovasz-Softmax 損失です。ただし、これらの損失は、機械学習で遍在するソフトラベルと互換性がありません。この論文では、Jaccard metric loss (JML) を提案します。これは、ハード ラベルを使用した標準設定でのソフト Jaccard 損失と同じですが、ソフト ラベルと互換性があります。 JML を使用して、ソフト ラベルの最も一般的なユース ケースの 2 つ、ラベルのスムージングと知識の抽出を調べます。さまざまなアーキテクチャを使用した実験では、3 つのセマンティック セグメンテーション データセット (Cityscapes、PASCAL VOC、および DeepGlobe Land) でクロス エントロピー損失が大幅に改善されることが示されました。マージン。コードは https://github.com/zifuwanggg/JDTLosseshttps://github.com/zifuwanggg/JDTLosses で入手できます。
IoU losses are surrogates that directly optimize the Jaccard index. In semantic segmentation, leveraging IoU losses as part of the loss function is shown to perform better with respect to the Jaccard index measure than optimizing pixel-wise losses such as the cross-entropy loss alone. The most notable IoU losses are the soft Jaccard loss and the Lovasz-Softmax loss. However, these losses are incompatible with soft labels which are ubiquitous in machine learning. In this paper, we propose Jaccard metric losses (JMLs), which are identical to the soft Jaccard loss in a standard setting with hard labels, but are compatible with soft labels. With JMLs, we study two of the most popular use cases of soft labels: label smoothing and knowledge distillation. With a variety of architectures, our experiments show significant improvements over the cross-entropy loss on three semantic segmentation datasets (Cityscapes, PASCAL VOC and DeepGlobe Land), and our simple approach outperforms state-of-the-art knowledge distillation methods by a large margin. Code is available at: https://github.com/zifuwanggg/JDTLosseshttps://github.com/zifuwanggg/JDTLosses.
updated: Tue Mar 28 2023 20:40:12 GMT+0000 (UTC)
published: Sat Feb 11 2023 11:56:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト