arXiv reaDer
セマンティックセグメンテーションタスクの転送可能性の推定
Transferability Estimation for Semantic Segmentation Task
転送可能性の見積もりは、ソースモデル(またはソースタスク)をターゲットタスクに転送するときのパフォーマンスを予測するための転送学習の基本的な問題です。転送可能性スコアのガイダンスにより、実際に転送を実行しなくても、転送可能なソースモデルを効率的に選択できます。最近の分析的転送可能性メトリックは主に画像分類問題のために設計されており、現在、自動運転や医療画像分析などに不可欠な問題であるセマンティックセグメンテーションタスクの転送可能性推定に関する特定の調査はありません。セマンティックセグメンテーションタスクへの分析的転送可能性メトリックOTCE(最適トランスポートベースの条件付きエントロピー)スコア。 OTCEスコアを適用する際の課題は、高次元のセグメンテーション出力です。これは、許容可能な計算コストの下で、非常に多くのピクセル間の最適な結合を見つけるのが困難です。したがって、OTCEスコアを計算するためにNピクセルをランダムにサンプリングし、K回の繰り返しに対する期待値を最終的な転送可能性スコアとして採用することを提案します。 Cityscapes、BDD100K、GTA5データセットの実験的評価は、OTCEスコアが転送パフォーマンスと高度に相関していることを示しています。
Transferability estimation is a fundamental problem in transfer learning to predict how good the performance is when transferring a source model (or source task) to a target task. With the guidance of transferability score, we can efficiently select the highly transferable source models without performing the real transfer in practice. Recent analytical transferability metrics are mainly designed for image classification problem, and currently there is no specific investigation for the transferability estimation of semantic segmentation task, which is an essential problem in autonomous driving, medical image analysis, etc. Consequently, we further extend the recent analytical transferability metric OTCE (Optimal Transport based Conditional Entropy) score to the semantic segmentation task. The challenge in applying the OTCE score is the high dimensional segmentation output, which is difficult to find the optimal coupling between so many pixels under an acceptable computation cost. Thus we propose to randomly sample N pixels for computing OTCE score and take the expectation over K repetitions as the final transferability score. Experimental evaluation on Cityscapes, BDD100K and GTA5 datasets demonstrates that the OTCE score highly correlates with the transfer performance.
updated: Mon Oct 11 2021 03:05:54 GMT+0000 (UTC)
published: Thu Sep 30 2021 16:21:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト