異種データ分布(別名ドメイン)と個別のタスク間での転送学習は、ドメインまたはタスクのいずれかが同じであると想定される従来の転送学習よりも一般的で困難な問題です。ニューラルネットワークベースの機能転送は転送学習アプリケーションで広く使用されていますが、最適な転送戦略を見つけるには、時間のかかる実験とドメイン知識が必要です。最適なトランスポートベースの条件付きエントロピー(OTCE)と呼ばれる転送可能性メトリックを提案し、このようなクロスドメインおよびクロスタスク機能転送設定での教師あり分類タスクの転送パフォーマンスを分析的に予測します。私たちのOTCEスコアは、ドメインの違いとタスクの違いの組み合わせとして転送可能性を特徴づけ、統一されたフレームワークのデータからそれらを明示的に評価します。具体的には、最適なトランスポートを使用して、ドメインの違いと、ソースとターゲットの分布間の最適な結合を推定します。これを使用して、ターゲットタスクの条件付きエントロピー(タスクの違い)を導き出します。最大のクロスドメインデータセットDomainNetおよびOffice31での実験は、OTCEが、最先端の方法と比較して、グラウンドトゥルース転送の精度との相関において平均21%の増加を示すことを示しています。また、ソースモデルの選択とマルチソース機能の融合を含むOTCEスコアの2つのアプリケーションを調査します。
Transfer learning across heterogeneous data distributions (a.k.a. domains) and distinct tasks is a more general and challenging problem than conventional transfer learning, where either domains or tasks are assumed to be the same. While neural network based feature transfer is widely used in transfer learning applications, finding the optimal transfer strategy still requires time-consuming experiments and domain knowledge. We propose a transferability metric called Optimal Transport based Conditional Entropy (OTCE), to analytically predict the transfer performance for supervised classification tasks in such cross-domain and cross-task feature transfer settings. Our OTCE score characterizes transferability as a combination of domain difference and task difference, and explicitly evaluates them from data in a unified framework. Specifically, we use optimal transport to estimate domain difference and the optimal coupling between source and target distributions, which is then used to derive the conditional entropy of the target task (task difference). Experiments on the largest cross-domain dataset DomainNet and Office31 demonstrate that OTCE shows an average of 21% gain in the correlation with the ground truth transfer accuracy compared to state-of-the-art methods. We also investigate two applications of the OTCE score including source model selection and multi-source feature fusion.