arXiv reaDer
ドメイン適応のためのバッチ正規化分類器
A Batch Normalization Classifier for Domain Adaptation
トレーニングセット外の予期しないデータで適切に機能するようにモデルを適応させることは、新しいアプローチの動機付けを続ける一般的な問題です。ソフトマックスアクティベーションの前に、出力レイヤーでバッチ正規化を適用すると、洗練されたResNetモデルのビジュアルデータドメイン全体で一般化が改善されることを示します。このアプローチでは、計算の複雑さはごくわずかですが、データドメインの整列を明示的に学習する多くのドメイン適応方法よりも優れています。この手法をOffice-Homeデータセットでベンチマークし、バッチ正規化が他の主要な方法と競合することを示します。この方法は、適応中のソースデータの存在に敏感ではないことを示し、さらに、訓練されたテンソル分布への影響はスパース性に向かう傾向があることを示します。コードはhttps://github.com/matthewbehrend/BNCで入手できます。
Adapting a model to perform well on unforeseen data outside its training set is a common problem that continues to motivate new approaches. We demonstrate that application of batch normalization in the output layer, prior to softmax activation, results in improved generalization across visual data domains in a refined ResNet model. The approach adds negligible computational complexity yet outperforms many domain adaptation methods that explicitly learn to align data domains. We benchmark this technique on the Office-Home dataset and show that batch normalization is competitive with other leading methods. We show that this method is not sensitive to presence of source data during adaptation and further present the impact on trained tensor distributions tends toward sparsity. Code is available at https://github.com/matthewbehrend/BNC
updated: Mon Mar 22 2021 08:03:44 GMT+0000 (UTC)
published: Mon Mar 22 2021 08:03:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト