arXiv reaDer
ドメイン転送における適応知識の視覚化
Visualizing Adapted Knowledge in Domain Transfer
ソースデータでトレーニングされたソースモデルと教師なしドメイン適応(UDA)を通じて学習されたターゲットモデルは、通常、異なる知識をエンコードします。適応プロセスを理解するために、私たちは彼らの知識の違いを画像翻訳で描写します。具体的には、翻訳された画像とその元のバージョンをそれぞれ2つのモデルにフィードし、2つのブランチを作成します。翻訳された画像を更新することにより、2つのブランチから同様の出力を強制します。このような要件が満たされると、2つの画像の違いが補正され、モデル間の知識の違いを表すことができます。 2つのブランチから同様の出力を適用し、適応した知識を表現するために、ターゲット画像と2つのモデルのみを使用してソーススタイルの画像を生成するソースフリーの画像変換方法を提案します。異なるUDAメソッドを使用して、いくつかのデータセットで適応された知識を視覚化し、生成された画像が2つのドメイン間のスタイルの違いをうまくキャプチャしていることを確認します。アプリケーションでは、生成された画像により、ソースデータにアクセスせずにターゲットモデルをさらに調整できることを示します。コードはhttps://github.com/hou-yz/DA_visualizationで入手できます。
A source model trained on source data and a target model learned through unsupervised domain adaptation (UDA) usually encode different knowledge. To understand the adaptation process, we portray their knowledge difference with image translation. Specifically, we feed a translated image and its original version to the two models respectively, formulating two branches. Through updating the translated image, we force similar outputs from the two branches. When such requirements are met, differences between the two images can compensate for and hence represent the knowledge difference between models. To enforce similar outputs from the two branches and depict the adapted knowledge, we propose a source-free image translation method that generates source-style images using only target images and the two models. We visualize the adapted knowledge on several datasets with different UDA methods and find that generated images successfully capture the style difference between the two domains. For application, we show that generated images enable further tuning of the target model without accessing source data. Code available at https://github.com/hou-yz/DA_visualization.
updated: Sat May 01 2021 11:11:24 GMT+0000 (UTC)
published: Tue Apr 20 2021 17:59:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト