arXiv reaDer
ソースフリードメイン適応のための固有の近隣構造の活用
Exploiting the Intrinsic Neighborhood Structure for Source-free Domain Adaptation
ドメイン適応(DA)は、ソースドメインとターゲットドメイン間のドメインシフトを軽減することを目的としています。ほとんどのDAメソッドは、ソースデータへのアクセスを必要としますが、多くの場合、それは不可能です(たとえば、データのプライバシーや知的財産のため)。このホワイトペーパーでは、ソースデータがない場合にソースの事前トレーニング済みモデルをターゲットドメインに適応させるという、困難なソースフリードメイン適応(SFDA)の問題に対処します。私たちの方法は、ソースドメイン分類子と一致しなくなった可能性のあるターゲットデータが依然として明確なクラスターを形成しているという観察に基づいています。ターゲットデータのローカルアフィニティを定義することでこの固有の構造をキャプチャし、ローカルアフィニティの高いデータ間のラベルの一貫性を促進します。より高い親和性を相互の隣人に割り当てる必要があることを観察し、ノイズの多い隣人の悪影響を減らすために自己正則化損失を提案します。さらに、より多くのコンテキストで情報を集約するために、アフィニティ値が小さい拡張された近隣を検討します。実験結果では、ターゲット機能の固有の構造がドメイン適応のための重要な情報源であることを確認します。このローカル構造は、ローカルネイバー、相互ネイバー、および拡張ネイバーを考慮することで効率的にキャプチャできることを示します。最後に、いくつかの2D画像と3D点群認識データセットで最先端のパフォーマンスを実現します。コードはhttps://github.com/Albert0147/SFDA_neighborsで入手できます。
Domain adaptation (DA) aims to alleviate the domain shift between source domain and target domain. Most DA methods require access to the source data, but often that is not possible (e.g. due to data privacy or intellectual property). In this paper, we address the challenging source-free domain adaptation (SFDA) problem, where the source pretrained model is adapted to the target domain in the absence of source data. Our method is based on the observation that target data, which might no longer align with the source domain classifier, still forms clear clusters. We capture this intrinsic structure by defining local affinity of the target data, and encourage label consistency among data with high local affinity. We observe that higher affinity should be assigned to reciprocal neighbors, and propose a self regularization loss to decrease the negative impact of noisy neighbors. Furthermore, to aggregate information with more context, we consider expanded neighborhoods with small affinity values. In the experimental results we verify that the inherent structure of the target features is an important source of information for domain adaptation. We demonstrate that this local structure can be efficiently captured by considering the local neighbors, the reciprocal neighbors, and the expanded neighborhood. Finally, we achieve state-of-the-art performance on several 2D image and 3D point cloud recognition datasets. Code is available in https://github.com/Albert0147/SFDA_neighbors.
updated: Mon Nov 29 2021 13:04:37 GMT+0000 (UTC)
published: Fri Oct 08 2021 15:40:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト