arXiv reaDer
PointDAN: A Multi-Scale 3D Domain Adaption Network for Point Cloud Representation
 ドメイン適応(DA)アプローチは、幅広い機械学習とコンピュータービジョンのタスク(つまり、分類、検出、およびセグメンテーション)で大幅な改善を達成しました。ただし、私たちが知る限り、3D点群データで直接ドメイン適応を実現する方法はほとんどありません。点群データのユニークな課題は、その豊富な空間幾何情報にあり、オブジェクト全体のセマンティクスは、地域幾何構造を含めることによって貢献されます。具体的には、グローバルフィーチャアラインメントに苦労し、ローカルジオメトリ情報を無視するほとんどの汎用DAメソッドは、3Dドメインアラインメントに適していません。本稿では、点群データ用の新しい3Dドメイン適応ネットワーク(PointDAN)を提案します。 PointDANは、マルチレベルでグローバル機能とローカル機能を共同で調整します。ローカルアラインメントの場合、ドメインをアラインメントするための差別的なローカル構造をモデル化するために、調整された受容フィールドを持つ自己適応(SA)ノードモジュールを提案します。階層的にスケーリングされた機能を表すために、ノードアテンションモジュールがさらに導入され、オブジェクトおよびドメイン全体のSAノードの関係に重みが付けられます。グローバルアラインメントでは、敵対者のトレーニング戦略を採用して、ドメイン全体でグローバル機能を学習およびアラインメントします。 3DポイントクラウドDAシナリオには共通の評価ベンチマークがないため、クロスドメイン3Dオブジェクト用の3つの一般的な3Dオブジェクト/シーンデータセット(ModelNet、ShapeNet、ScanNet)から抽出した一般的なベンチマーク(PointDA-10)を構築します分類ファッション。 PointDA-10での広範な実験は、最先端の汎用DAメソッドに対するモデルの優位性を示しています。
Domain Adaptation (DA) approaches achieved significant improvements in a wide range of machine learning and computer vision tasks (i.e., classification, detection, and segmentation). However, as far as we are aware, there are few methods yet to achieve domain adaptation directly on 3D point cloud data. The unique challenge of point cloud data lies in its abundant spatial geometric information, and the semantics of the whole object is contributed by including regional geometric structures. Specifically, most general-purpose DA methods that struggle for global feature alignment and ignore local geometric information are not suitable for 3D domain alignment. In this paper, we propose a novel 3D Domain Adaptation Network for point cloud data (PointDAN). PointDAN jointly aligns the global and local features in multi-level. For local alignment, we propose Self-Adaptive (SA) node module with an adjusted receptive field to model the discriminative local structures for aligning domains. To represent hierarchically scaled features, node-attention module is further introduced to weight the relationship of SA nodes across objects and domains. For global alignment, an adversarial-training strategy is employed to learn and align global features across domains. Since there is no common evaluation benchmark for 3D point cloud DA scenario, we build a general benchmark (i.e., PointDA-10) extracted from three popular 3D object/scene datasets (i.e., ModelNet, ShapeNet and ScanNet) for cross-domain 3D objects classification fashion. Extensive experiments on PointDA-10 illustrate the superiority of our model over the state-of-the-art general-purpose DA methods.
updated: Thu Nov 07 2019 04:03:07 GMT+0000 (UTC)
published: Thu Nov 07 2019 04:03:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト