arXiv reaDer
Meta-Learning 3D Shape Segmentation Functions
ディープニューラルネットワークを使用して堅牢な3D形状セグメンテーション機能を学習することは、強力なパラダイムとして浮上しており、各3D形状の一貫したパーツセグメンテーションを生成する上で有望なパフォーマンスを提供します。 3D形状セグメンテーション関数全体を一般化するには、それぞれの関数空間で事前にロバストに学習する必要があり、3D構造の大幅な変動がある場合でも形状の一貫したパーツセグメンテーションが可能になります。既存の一般化手法は、大規模なラベル付きデータセットでの3D形状セグメンテーション関数の広範なトレーニングに依存しています。この論文では、3D形状セグメンテーション関数空間の学習をメタ学習問題として形式化することを提案し、トレーニングデータがないか限られている新しい形状にすばやく適応できる3Dセグメンテーションモデルを予測することを目指しました。より具体的には、各タスクを、3D空間の入力ポイントとして受け取り、パーツセグメントラベルを予測する形状条件付き3Dセグメンテーション関数の教師なし学習として定義します。 3Dセグメンテーション機能は、パーツラベルを必要とせずに、自己監視型の3D形状再構成損失によってトレーニングされます。また、3D形状を入力として受け取り、それぞれの3Dセグメンテーション関数空間の事前予測を行うメタラーナーとして補助ディープニューラルネットワークを導入します。実験では、Meta-3DSegとして示されるメタ学習アプローチが、3D形状セグメンテーション機能のディープニューラルネットワークの従来の設計に比べて、教師なし3D形状セグメンテーションの改善につながることを示しています。
Learning robust 3D shape segmentation functions with deep neural networks has emerged as a powerful paradigm, offering promising performance in producing a consistent part segmentation of each 3D shape. Generalizing across 3D shape segmentation functions requires robust learning of priors over the respective function space and enables consistent part segmentation of shapes in presence of significant 3D structure variations. Existing generalization methods rely on extensive training of 3D shape segmentation functions on large-scale labeled datasets. In this paper, we proposed to formalize the learning of a 3D shape segmentation function space as a meta-learning problem, aiming to predict a 3D segmentation model that can be quickly adapted to new shapes with no or limited training data. More specifically, we define each task as unsupervised learning of shape-conditioned 3D segmentation function which takes as input points in 3D space and predicts the part-segment labels. The 3D segmentation function is trained by a self-supervised 3D shape reconstruction loss without the need for part labels. Also, we introduce an auxiliary deep neural network as a meta-learner which takes as input a 3D shape and predicts the prior over the respective 3D segmentation function space. We show in experiments that our meta-learning approach, denoted as Meta-3DSeg, leads to improvements on unsupervised 3D shape segmentation over the conventional designs of deep neural networks for 3D shape segmentation functions.
updated: Tue Feb 06 2024 07:40:00 GMT+0000 (UTC)
published: Fri Oct 08 2021 01:50:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト