arXiv reaDer
3D形状表現のための深い陰的テンプレート
Deep Implicit Templates for 3D Shape Representation
一種の3D形状表現としての深い陰関数(DIF)は、そのコンパクトさと強力な表現力により、3Dビジョンコミュニティでますます人気が高まっています。ただし、ポリゴンメッシュベースのテンプレートとは異なり、DIFで表される形状間で密な対応やその他のセマンティック関係を推論することは依然として課題であり、テクスチャ転送や形状分析などでのアプリケーションが制限されます。この制限を克服し、DIFをより解釈しやすくするために、Deep Implicit Templatesを提案します。これは、深い陰的表現での明示的な対応推論をサポートする新しい3D形状表現です。私たちの重要なアイデアは、テンプレートの陰関数の条件付き変形としてDIFを定式化することです。この目的のために、条件付き空間変換を複数のアフィン変換に分解し、一般化機能を保証する空間ワーピングLSTMを提案します。さらに、教師なしの方法で正確な対応を持つもっともらしいテンプレートを学習しながら、高い再構成精度を達成するために、トレーニング損失は慎重に設計されています。実験によると、私たちの方法は、形状のコレクションに共通の暗黙のテンプレートを学習できるだけでなく、監視なしですべての形状にわたって同時に密な対応を確立することもできます。
Deep implicit functions (DIFs), as a kind of 3D shape representation, are becoming more and more popular in the 3D vision community due to their compactness and strong representation power. However, unlike polygon mesh-based templates, it remains a challenge to reason dense correspondences or other semantic relationships across shapes represented by DIFs, which limits its applications in texture transfer, shape analysis and so on. To overcome this limitation and also make DIFs more interpretable, we propose Deep Implicit Templates, a new 3D shape representation that supports explicit correspondence reasoning in deep implicit representations. Our key idea is to formulate DIFs as conditional deformations of a template implicit function. To this end, we propose Spatial Warping LSTM, which decomposes the conditional spatial transformation into multiple affine transformations and guarantees generalization capability. Moreover, the training loss is carefully designed in order to achieve high reconstruction accuracy while learning a plausible template with accurate correspondences in an unsupervised manner. Experiments show that our method can not only learn a common implicit template for a collection of shapes, but also establish dense correspondences across all the shapes simultaneously without any supervision.
updated: Mon Nov 30 2020 06:01:49 GMT+0000 (UTC)
published: Mon Nov 30 2020 06:01:49 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト