2D画像から3D形状を推論することは、特にシングルビュー画像のみを自由に使用できる場合は、不可欠でありながら困難な作業です。オブジェクトは複雑な形状を持つことができますが、個々のパーツは通常、幾何学的プリミティブに近いため、モデル化が容易です。さらに、パーツは、特定のカテゴリのオブジェクト全体の外観の変化に対して堅牢な中間レベルの表現を提供します。この作業では、2D画像コレクションのみからの3Dパーツ検出の問題に取り組みます。監視のために手動で注釈が付けられたパーツに依存する代わりに、自己監視アプローチである潜在パーツ検出(LPD)を提案します。私たちの重要な洞察は、単純な形状に制約されながら、各パーツがオブジェクトの形状に忠実にフィットすることを可能にする、新しいパーツの形状を事前に学習することです。合成ShapeNet、PartNet、および実際のPascal 3D +データセットでの広範な実験は、私たちの方法が一貫したオブジェクトパーツを発見し、同じレベルの監視を備えた既存の方法と比較して好ましい再構成精度を達成することを示しています。
Reasoning 3D shapes from 2D images is an essential yet challenging task, especially when only single-view images are at our disposal. While an object can have a complicated shape, individual parts are usually close to geometric primitives and thus are easier to model. Furthermore, parts provide a mid-level representation that is robust to appearance variations across objects in a particular category. In this work, we tackle the problem of 3D part discovery from only 2D image collections. Instead of relying on manually annotated parts for supervision, we propose a self-supervised approach, latent part discovery (LPD). Our key insight is to learn a novel part shape prior that allows each part to fit an object shape faithfully while constrained to have simple geometry. Extensive experiments on the synthetic ShapeNet, PartNet, and real-world Pascal 3D+ datasets show that our method discovers consistent object parts and achieves favorable reconstruction accuracy compared to the existing methods with the same level of supervision.