arXiv reaDer
2Dから3Dへの変換における点群変形のためのGraphX-Convolution
GraphX-Convolution for Point Cloud Deformation in 2D-to-3D Conversion
 この論文では、単一の静止画像からオブジェクトの点群を再構築するための新しい深い方法を提示します。現場の従来技術は、非効率的で高価な3D表現、出力とモデルパラメーターの数の間の依存性、または適切な計算操作の欠如により、正確でスケーラブルな3Dモデルの再構築に苦労しています。ランダムな点群をオブジェクトシェイプに2つのステップで変形することにより、これらを克服することを提案します:特徴のブレンドと変形。最初のステップでは、2Dオブジェクト画像から抽出されたグローバルおよびポイント固有の形状特徴が、ランダムに生成されたポイントクラウドのエンコードされた特徴とブレンドされ、その後、この混合が変形ステップに送られて、オブジェクト。変形プロセスでは、GraphXと呼ばれる新しいレイヤーを導入します。これは、一般的なグラフ畳み込みのようなポイント間の相互関係を考慮しますが、順序付けられていないセットで動作します。さらに、簡単なトリックを使用して、提案されたモデルは任意のサイズのポイントクラウドを生成できます。これは、これを行う最初の深い方法です。広範な実験により、単一画像の3D再構成において既存のモデルよりも優れており、最先端の距離スコアが半分になることが確認されています。
In this paper, we present a novel deep method to reconstruct a point cloud of an object from a single still image. Prior arts in the field struggle to reconstruct an accurate and scalable 3D model due to either the inefficient and expensive 3D representations, the dependency between the output and number of model parameters or the lack of a suitable computing operation. We propose to overcome these by deforming a random point cloud to the object shape through two steps: feature blending and deformation. In the first step, the global and point-specific shape features extracted from a 2D object image are blended with the encoded feature of a randomly generated point cloud, and then this mixture is sent to the deformation step to produce the final representative point set of the object. In the deformation process, we introduce a new layer termed as GraphX that considers the inter-relationship between points like common graph convolutions but operates on unordered sets. Moreover, with a simple trick, the proposed model can generate an arbitrary-sized point cloud, which is the first deep method to do so. Extensive experiments verify that we outperform existing models and halve the state-of-the-art distance score in single image 3D reconstruction.
updated: Fri Nov 15 2019 13:14:13 GMT+0000 (UTC)
published: Fri Nov 15 2019 13:14:13 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト