arXiv reaDer
Toward 3D Object Reconstruction from Stereo Images
  RGB画像からオブジェクトの3D形状を推測することは素晴らしい結果を示していますが、既存の方法は主に、問題を解決するためにトレーニングセットから最も類似した3Dモデルを認識することに依存しています。これらの方法は一般化が不十分で、見えないオブジェクトの再構築の質が低下する可能性があります。現在、ステレオカメラはデュアルレンズのスマートフォンやロボットなどの新しいデバイスに普及しており、ステレオ画像の2ビューの性質を利用して3D構造を探索し、再構成のパフォーマンスを向上させることができます。本論文では、2つの視点間の双方向の視差と特徴の対応を考慮して、オブジェクトの3D構造を推定する、ステレオ画像のペアからオブジェクトの3D形状を再構築するための新しいディープラーニングフレームワークを提案します。さらに、ShapeNetからレンダリングされた1,052,976ペアのステレオ画像と、対応する双方向の深度および視差マップを含む、大規模な合成ベンチマークデータセット、つまりStereoShapeNetを提示します。 StereoShapeNetベンチマークの実験結果は、提案されたフレームワークが最先端の方法よりも優れていることを示しています。
Inferring the 3D shape of an object from an RGB image has shown impressive results, however, existing methods rely primarily on recognizing the most similar 3D model from the training set to solve the problem. These methods suffer from poor generalization and may lead to low-quality reconstructions for unseen objects. Nowadays, stereo cameras are pervasive in emerging devices such as dual-lens smartphones and robots, which enables the use of the two-view nature of stereo images to explore the 3D structure and thus improve the reconstruction performance. In this paper, we propose a new deep learning framework for reconstructing the 3D shape of an object from a pair of stereo images, which reasons about the 3D structure of the object by taking bidirectional disparities and feature correspondences between the two views into account. Besides, we present a large-scale synthetic benchmarking dataset, namely StereoShapeNet, containing 1,052,976 pairs of stereo images rendered from ShapeNet along with the corresponding bidirectional depth and disparity maps. Experimental results on the StereoShapeNet benchmark demonstrate that the proposed framework outperforms the state-of-the-art methods.
updated: Mon Oct 21 2019 11:43:43 GMT+0000 (UTC)
published: Fri Oct 18 2019 01:53:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト