仮想ビューでの3Dポイントの学習された可視性と、従来のグラフカットベースのメッシュ生成を利用して、非構造化ポイントクラウドからメッシュを再構築するための新しいフレームワークを紹介します。具体的には、まず、視程予測に深度補完を明示的に採用する3段階ネットワークを提案します。次に、複数のビューの可視性情報を集約して、可視性を考慮した最適化問題を解決することにより、3Dメッシュモデルを生成します。この問題では、表面決定における新しい適応可視性重み付けも導入され、大きな入射角の視線が抑制されます。他の学習ベースのアプローチと比較して、私たちのパイプラインは、2Dバイナリ分類タスク、つまり、ビューに表示されているかどうかにかかわらず、学習を実行します。これは、はるかに一般化可能で、実際的により効率的で、多数のポイントを処理できます。 。実験は、好ましい転送可能性と堅牢性を備えた私たちの方法が、小さな複雑なオブジェクトでの最先端の学習ベースのアプローチで競合するパフォーマンスを達成し、大きな屋内と屋外のシーンで優れていることを示しています。コードはhttps://github.com/GDAOSU/vis2meshで入手できます。
We present a novel framework for mesh reconstruction from unstructured point clouds by taking advantage of the learned visibility of the 3D points in the virtual views and traditional graph-cut based mesh generation. Specifically, we first propose a three-step network that explicitly employs depth completion for visibility prediction. Then the visibility information of multiple views is aggregated to generate a 3D mesh model by solving an optimization problem considering visibility in which a novel adaptive visibility weighting in surface determination is also introduced to suppress line of sight with a large incident angle. Compared to other learning-based approaches, our pipeline only exercises the learning on a 2D binary classification task, i.e. , points visible or not in a view, which is much more generalizable and practically more efficient and capable to deal with a large number of points. Experiments demonstrate that our method with favorable transferability and robustness, and achieve competing performances \wrt state-of-the-art learning-based approaches on small complex objects and outperforms on large indoor and outdoor scenes. Code is available at https://github.com/GDAOSU/vis2mesh.