ノイズが多く、不均一で、方向性のない点群からの表面再構成は、コンピュータビジョンとグラフィックスにおける魅力的でありながら挑戦的な問題です。 3Dスキャン技術の革新により、通常は深刻なノイズを伴う生のスキャンデータを多様な三角形メッシュに直接変換することが強く望まれています。既存の学習ベースのアプローチは、ゼロレベルの表面が基礎となる形状をエンコードする陰関数を学習することを目的としています。ただし、それらのほとんどは、ノイズが多くまばらな点群に対して望ましい結果を得ることができず、実際の使用が制限されます。この論文では、無指向性の生の点群から直接ノイズ耐性符号付き距離関数(SDF)を学習する新しいアプローチであるNeural-IMLSを紹介します。グラウンドトゥルース符号付き距離値を使用して事前分布を明示的に学習する代わりに、この方法では、暗黙の移動最小二乗関数によって取得される2つのSDF間の損失を最小限に抑えることにより、生の点群から基礎となるSDFを自己監視方式で学習します。 (IMLS)ともう1つはニューラルネットワークによるもので、予測子の勾配がIMLSの計算を容易にする接束を定義します。いくつかのSDFが一致する場合、ニューラルネットワークは、ゼロレベルセットが基礎となる表面への適切な近似として機能する符号付き陰関数を予測できることを証明します。合成スキャンや実世界スキャンなど、さまざまなベンチマークで広範な実験を行い、さまざまな入力から忠実な形状を再構築する能力を示します。特に、ノイズやギャップのある点群についてはそうです。
Surface reconstruction from noisy, non-uniform, and unoriented point clouds is a fascinating yet challenging problem in computer vision and graphics. With the innovations of 3D scanning technology, it is highly desired to directly transform raw scan data, typically with severe noise, into a manifold triangle mesh. Existing learning-based approaches aim at learning an implicit function whose zero-level surface encodes the underlying shape. However, most of them cannot obtain desirable results for noisy and sparse point clouds, limiting use in practice. In this paper, we introduce Neural-IMLS, a novel approach that learns the noise-resistant signed distance function (SDF) directly from unoriented raw point clouds. Instead of explicitly learning priors with the ground-truth signed distance values, our method learns the underlying SDF from raw point clouds in a self-supervised fashion by minimizing the loss between a couple of SDFs, one obtained by the implicit moving least-square function (IMLS) and the other by our neural network, where the gradients of our predictor define the tangent bundle that facilitates the computation of IMLS. We prove that when the couple of SDFs coincide, our neural network can predict a signed implicit function whose zero level-set serves as a good approximation to the underlying surface. We conduct extensive experiments on various benchmarks, including synthetic scans and real-world scans, to exhibit the ability to reconstruct faithful shapes from various inputs, especially for point clouds with noise or gaps.