このホワイトペーパーでは、生成ネットワーク(SPLINE-Net)を使用した照明補間と法線推定により、スパースフォトメトリックステレオを解決します。 SPLINE-Netには、入力としてスパースのライトセットが与えられた後、表面法線を推定するための法線推定ネットワークに続いて、密な照明観測値を生成する照明補間ネットワークが含まれています。両方のネットワークは、提案された対称および非対称の損失関数によって共同で制約され、等方性制約を強制し、グローバルイルミネーション効果の外れ値除去を実行します。 SPLINE-Netは、ほぼ100個の画像を使用する代わりに、異なるライトの10個の画像のみを使用することにより、一般的なBRDFのフォトメトリックステレオの既存の方法を上回ることが確認されています。
This paper solves the Sparse Photometric stereo through Lighting Interpolation and Normal Estimation using a generative Network (SPLINE-Net). SPLINE-Net contains a lighting interpolation network to generate dense lighting observations given a sparse set of lights as inputs followed by a normal estimation network to estimate surface normals. Both networks are jointly constrained by the proposed symmetric and asymmetric loss functions to enforce isotropic constrain and perform outlier rejection of global illumination effects. SPLINE-Net is verified to outperform existing methods for photometric stereo of general BRDFs by using only ten images of different lights instead of using nearly one hundred images.