関節の深さと飛行時間(ToF)センサーの法線推定への新しいアプローチを提示します。私たちのモデルは、ToF生センサーデータから高品質の深度マップと法線マップを一緒に予測することを学習します。これを実現するために、私たちは、産業用深度カメラによって提供される生のToFデータとグラウンドトゥルースの高解像度深度マップのペアを使用して、最初の大規模データセット(ToF-100という名前)を細心の注意を払って構築しました。さらに、ジョイントの深さと法線推定のためのシンプルで効果的なフレームワークも設計し、モデルのパフォーマンスを向上させるために、ジッタを介してロバストな面取り損失を適用します。私たちの実験は、提案された方法が高解像度の深度と法線マップを効率的に再構築でき、最先端のアプローチを大幅に上回っていることを示しています。コードとデータはhttps://github.com/hkustVisionRr/JointlyDepthNormalEstimationで入手できます。
We present a novel approach to joint depth and normal estimation for time-of-flight (ToF) sensors. Our model learns to predict the high-quality depth and normal maps jointly from ToF raw sensor data. To achieve this, we meticulously constructed the first large-scale dataset (named ToF-100) with paired raw ToF data and ground-truth high-resolution depth maps provided by an industrial depth camera. In addition, we also design a simple but effective framework for joint depth and normal estimation, applying a robust Chamfer loss via jittering to improve the performance of our model. Our experiments demonstrate that our proposed method can efficiently reconstruct high-resolution depth and normal maps and significantly outperforms state-of-the-art approaches. Our code and data will be available at https://github.com/hkustVisionRr/JointlyDepthNormalEstimation