arXiv reaDer
スパースLiDARからの半教師あり暗黙的シーン補完
Semi-supervised Implicit Scene Completion from Sparse LiDAR
最近の進歩は、半教師あり陰的表現学習がアイコナール方程式のような物理的制約を通じて達成できることを示しています。ただし、このスキームは、空間的にスパース性が変化するため、LiDARポイントクラウドデータにはまだ正常に使用されていません。この論文では、局所的な形状埋め込みの半教師あり陰関数を条件付ける新しい定式化を開発します。これは、スパース畳み込みネットワークの強力な表現学習能力を活用して、形状を認識する高密度の特徴ボリュームを生成しますが、自由空間での正確な値を知らなくても、半教師あり符号付き距離関数の学習を可能にします。広範な定量的および定性的な結果により、この新しい学習システムの固有の特性と、実際の道路シーンでのその有用性を示します。特に、SemanticKITTIではIoUが26.3%から51.0%に向上しています。さらに、セマンティックラベル予測を統合し、暗黙的なセマンティック補完を実現する2つのパラダイムを検討します。コードとモデルには、https://github.com/OPEN-AIR-SUN/SISCからアクセスできます。
Recent advances show that semi-supervised implicit representation learning can be achieved through physical constraints like Eikonal equations. However, this scheme has not yet been successfully used for LiDAR point cloud data, due to its spatially varying sparsity. In this paper, we develop a novel formulation that conditions the semi-supervised implicit function on localized shape embeddings. It exploits the strong representation learning power of sparse convolutional networks to generate shape-aware dense feature volumes, while still allows semi-supervised signed distance function learning without knowing its exact values at free space. With extensive quantitative and qualitative results, we demonstrate intrinsic properties of this new learning system and its usefulness in real-world road scenes. Notably, we improve IoU from 26.3% to 51.0% on SemanticKITTI. Moreover, we explore two paradigms to integrate semantic label predictions, achieving implicit semantic completion. Code and models can be accessed at https://github.com/OPEN-AIR-SUN/SISC.
updated: Mon Nov 29 2021 18:50:09 GMT+0000 (UTC)
published: Mon Nov 29 2021 18:50:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト