arXiv reaDer
3D LiDAR データのシーン プライアを学習するためのジェネレーティブ レンジ イメージング
Generative Range Imaging for Learning Scene Priors of 3D LiDAR Data
自律移動ロボットの堅牢なビジョンには、3D LiDAR センサーが不可欠です。ただし、LiDAR ベースの認識アルゴリズムの展開は、角度分解能の不一致やプロパティの欠落など、トレーニング環境からのドメイン ギャップが原因で失敗することがよくあります。既存の研究では、ドメイン間マッピングを学習することでこの問題に取り組んできましたが、転送可能性はトレーニング構成によって制約され、トレーニングはレイドロップと呼ばれる特有の損失ノイズの影響を受けやすくなっています。この問題に対処するために、この論文では、データレベルのドメイン転送に適用可能な LiDAR 距離画像の生成モデルを提案します。 LiDAR 測定がポイントごとの距離イメージングに基づいているという事実に動機付けられて、微分可能なレイドロップ効果とともに、暗黙的な画像表現ベースの生成的敵対ネットワークをトレーニングします。ポイントベースおよび画像ベースの最先端の生成モデルと比較して、モデルの忠実度と多様性を示します。また、アップサンプリングと復元のアプリケーションも紹介します。さらに、LiDAR セマンティック セグメンテーション用の Sim2Real アプリケーションを紹介します。私たちの方法が現実的なレイドロップシミュレーターとして効果的であり、最先端の方法よりも優れていることを実証します。
3D LiDAR sensors are indispensable for the robust vision of autonomous mobile robots. However, deploying LiDAR-based perception algorithms often fails due to a domain gap from the training environment, such as inconsistent angular resolution and missing properties. Existing studies have tackled the issue by learning inter-domain mapping, while the transferability is constrained by the training configuration and the training is susceptible to peculiar lossy noises called ray-drop. To address the issue, this paper proposes a generative model of LiDAR range images applicable to the data-level domain transfer. Motivated by the fact that LiDAR measurement is based on point-by-point range imaging, we train an implicit image representation-based generative adversarial networks along with a differentiable ray-drop effect. We demonstrate the fidelity and diversity of our model in comparison with the point-based and image-based state-of-the-art generative models. We also showcase upsampling and restoration applications. Furthermore, we introduce a Sim2Real application for LiDAR semantic segmentation. We demonstrate that our method is effective as a realistic ray-drop simulator and outperforms state-of-the-art methods.
updated: Fri Oct 21 2022 06:08:39 GMT+0000 (UTC)
published: Fri Oct 21 2022 06:08:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト