arXiv reaDer
LiDARデータのローカルディープ陰関数を使用したセマンティックシーンの完了
Semantic Scene Completion using Local Deep Implicit Functions on LiDAR Data
セマンティックシーンの完了は、特定の範囲内のオブジェクトとサーフェスの3Dジオメトリとセマンティクスを共同で推定するタスクです。これは、まばらで遮られている実世界のデータでは特に困難な作業です。シーン補完のための新しい学習ベースの方法として、ローカルの深陰関数に基づくシーンセグメンテーションネットワークを提案します。シーンの完成に関する以前の作業とは異なり、私たちの方法は、ボクセル化に基づかない連続的なシーン表現を生成します。生の点群を局所的に複数の空間解像度で潜在空間にエンコードします。続いて、ローカライズされた関数パッチからグローバルシーン完了関数が組み立てられます。この連続表現は、空間離散化を必要とせずに、広範な屋外シーンの幾何学的およびセマンティックプロパティをエンコードするのに適していることを示します(したがって、シーンの詳細レベルとカバーできるシーンの範囲との間のトレードオフを回避します)。セマンティックKITTIデータセットからの意味的に注釈が付けられたLiDARスキャンでメソッドをトレーニングおよび評価します。私たちの実験は、私たちの方法が、与えられたシーンの密な3D記述にデコードできる強力な表現を生成することを確認します。私たちの方法のパフォーマンスは、幾何学的および意味論的完了の交差点オーバーユニオン(IoU)の両方の点で、セマンティックKITTIシーン完了ベンチマークの最先端を上回っています。
Semantic scene completion is the task of jointly estimating 3D geometry and semantics of objects and surfaces within a given extent. This is a particularly challenging task on real-world data that is sparse and occluded. We propose a scene segmentation network based on local Deep Implicit Functions as a novel learning-based method for scene completion. Unlike previous work on scene completion, our method produces a continuous scene representation that is not based on voxelization. We encode raw point clouds into a latent space locally and at multiple spatial resolutions. A global scene completion function is subsequently assembled from the localized function patches. We show that this continuous representation is suitable to encode geometric and semantic properties of extensive outdoor scenes without the need for spatial discretization (thus avoiding the trade-off between level of scene detail and the scene extent that can be covered). We train and evaluate our method on semantically annotated LiDAR scans from the Semantic KITTI dataset. Our experiments verify that our method generates a powerful representation that can be decoded into a dense 3D description of a given scene. The performance of our method surpasses the state of the art on the Semantic KITTI Scene Completion Benchmark in terms of both geometric and semantic completion Intersection-over-Union (IoU).
updated: Wed Nov 18 2020 07:39:13 GMT+0000 (UTC)
published: Wed Nov 18 2020 07:39:13 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト