多くのポイントベースのセマンティックセグメンテーション方法は、屋内シナリオ用に設計されていますが、屋外環境でLiDARセンサーによってキャプチャされたポイントクラウドに適用すると、問題が発生します。これらのメソッドをより効率的かつ堅牢にしてLiDARデータを処理できるようにするために、投影空間で操作できるように3Dポイントベースの操作を再定式化するという一般的な概念を紹介します。 3つのポイントベースの方法を使用して、再定式化されたバージョンが300〜400倍高速であり、より高い精度を達成することを示しますが、さらに、3Dポイントベースの操作を再定式化するという概念により、利点を統合する新しいアーキテクチャを設計できることを示します。ポイントベースと画像ベースの方法の。例として、再定式化された3Dポイントベースの操作を、さまざまな2Dスケールからの情報を融合する2Dエンコーダー-デコーダーアーキテクチャに統合するネットワークを紹介します。セマンティックLiDARポイントクラウドセグメンテーションの4つの難しいデータセットに対するアプローチを評価し、再定式化された3Dポイントベースの操作を2D画像ベースの操作で活用すると、4つのデータセットすべてで非常に良い結果が得られることを示します。
Many point-based semantic segmentation methods have been designed for indoor scenarios, but they struggle if they are applied to point clouds that are captured by a LiDAR sensor in an outdoor environment. In order to make these methods more efficient and robust such that they can handle LiDAR data, we introduce the general concept of reformulating 3D point-based operations such that they can operate in the projection space. While we show by means of three point-based methods that the reformulated versions are between 300 and 400 times faster and achieve a higher accuracy, we furthermore demonstrate that the concept of reformulating 3D point-based operations allows to design new architectures that unify the benefits of point-based and image-based methods. As an example, we introduce a network that integrates reformulated 3D point-based operations into a 2D encoder-decoder architecture that fuses the information from different 2D scales. We evaluate the approach on four challenging datasets for semantic LiDAR point cloud segmentation and show that leveraging reformulated 3D point-based operations with 2D image-based operations achieves very good results for all four datasets.