arXiv reaDer
Mini-PointNetPlus: 3D 環境認識のための深層学習モデルのローカル特徴記述子
Mini-PointNetPlus: a local feature descriptor in deep learning model for 3d environment perception
3D 環境認識のための一般的な深層学習モデルでは、多くの場合、柱化/ボクセル化手法を使用して点群データを柱/ボクセルに変換し、それを 2D/3D 畳み込みニューラル ネットワーク (CNN) で処理します。先駆的な作品である PointNet は、点群の特徴を抽出するための、3D 認識のための深層学習モデルの基本コンポーネントであるローカル特徴記述子として広く適用されています。これは、独自のピラー/ボクセル機能を提供する対称最大プーリング オペレーターを使用することによって実現されます。ただし、ほとんどの点を無視すると、max-pooling 演算子によって情報損失が発生し、モデルのパフォーマンスが低下します。この問題に対処するために、PointNet のプラグ アンド プレイの代替として、新しいローカル機能記述子 mini-PointNetPlus を提案します。私たちの基本的なアイデアは、データ ポイントを考慮した個々の特徴に個別に投影し、それぞれが順列不変式を導くことです。したがって、提案された記述子は、順序のない点群を安定した順序に変換します。バニラ PointNet は、ミニ PointNetPlus の特殊なケースであることが証明されています。提案された記述子の機能を最大限に活用することで、3D 知覚の大幅なパフォーマンス向上を実験で実証しました。
Common deep learning models for 3D environment perception often use pillarization/voxelization methods to convert point cloud data into pillars/voxels and then process it with a 2D/3D convolutional neural network (CNN). The pioneer work PointNet has been widely applied as a local feature descriptor, a fundamental component in deep learning models for 3D perception, to extract features of a point cloud. This is achieved by using a symmetric max-pooling operator which provides unique pillar/voxel features. However, by ignoring most of the points, the max-pooling operator causes an information loss, which reduces the model performance. To address this issue, we propose a novel local feature descriptor, mini-PointNetPlus, as an alternative for plug-and-play to PointNet. Our basic idea is to separately project the data points to the individual features considered, each leading to a permutation invariant. Thus, the proposed descriptor transforms an unordered point cloud to a stable order. The vanilla PointNet is proved to be a special case of our mini-PointNetPlus. Due to fully utilizing the features by the proposed descriptor, we demonstrate in experiment a considerable performance improvement for 3D perception.
updated: Tue Jul 25 2023 07:30:28 GMT+0000 (UTC)
published: Tue Jul 25 2023 07:30:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト