arXiv reaDer
3Dポイントクラウドインスタンスセグメンテーションのための動的畳み込み
Dynamic Convolution for 3D Point Cloud Instance Segmentation
動的畳み込みに基づく3D点群からのインスタンスセグメンテーションへのアプローチを提案します。これにより、推論時に、さまざまな機能やオブジェクトのスケールに適応できます。そうすることで、単一のシーン内であっても、オブジェクトサイズの避けられない変動を補正するためのハイパーパラメータ調整やヒューリスティックな後処理パイプラインへの依存など、ボトムアップアプローチのいくつかの落とし穴を回避できます。ネットワークの表現機能は、同一のセマンティックカテゴリを持ち、幾何学的重心に近い票を持つ同種のポイントを収集することによって大幅に改善されます。次に、インスタンスはいくつかの単純な畳み込みレイヤーを介してデコードされ、パラメーターは入力を条件として生成されます。提案されたアプローチは提案なしであり、代わりに各インスタンスの空間的および意味的特性に適応する畳み込みプロセスを利用します。ボトルネックレイヤー上に構築された軽量のトランスフォーマーにより、モデルは、限られた計算オーバーヘッドで、長距離の依存関係をキャプチャできます。その結果、ScanNetV2、S3DIS、PartNetなどのさまざまなデータセットで強力なパフォーマンスを実現するシンプルで効率的かつ堅牢なアプローチが実現します。ボクセルベースのアーキテクチャとポイントベースのアーキテクチャの両方で一貫した改善が行われていることは、提案された方法の有効性を示唆しています。コードはhttps://git.io/DyCo3Dで入手できます。
We propose an approach to instance segmentation from 3D point clouds based on dynamic convolution. This enables it to adapt, at inference, to varying feature and object scales. Doing so avoids some pitfalls of bottom up approaches, including a dependence on hyper-parameter tuning and heuristic post-processing pipelines to compensate for the inevitable variability in object sizes, even within a single scene. The representation capability of the network is greatly improved by gathering homogeneous points that have identical semantic categories and close votes for the geometric centroids. Instances are then decoded via several simple convolution layers, where the parameters are generated conditioned on the input. The proposed approach is proposal-free, and instead exploits a convolution process that adapts to the spatial and semantic characteristics of each instance. A light-weight transformer, built on the bottleneck layer, allows the model to capture long-range dependencies, with limited computational overhead. The result is a simple, efficient, and robust approach that yields strong performance on various datasets: ScanNetV2, S3DIS, and PartNet. The consistent improvements on both voxel- and point-based architectures imply the effectiveness of the proposed method. Code is available at: https://git.io/DyCo3D
updated: Sun Jul 18 2021 09:05:16 GMT+0000 (UTC)
published: Sun Jul 18 2021 09:05:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト