arXiv reaDer
回転同変3Dオブジェクト検出
Rotationally Equivariant 3D Object Detection
回転同変は最近、3D深層学習コミュニティで強く望まれる特性になりました。しかし、ほとんどの既存の方法は、回転対称性が独自の空間サポートを持っているという事実を無視しながら、グローバル入力回転に関する同変に焦点を合わせています。具体的には、3Dシーンでのオブジェクト検出の問題を検討します。この場合、オブジェクトの境界ボックスは、シーンの動きとは関係なく、オブジェクトのポーズに関して同変である必要があります。これは、オブジェクトレベルの回転同変と呼ばれる新しい目的のプロパティを示しています。オブジェクトレベルの回転等分散を3Dオブジェクト検出器に組み込むには、オブジェクト間のコンテキスト情報をモデル化できると同時に、ローカルオブジェクトレベルの空間サポートを使用して同変特徴を抽出するメカニズムが必要です。この目的のために、オブジェクトレベルの等分散を実現するために、回転等分散サスペンション設計を備えた等変オブジェクト検出ネットワーク(EON)を提案します。 EONは、VoteNetやPointRCNNなどの最新の点群オブジェクト検出器に適用でき、シーンスケールの入力でオブジェクトの回転対称性を利用できるようにします。屋内シーンと自動運転データセットの両方での実験では、EON設計を既存の最先端の3Dオブジェクト検出器に接続することで大幅な改善が得られることが示されています。
Rotation equivariance has recently become a strongly desired property in the 3D deep learning community. Yet most existing methods focus on equivariance regarding a global input rotation while ignoring the fact that rotation symmetry has its own spatial support. Specifically, we consider the object detection problem in 3D scenes, where an object bounding box should be equivariant regarding the object pose, independent of the scene motion. This suggests a new desired property we call object-level rotation equivariance. To incorporate object-level rotation equivariance into 3D object detectors, we need a mechanism to extract equivariant features with local object-level spatial support while being able to model cross-object context information. To this end, we propose Equivariant Object detection Network (EON) with a rotation equivariance suspension design to achieve object-level equivariance. EON can be applied to modern point cloud object detectors, such as VoteNet and PointRCNN, enabling them to exploit object rotation symmetry in scene-scale inputs. Our experiments on both indoor scene and autonomous driving datasets show that significant improvements are obtained by plugging our EON design into existing state-of-the-art 3D object detectors.
updated: Sat Jul 09 2022 23:18:01 GMT+0000 (UTC)
published: Thu Apr 28 2022 16:48:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト