ハフ投票に基づく3Dオブジェクト検出器は大きな成功を収め、多くのフォローアップ作業を導き出します。検出精度を絶えず更新しているにもかかわらず、これらの作業は、冗長なボックスを排除するために使用される手作りのコンポーネントに悩まされているため、エンドツーエンドではなく、時間がかかります。この作業では、これらの手作りのコンポーネントを削除するための抑制と調整のフレームワークを提案します。フル解像度の情報を十分に活用し、リアルタイムの速度を実現するために、特徴点と冗長な3D提案を直接消費します。具体的には、最初にノイズの多い3D特徴点を抑制し、次にそれらを3D提案にフィードして、次のRoI対応の改良を行います。細かい提案機能を構築するためのゲーティングメカニズムと関係をモデル化するための自己注意メカニズムにより、私たちの方法は、エンドツーエンドの方法で小さな計算予算で高品質の予測を生成できます。この目的のために、VoteNetに基づいた最初の完全なエンドツーエンドの3D検出器であるSRDetを紹介します。挑戦的なScanNetV2およびSUNRGB-Dデータセットで、これまでで最速の速度で最先端のパフォーマンスを実現します。私たちのコードはhttps://github.com/ZJULearning/SRDetで入手できます。
3D object detector based on Hough voting achieves great success and derives many follow-up works. Despite constantly refreshing the detection accuracy, these works suffer from handcrafted components used to eliminate redundant boxes, and thus are non-end-to-end and time-consuming. In this work, we propose a suppress-and-refine framework to remove these handcrafted components. To fully utilize full-resolution information and achieve real-time speed, it directly consumes feature points and redundant 3D proposals. Specifically, it first suppresses noisy 3D feature points and then feeds them to 3D proposals for the following RoI-aware refinement. With the gating mechanism to build fine proposal features and the self-attention mechanism to model relationships, our method can produce high-quality predictions with a small computation budget in an end-to-end manner. To this end, we present the first fully end-to-end 3D detector, SRDet, on the basis of VoteNet. It achieves state-of-the-art performance on the challenging ScanNetV2 and SUN RGB-D datasets with the fastest speed ever. Our code will be available at https://github.com/ZJULearning/SRDet.