arXiv reaDer
DQS3D: 密に一致した量子化対応の半教師あり 3D 検出
DQS3D: Densely-matched Quantization-aware Semi-supervised 3D Detection
このホワイト ペーパーでは、乱雑な 3D 屋内シーンの高い注釈コストを考慮すると、非常に重要な半教師あり 3D オブジェクト検出の問題を研究します。私たちは、最近、半教師あり学習の顕著な進歩を引き起こした、堅牢で原則に基づいた独学の枠組みに頼っています。このパラダイムは、画像レベルまたはピクセル レベルの予測では自然ですが、検出の問題に適応させることは、提案の照合の問題によって困難になります。従来の方法は、2 段階のパイプラインに基づいており、最初の段階で生成されたヒューリスティックに選択された提案を照合し、空間的にまばらなトレーニング信号を生成します。対照的に、シングルステージ方式で機能し、空間的に密なトレーニング信号を可能にする最初の半教師あり 3D 検出アルゴリズムを提案します。この新しい設計の基本的な問題は、ポイントからボクセルへの離散化によって引き起こされる量子化エラーであり、ボクセル ドメイン内の 2 つの変換されたビューの間で必然的にずれが生じます。この目的のために、このミスアラインメントをオンザフライで補正するクローズド フォーム ルールを導き出し、実装します。私たちの結果は重要です。たとえば、20% の注釈を使用して、ScanNet mAP@0.5 を 35.2% から 48.5% に昇格させました。コードとデータは公開されます。
In this paper, we study the problem of semi-supervised 3D object detection, which is of great importance considering the high annotation cost for cluttered 3D indoor scenes. We resort to the robust and principled framework of selfteaching, which has triggered notable progress for semisupervised learning recently. While this paradigm is natural for image-level or pixel-level prediction, adapting it to the detection problem is challenged by the issue of proposal matching. Prior methods are based upon two-stage pipelines, matching heuristically selected proposals generated in the first stage and resulting in spatially sparse training signals. In contrast, we propose the first semisupervised 3D detection algorithm that works in the singlestage manner and allows spatially dense training signals. A fundamental issue of this new design is the quantization error caused by point-to-voxel discretization, which inevitably leads to misalignment between two transformed views in the voxel domain. To this end, we derive and implement closed-form rules that compensate this misalignment onthe-fly. Our results are significant, e.g., promoting ScanNet mAP@0.5 from 35.2% to 48.5% using 20% annotation. Codes and data will be publicly available.
updated: Fri Aug 11 2023 09:46:37 GMT+0000 (UTC)
published: Tue Apr 25 2023 17:59:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト