分布外(OOD)オブジェクトを検出できる信頼性の高いオブジェクト検出器を構築することは重要ですが、十分に検討されていません。重要な課題の1つは、モデルに未知のデータからの監視信号がなく、OODオブジェクトの予測に自信がないことです。野生のビデオから未知のオブジェクトを抽出し、モデルの決定境界を有意義に正規化する、Spatial-Temporal Unknown Distillation(STUD)を介した新しい未知の認識オブジェクト検出フレームワークを提案します。 STUDは、最初に空間次元で未知の候補オブジェクトの提案を識別し、次に複数のビデオフレームにわたって候補を集約して、決定境界の近くに未知のオブジェクトの多様なセットを形成します。それに加えて、エネルギーベースの不確実性正則化損失を採用しています。これは、分布内のオブジェクトと蒸留された未知のオブジェクトの間の不確実性空間を対照的に形成します。 STUDは、オブジェクト検出のためのOOD検出タスクで最先端のパフォーマンスを確立し、FPR95スコアを以前の最良の方法と比較して10%以上削減します。コードはhttps://github.com/deeplearning-wisc/studで入手できます。
Building reliable object detectors that can detect out-of-distribution (OOD) objects is critical yet underexplored. One of the key challenges is that models lack supervision signals from unknown data, producing overconfident predictions on OOD objects. We propose a new unknown-aware object detection framework through Spatial-Temporal Unknown Distillation (STUD), which distills unknown objects from videos in the wild and meaningfully regularizes the model's decision boundary. STUD first identifies the unknown candidate object proposals in the spatial dimension, and then aggregates the candidates across multiple video frames to form a diverse set of unknown objects near the decision boundary. Alongside, we employ an energy-based uncertainty regularization loss, which contrastively shapes the uncertainty space between the in-distribution and distilled unknown objects. STUD establishes the state-of-the-art performance on OOD detection tasks for object detection, reducing the FPR95 score by over 10% compared to the previous best method. Code is available at https://github.com/deeplearning-wisc/stud.