分布外検出の鍵は、分布内データまたはその特徴表現の密度推定です。この問題に対する優れたパラメトリック ソリューションは、適切にキュレートされた分類データに対して存在しますが、セマンティック セグメンテーションなどの複雑なドメインにはあまり適していません。このホワイト ペーパーでは、k-Nearest-Neighbors アプローチが小さな参照データセットと実行時間で驚くほど良い結果を達成し、近傍数やサポート セット サイズの選択などのハイパーパラメータに関してロバストであることを示します。さらに、それが標準的なパラメトリック アプローチからの異常スコアとうまく組み合わされることを示し、変換機能が k-Nearest-Neighbors と組み合わせて新しいオブジェクトを検出するのに特に適していることを発見しました。最終的に、アプローチはシンプルで非侵襲的です。つまり、プライマリ セグメンテーションのパフォーマンスに影響を与えず、異常の例に関するトレーニングを回避し、共通のベンチマークで +23% と +16 という最先端の結果を達成します。 RoadAnomaly と StreetHazards のそれぞれの % AP 改善。
The key to out-of-distribution detection is density estimation of the in-distribution data or of its feature representations. While good parametric solutions to this problem exist for well curated classification data, these are less suitable for complex domains, such as semantic segmentation. In this paper, we show that a k-Nearest-Neighbors approach can achieve surprisingly good results with small reference datasets and runtimes, and be robust with respect to hyperparameters, such as the number of neighbors and the choice of the support set size. Moreover, we show that it combines well with anomaly scores from standard parametric approaches, and we find that transformer features are particularly well suited to detect novel objects in combination with k-Nearest-Neighbors. Ultimately, the approach is simple and non-invasive, i.e., it does not affect the primary segmentation performance, avoids training on examples of anomalies, and achieves state-of-the-art results on the common benchmarks with +23% and +16% AP improvements on on RoadAnomaly and StreetHazards respectively.