arXiv reaDer
多層分布外検出に関する機能データの観点とベースライン
A Functional Data Perspective and Baseline On Multi-Layer Out-of-Distribution Detection
分布外 (OOD) 検出の主な機能は、多層分類器を通じて統計的パターンと関係を抽出することにより、トレーニングされたニューラル ネットワークを活用して、予想される入力データ分布のシフトを検出することです。確かな結果が得られているにもかかわらず、いくつかの最先端の方法は最後から 2 番目または最後の層の出力のみに依存しており、OOD 検出のための貴重な情報が残されています。複数のレイヤーを探索する方法には、特別なアーキテクチャまたは監視された目標が必要です。この研究では、さまざまな層を通るサンプルの軌跡とその統計的依存関係を利用する、ネットワークの機能的観点に基づく独自のアプローチが採用されています。これは、多変量特徴の集約を超えて、機能異常検出に根ざしたベースラインを導入します。この新しいフレームワークでは、OOD 検出は、トレーニング セットによって特徴付けられる典型的な動作とは異なる軌跡を持つサンプルを検出することになります。私たちは手法を検証し、コンピューター ビジョン ベンチマークの強力な最先端のベースラインと比較して、OOD 検出におけるその有効性を経験的に実証します。
A key feature of out-of-distribution (OOD) detection is to exploit a trained neural network by extracting statistical patterns and relationships through the multi-layer classifier to detect shifts in the expected input data distribution. Despite achieving solid results, several state-of-the-art methods rely on the penultimate or last layer outputs only, leaving behind valuable information for OOD detection. Methods that explore the multiple layers either require a special architecture or a supervised objective to do so. This work adopts an original approach based on a functional view of the network that exploits the sample's trajectories through the various layers and their statistical dependencies. It goes beyond multivariate features aggregation and introduces a baseline rooted in functional anomaly detection. In this new framework, OOD detection translates into detecting samples whose trajectories differ from the typical behavior characterized by the training set. We validate our method and empirically demonstrate its effectiveness in OOD detection compared to strong state-of-the-art baselines on computer vision benchmarks.
updated: Tue Jun 06 2023 09:14:05 GMT+0000 (UTC)
published: Tue Jun 06 2023 09:14:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト