この簡単なスケッチは、半教師あり視覚異常の検出とローカリゼーションの問題に対する統一されたエネルギーベースのソリューションに向けた最初の進歩を示しています。この設定では、異常のないトレーニングデータにのみアクセスでき、テストデータの任意の性質の異常を検出して識別したいと考えています。エネルギーベースモデル(EBM)からの密度推定値を、正常な画像と異常な画像を区別するために使用できる正常性スコアとして使用します。さらに、画像内の異常のピクセルレベルの空間的位置特定を提供する勾配マップを生成するために、画像に関するエネルギースコアの勾配を逆伝播します。空間的位置特定に加えて、勾配マップの単純な処理により、エネルギー値で得られた検出性能と一致するか、それを超える代替の正常性スコアも提供できることを示します。提案された方法の性能を定量的に検証するために、MVTec産業データセットで実験を行います。まだ予備的ですが、私たちの結果は非常に有望であり、画像内の予期しない異常を同時に検出してローカライズするためのEBMの可能性を明らかにしています。
This brief sketches initial progress towards a unified energy-based solution for the semi-supervised visual anomaly detection and localization problem. In this setup, we have access to only anomaly-free training data and want to detect and identify anomalies of an arbitrary nature on test data. We employ the density estimates from the energy-based model (EBM) as normalcy scores that can be used to discriminate normal images from anomalous ones. Further, we back-propagate the gradients of the energy score with respect to the image in order to generate a gradient map that provides pixel-level spatial localization of the anomalies in the image. In addition to the spatial localization, we show that simple processing of the gradient map can also provide alternative normalcy scores that either match or surpass the detection performance obtained with the energy value. To quantitatively validate the performance of the proposed method, we conduct experiments on the MVTec industrial dataset. Though still preliminary, our results are very promising and reveal the potential of EBMs for simultaneously detecting and localizing unforeseen anomalies in images.