arXiv reaDer
暗黙の潜在機能を使用したフローの正規化による教師なしビデオ異常検出
Unsupervised Video Anomaly Detection via Normalizing Flows with Implicit Latent Features
監視異常検出は、通常のシーンの中から、犯罪や事故などの異常なイベントを検索します。発生することはめったにないため、ほとんどのトレーニングデータはラベルのない通常のビデオで構成されており、タスクが困難になります。ほとんどの既存の方法は、オートエンコーダー(AE)を使用して、正常なビデオの再構築を学習し、異常なシーンの外観の再構築の失敗による異常を検出します。ただし、異常は外観または動きによって区別されるため、以前の多くのアプローチでは、たとえば、事前にトレーニングされたオプティカルフローモデルを使用して、外観と動きの情報を明示的に分離していました。この明示的な分離により、2つの情報間の相互表現機能が制限されます。対照的に、2つのエンコーダーが外観と動きの特徴を暗黙的にモデル化する構造である暗黙的な2パスAE(ITAE)と、それらを組み合わせて通常のビデオパターンを学習する単一のデコーダーを提案します。正規シーンの複雑な分布については、フロー(NF)ベースの生成モデルを正規化して、扱いやすい尤度を学習し、分布外検出を使用して異常を見つけることにより、ITAE特徴の正規密度推定を行うことをお勧めします。 NFモデルは、暗黙的に学習された機能を通じて正規性を学習することにより、ITAEのパフォーマンスを強化します。最後に、ITAEとその機能分布モデリングの有効性を、3つのベンチマーク、特に実際のシナリオのさまざまな異常で構成される上海科技大学(ST)データベースで示します。
Surveillance anomaly detection searches for anomalous events, such as crimes or accidents, among normal scenes. Because it occurs rarely, most training data consists of unlabeled, normal videos, which makes the task challenging. Most existing methods use an autoencoder (AE) to learn reconstructing normal videos and detect anomalies by a failure to reconstruct the appearance of abnormal scenes. However, because anomalies are distinguished by appearance or motion, many previous approaches have explicitly separated appearance and motion information--for example, using a pre-trained optical flow model. This explicit separation restricts reciprocal representation capabilities between two information. In contrast, we propose an implicit two-path AE (ITAE), a structure in which two encoders implicitly model appearance and motion features, and a single decoder that combines them to learn normal video patterns. For the complex distribution of normal scenes, we suggest normal density estimation of ITAE features through normalizing flow (NF)-based generative models to learn the tractable likelihoods and find anomalies using out-of-distribution detection. NF models intensify ITAE performance by learning normality through implicitly learned features. Finally, we demonstrate the effectiveness of ITAE and its feature distribution modeling in three benchmarks, especially on the Shanghai Tech Campus (ST) database composed of various anomalies in real-world scenarios.
updated: Fri Mar 19 2021 09:09:27 GMT+0000 (UTC)
published: Thu Oct 15 2020 05:02:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト