arXiv reaDer
暗黙の潜在機能を使用したフローの正規化による教師なしビデオ異常検出
Unsupervised Video Anomaly Detection via Normalizing Flows with Implicit Latent Features
現代社会において、監視映像から犯罪や事故などの異常事象を発見する監視異常検知は重要な課題となっています。異常はめったに発生しないため、ほとんどのトレーニング データは異常なイベントのないラベル付けされていないビデオで構成されているため、タスクが困難になります。ほとんどの既存の方法は、オートエンコーダー (AE) を使用して、通常のビデオを再構築することを学習します。次に、異常なシーンの外観を再構築できなかったことに基づいて、異常を検出します。ただし、異常は動きだけでなく外観によって区別されるため、以前の多くのアプローチでは、事前にトレーニングされたオプティカル フロー モデルを使用するなど、外観と動きの情報を明示的に分離していました。この明示的な分離により、2 種類の情報間の相互表現機能が制限されます。対照的に、暗黙的な 2 パス AE (ITAE) を提案します。これは、2 つのエンコーダーが外観と動きの特徴を暗黙的にモデル化し、それらを組み合わせて通常のビデオ パターンを学習する単一のデコーダーを備えた構造です。通常のシーンの複雑な分布については、正規化フロー (NF) ベースの生成モデルによる ITAE 特徴の正規密度推定を提案し、扱いやすい可能性を学習し、分布外検出を使用して異常を識別します。 NF モデルは、暗黙的に学習された機能を通じて正規性を学習することにより、ITAE パフォーマンスを強化します。最後に、実際のシナリオでさまざまな異常を含むデータベースを含む 6 つのベンチマークで、ITAE とその特徴分布モデリングの有効性を示します。
In contemporary society, surveillance anomaly detection, i.e., spotting anomalous events such as crimes or accidents in surveillance videos, is a critical task. As anomalies occur rarely, most training data consists of unlabeled videos without anomalous events, which makes the task challenging. Most existing methods use an autoencoder (AE) to learn to reconstruct normal videos; they then detect anomalies based on their failure to reconstruct the appearance of abnormal scenes. However, because anomalies are distinguished by appearance as well as motion, many previous approaches have explicitly separated appearance and motion information-for example, using a pre-trained optical flow model. This explicit separation restricts reciprocal representation capabilities between two types of information. In contrast, we propose an implicit two-path AE (ITAE), a structure in which two encoders implicitly model appearance and motion features, along with a single decoder that combines them to learn normal video patterns. For the complex distribution of normal scenes, we suggest normal density estimation of ITAE features through normalizing flow (NF)-based generative models to learn the tractable likelihoods and identify anomalies using out of distribution detection. NF models intensify ITAE performance by learning normality through implicitly learned features. Finally, we demonstrate the effectiveness of ITAE and its feature distribution modeling on six benchmarks, including databases that contain various anomalies in real-world scenarios.
updated: Thu Aug 04 2022 02:31:16 GMT+0000 (UTC)
published: Thu Oct 15 2020 05:02:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト