異常検出は、かなりの検索の注目を集めています。ただし、既存の異常検出データベースには2つの大きな問題があります。第一に、それらは規模が限られています。第2に、トレーニングセットには、ビデオ全体の間に異常なイベントが存在することを示すビデオレベルのラベルのみが含まれ、正確な期間の注釈はありません。これらの問題に取り組むために、ビデオシーケンスの異常検出のベンチマークとして新しい大規模異常検出(LAD)データベースを提供します。これは、2つの側面で取り上げられています。 1)クラッシュ、火災、暴力など、さまざまなシーンの14の異常カテゴリを持つ正常および異常なビデオクリップを含む2000のビデオシーケンスが含まれており、これまでで最大の異常分析データベースになっています。 2)異常検出を容易にするために、ビデオレベルのラベル(異常/正常なビデオ、異常タイプ)およびフレームレベルのラベル(異常/正常なビデオフレーム)を含む注釈データを提供します。 LADデータベースからの上記の利点を活用して、異常検出を完全教師あり学習問題としてさらに定式化し、それを解決するためのマルチタスクディープニューラルネットワークを提案します。最初に、膨張3D畳み込み(I3D)ネットワークを使用して、ローカルの時空間コンテキスト機能を取得します。次に、局所的な時空間コンテキスト特徴を供給された反復畳み込みニューラルネットワークを構築して、時空間コンテキスト特徴を抽出します。グローバルな時空間コンテキスト機能を使用すると、異常タイプとスコアをマルチタスクニューラルネットワークで同時に計算できます。実験結果は、提案された方法が、私たちのデータベースおよび他の異常検出の公開データベースでの最先端の異常検出方法よりも優れていることを示しています。コードはhttps://github.com/wanboyang/anomaly_detection_LAD2000で入手できます。
Anomaly detection has attracted considerable search attention. However, existing anomaly detection databases encounter two major problems. Firstly, they are limited in scale. Secondly, training sets contain only video-level labels indicating the existence of an abnormal event during the full video while lacking annotations of precise time durations. To tackle these problems, we contribute a new Large-scale Anomaly Detection (LAD) database as the benchmark for anomaly detection in video sequences, which is featured in two aspects. 1) It contains 2000 video sequences including normal and abnormal video clips with 14 anomaly categories including crash, fire, violence, etc. with large scene varieties, making it the largest anomaly analysis database to date. 2) It provides the annotation data, including video-level labels (abnormal/normal video, anomaly type) and frame-level labels (abnormal/normal video frame) to facilitate anomaly detection. Leveraging the above benefits from the LAD database, we further formulate anomaly detection as a fully-supervised learning problem and propose a multi-task deep neural network to solve it. We first obtain the local spatiotemporal contextual feature by using an Inflated 3D convolutional (I3D) network. Then we construct a recurrent convolutional neural network fed the local spatiotemporal contextual feature to extract the spatiotemporal contextual feature. With the global spatiotemporal contextual feature, the anomaly type and score can be computed simultaneously by a multi-task neural network. Experimental results show that the proposed method outperforms the state-of-the-art anomaly detection methods on our database and other public databases of anomaly detection. Codes are available at https://github.com/wanboyang/anomaly_detection_LAD2000.