arXiv reaDer
弱い教師ありビデオ異常検出のための疑似ラベルの完全性と不確実性の活用
Exploiting Completeness and Uncertainty of Pseudo Labels for Weakly Supervised Video Anomaly Detection
弱い教師ありビデオ異常検出は、ビデオ レベルのラベルのみを使用して、ビデオ内の異常なイベントを特定することを目的としています。最近、2 段階の自己トレーニング方法は、擬似ラベルを自己生成し、これらのラベルを使用して異常スコアを自己調整することにより、大幅な改善を達成しました。疑似ラベルが重要な役割を果たすため、効果的なセルフトレーニングのために完全性と不確実性のプロパティを活用することにより、拡張フレームワークを提案します。具体的には、最初にマルチヘッド分類モジュール (各ヘッドが分類器として機能する) を設計し、ダイバーシティ損失を使用して、ヘッド間の予測擬似ラベルの分布差を最大化します。これにより、生成された疑似ラベルができるだけ多くの異常なイベントをカバーするようになります。次に、反復的な不確実性疑似ラベル改良戦略を考案します。これにより、最初の疑似ラベルだけでなく、第 2 段階で目的の分類器によって取得された更新された疑似ラベルも改善されます。広範な実験結果は、提案された方法が UCF-Crime、TAD、および XD-Violence ベンチマーク データセットに対する最先端のアプローチに対して有利に機能することを示しています。
Weakly supervised video anomaly detection aims to identify abnormal events in videos using only video-level labels. Recently, two-stage self-training methods have achieved significant improvements by self-generating pseudo labels and self-refining anomaly scores with these labels. As the pseudo labels play a crucial role, we propose an enhancement framework by exploiting completeness and uncertainty properties for effective self-training. Specifically, we first design a multi-head classification module (each head serves as a classifier) with a diversity loss to maximize the distribution differences of predicted pseudo labels across heads. This encourages the generated pseudo labels to cover as many abnormal events as possible. We then devise an iterative uncertainty pseudo label refinement strategy, which improves not only the initial pseudo labels but also the updated ones obtained by the desired classifier in the second stage. Extensive experimental results demonstrate the proposed method performs favorably against state-of-the-art approaches on the UCF-Crime, TAD, and XD-Violence benchmark datasets.
updated: Thu Dec 08 2022 05:53:53 GMT+0000 (UTC)
published: Thu Dec 08 2022 05:53:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト