arXiv reaDer
SAVCHOI: 高密度のビデオ キャプションと人間のオブジェクト インタラクションを使用した不審なアクティビティの検出
SAVCHOI: Detecting Suspicious Activities using Dense Video Captioning with Human Object Interactions
監視ビデオで不審な活動を検出することは、犯罪の検出を困難にするリアルタイム監視における長年の問題です。したがって、監視ビデオで疑わしいアクティビティを検出して要約するための新しいアプローチを提案します。また、UCF-Crime ビデオ データセットのグラウンド トゥルース サマリーも作成しました。 Bi-Modal Transformer のビジュアル機能にヒューマン オブジェクト インタラクション (HOI) モデルを活用することで、このタスクの既存のアプローチを変更します。さらに、ActivityNet キャプション データセットの高密度ビデオ キャプション タスクの既存の最先端アルゴリズムに対してアプローチを検証します。高密度キャプションのこの定式化は、BLEU@1、BLEU@2、BLEU@3、BLEU@4、および METEOR の他の議論された BMT ベースのアプローチよりも大幅に優れていることがわかります。さらに、データセットとモデルの比較分析を実行して、さまざまな NMS しきい値 (遺伝的アルゴリズムを使用して検索) に基づいて調査結果を報告します。ここで、私たちの定式化は、BLEU@1、BLEU@2、BLEU@3 のすべてのモデル、および BLEU@4 と METEOR のほとんどのモデルよりも優れており、ADV-INF Global のみにそれぞれ 25% と 0.5% 及ばない.
Detecting suspicious activities in surveillance videos is a longstanding problem in real-time surveillance that leads to difficulties in detecting crimes. Hence, we propose a novel approach for detecting and summarizing suspicious activities in surveillance videos. We have also created ground truth summaries for the UCF-Crime video dataset. We modify a pre-existing approach for this task by leveraging the Human-Object Interaction (HOI) model for the Visual features in the Bi-Modal Transformer. Further, we validate our approach against the existing state-of-the-art algorithms for the Dense Video Captioning task for the ActivityNet Captions dataset. We observe that this formulation for Dense Captioning performs significantly better than other discussed BMT-based approaches for BLEU@1, BLEU@2, BLEU@3, BLEU@4, and METEOR. We further perform a comparative analysis of the dataset and the model to report the findings based on different NMS thresholds (searched using Genetic Algorithms). Here, our formulation outperforms all the models for BLEU@1, BLEU@2, BLEU@3, and most models for BLEU@4 and METEOR falling short of only ADV-INF Global by 25% and 0.5%, respectively.
updated: Sat Oct 22 2022 20:10:42 GMT+0000 (UTC)
published: Sun Jul 24 2022 22:53:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト