交通異常検出は、高度道路交通システム (ITS) で重要な役割を果たしています。このタスクの主な課題は、非常に多様な異常シーンと変化する照明条件にあります。多くの研究により、均質な天候と風景の異常を特定することができましたが、複雑な異常に対処することを解決したものはほとんどありません。この論文では、異常な車両の堅牢な検出のためのデュアル モダリティ モジュール化された方法論を提案しました。次のモジュールで構成される統合異常検出フレームワークを導入しました: バックグラウンド モデリング、検出による車両追跡、マスク構築、関心領域 (ROI) バックトラッキング、およびデュアル モダリティ トレース。具体的には、バックグラウンド モデリングを使用してモーション情報をフィルタリングし、静的情報は後の車両検出のために残しました。車両検出および追跡モジュールには、YOLOv5 とマルチスケール追跡を採用して異常を特定しました。また、フレーム差分と追跡結果を利用して道路を特定し、マスクを取得しました。さらに、バックトラッキングによって異常期間を精緻化するために、複数の類似性推定メトリクスを導入しました。最後に、時間をさらに洗練するために、デュアル モダリティのバイラテラル トレース モジュールを提案しました。 NVIDIA 2021 AI シティ チャレンジの Track 4 テストセットで実施された実験では、0.9302 F1 スコアと 3.4039 平方根平均二乗誤差 (RMSE) という結果が得られ、フレームワークの有効性が示されました。
Traffic anomaly detection has played a crucial role in Intelligent Transportation System (ITS). The main challenges of this task lie in the highly diversified anomaly scenes and variational lighting conditions. Although much work has managed to identify the anomaly in homogenous weather and scene, few resolved to cope with complex ones. In this paper, we proposed a dual-modality modularized methodology for the robust detection of abnormal vehicles. We introduced an integrated anomaly detection framework comprising the following modules: background modeling, vehicle tracking with detection, mask construction, Region of Interest (ROI) backtracking, and dual-modality tracing. Concretely, we employed background modeling to filter the motion information and left the static information for later vehicle detection. For the vehicle detection and tracking module, we adopted YOLOv5 and multi-scale tracking to localize the anomalies. Besides, we utilized the frame difference and tracking results to identify the road and obtain the mask. In addition, we introduced multiple similarity estimation metrics to refine the anomaly period via backtracking. Finally, we proposed a dual-modality bilateral tracing module to refine the time further. The experiments conducted on the Track 4 testset of the NVIDIA 2021 AI City Challenge yielded a result of 0.9302 F1-Score and 3.4039 root mean square error (RMSE), indicating the effectiveness of our framework.