arXiv reaDer
水中物体追跡におけるサンプルの不均衡調整と類似物体の除外
Sample Imbalance Adjustment and Similar Object Exclusion in Underwater Object Tracking
最新のトラッカーは、水中の画像劣化評価で競争力のあるパフォーマンスを発揮しますが、これらを水中オブジェクト トラッキング (UOT) に適用すると、2 つの問題が残ります。単一オブジェクト トラッカーは、屋外のデータセットでトレーニングされるため、UOT に適用すると、水中のオブジェクトと屋外のオブジェクトの間で深刻なサンプルの不均衡が生じます。さらに、魚やイルカなどの水中のターゲットは通常、似たような外観をしており、モデルが弱い識別機能を識別することは困難です。既存の検出ベースの後処理アプローチは、追跡されたターゲットを類似のオブジェクトと区別するのに苦労しています。この研究では、水中画像と屋外シーケンスハイブリッドトレーニング(UOHT)、およびモーションベースの後処理(MBPP)の使用を含むUOSTrackが提案されています。 UOHT トレーニング パラダイムは、サンプルの不均衡な水中トラッカーをトレーニングするように設計されています。特に、水中物体検出 (UOD) 画像は、カスタマイズされたデータ増強によって画像ペアに変換されます。これにより、トラッカーはより多くの水中ドメイン トレーニング サンプルにさらされ、水中物体の特徴表現を学習します。 MBPP パラダイムは、ターゲットの近くにある同様のオブジェクトを除外するために提案されています。具体的には、カルマン フィルターを使用して予測された推定ボックスと各フレームの候補ボックスを使用して、失われた場合に候補領域に隠れている追跡ターゲットを再確認します。 UOSTrack は、UOT100 および UTB180 の同様のオブジェクト チャレンジ属性で、OSTrack と比較して平均 3.5% のパフォーマンス向上を提供します。 UOSTrack によって提供される平均パフォーマンスの向上は、それぞれ 1% と 3% です。 2 つの UOT ベンチマークの結果は、UOSTrack が新しい最先端のベンチマークを設定し、UOHT と MBPP の有効性、および UOT で使用するための MBPP の一般化と適用可能性を示しています。
Although modern trackers exhibit competitive performance for underwater image degradation assessment, two problems remain when these are applied to underwater object tracking (UOT). A single-object tracker is trained on open-air datasets, which results in a serious sample imbalance between underwater objects and open-air objects when it is applied to UOT. Moreover, underwater targets such as fish and dolphins usually have a similar appearance, and it is challenging for models to discriminate weak discriminative features. Existing detection-based post-processing approaches struggle to distinguish a tracked target from similar objects. In this study, the UOSTrack is proposed, which involves the use of underwater images and open-air sequence hybrid training (UOHT), and motion-based post-processing (MBPP). The UOHT training paradigm is designed to train the sample-imbalanced underwater tracker. In particular, underwater object detection (UOD) images are converted into image pairs through customised data augmentation, such that the tracker is exposed to more underwater domain training samples and learns the feature expressions of underwater objects. The MBPP paradigm is proposed to exclude similar objects near the target. In particular, it employs the estimation box predicted using a Kalman filter and the candidate boxes in each frame to reconfirm the tracked target that is hidden in the candidate area when it has been lost. UOSTrack provides an average performance improvement of 3.5 % compared to OSTrack on similar object challenge attribute in UOT100 and UTB180. The average performance improvements provided by UOSTrack are 1 % and 3 %, respectively. The results from two UOT benchmarks demonstrate that UOSTrack sets a new state-of-the-art benchmark, and the effectiveness of UOHT and MBPP, and the generalisation and applicability of the MBPP for use in UOT.
updated: Mon Mar 27 2023 06:23:07 GMT+0000 (UTC)
published: Wed Jan 04 2023 08:22:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト