arXiv reaDer
最大限に補完する手法を予測することにより、ベースラインの視覚的場所認識手法のパフォーマンスを向上させる
Boosting Performance of a Baseline Visual Place Recognition Technique by Predicting the Maximally Complementary Technique
Visual Place Recognition (VPR) の問題に対する最近の有望なアプローチの 1 つは、SRAL やマルチプロセス フュージョンなどの方法を使用して、複数の補完的な VPR 技術の場所認識推定を融合することです。これらのアプローチには、実質的な実用上の制限があります。選択的に融合する前に、すべての潜在的な VPR メソッドを力ずくで実行する必要があります。この制限に対する明らかな解決策は、実行可能な方法のサブセットを事前に予測することですが、高性能な方法を示す画像自体の予測信号が必要になるため、これは困難です。ここでは、代わりに既知の単一ベース VPR 手法から開始し、それと融合する最も補完的な追加の VPR 手法を予測することを学習する代替アプローチを提案します。これにより、パフォーマンスが最大に改善されます。ここでの重要なイノベーションは、トレーニングと推論の両方で、このベースライン手法を最も補完的な追加手法の予測信号として使用して、クエリ画像と上位取得された参照画像の間で次元削減された差分ベクトルを使用することです。私たちのアプローチは、単一のネットワークをトレーニングして、複数の交通手段(電車、車、徒歩)にまたがるデータセット全体でパフォーマンスの高い補完的な技術ペアを選択し、目に見えないデータセットに一般化して、手動で最適なものを選択するための複数のベースライン戦略よりも優れていることを示しています同じトレーニング データに基づくテクニック ペア。
One recent promising approach to the Visual Place Recognition (VPR) problem has been to fuse the place recognition estimates of multiple complementary VPR techniques using methods such as SRAL and multi-process fusion. These approaches come with a substantial practical limitation: they require all potential VPR methods to be brute-force run before they are selectively fused. The obvious solution to this limitation is to predict the viable subset of methods ahead of time, but this is challenging because it requires a predictive signal within the imagery itself that is indicative of high performance methods. Here we propose an alternative approach that instead starts with a known single base VPR technique, and learns to predict the most complementary additional VPR technique to fuse with it, that results in the largest improvement in performance. The key innovation here is to use a dimensionally reduced difference vector between the query image and the top-retrieved reference image using this baseline technique as the predictive signal of the most complementary additional technique, both during training and inference. We demonstrate that our approach can train a single network to select performant, complementary technique pairs across datasets which span multiple modes of transportation (train, car, walking) as well as to generalise to unseen datasets, outperforming multiple baseline strategies for manually selecting the best technique pairs based on the same training data.
updated: Fri Oct 14 2022 04:32:23 GMT+0000 (UTC)
published: Fri Oct 14 2022 04:32:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト