スパースローカル機能のマッチングは、多くのコンピュータービジョンおよびロボット工学のタスクにとって極めて重要です。困難な外観条件と視角に対する不変性、したがってそれらの有用性を改善するために、既存の学習ベースの方法は、主にデータ拡張ベースのトレーニングに焦点を合わせてきました。この作業では、モデルアーキテクチャ自体にバイアスを誘導して、Steerable E2-CNNを使用して「回転固有」の機能を生成し、グループプールして回転不変のローカル機能を実現することを中心とした、代替の補完的なアプローチを提案します。操縦可能なCNNからのこの高性能で回転固有のカバレッジは、カバレッジが広いが不正確であることが多い拡張トレーニング済みの標準CNNと組み合わせることで、すべての回転角度に拡張できることを示します。これにより、最先端の技術が生み出されます。回転ロバストなローカル機能マッチャー。 HPatchesの既存の手法と、視覚的な場所認識のために新しく提案されたUrbanScenes3D-Airデータセットに対して、提案された方法のベンチマークを行います。さらに、アンサンブル、ロバスト推定、ネットワークアーキテクチャのバリエーション、およびローテーション事前の使用によるパフォーマンスへの影響の詳細な分析を示します。
Sparse local feature matching is pivotal for many computer vision and robotics tasks. To improve their invariance to challenging appearance conditions and viewing angles, and hence their usefulness, existing learning-based methods have primarily focused on data augmentation-based training. In this work, we propose an alternative, complementary approach that centers on inducing bias in the model architecture itself to generate `rotation-specific' features using Steerable E2-CNNs, that are then group-pooled to achieve rotation-invariant local features. We demonstrate that this high performance, rotation-specific coverage from the steerable CNNs can be expanded to all rotation angles by combining it with augmentation-trained standard CNNs which have broader coverage but are often inaccurate, thus creating a state-of-the-art rotation-robust local feature matcher. We benchmark our proposed methods against existing techniques on HPatches and a newly proposed UrbanScenes3D-Air dataset for visual place recognition. Furthermore, we present a detailed analysis of the performance effects of ensembling, robust estimation, network architecture variations, and the use of rotation priors.