最近の研究は、ローカル記述子の学習がL2正規化の使用から利益を得ると示していますが、この効果の詳細な分析は文献に欠けています。この論文では、L2正規化がトレーニング中に逆伝播記述子勾配にどのように影響するかを調査します。私たちの観察に基づいて、HyNetを提案します。これは、マッチングで最先端の結果をもたらす新しいローカル記述子です。 HyNetは、トリプレットマージン損失のハイブリッド類似性測定、記述子ノルムを制約する正則化項、およびすべての中間特徴マップと出力記述子のL2正規化を実行する新しいネットワークアーキテクチャを導入します。 HyNetは、パッチマッチング、検証、取得などの標準ベンチマークで以前の方法を大幅に上回っており、3D再構成タスクで完全なエンドツーエンドの方法を上回っています。
Recent works show that local descriptor learning benefits from the use of L2 normalisation, however, an in-depth analysis of this effect lacks in the literature. In this paper, we investigate how L2 normalisation affects the back-propagated descriptor gradients during training. Based on our observations, we propose HyNet, a new local descriptor that leads to state-of-the-art results in matching. HyNet introduces a hybrid similarity measure for triplet margin loss, a regularisation term constraining the descriptor norm, and a new network architecture that performs L2 normalisation of all intermediate feature maps and the output descriptors. HyNet surpasses previous methods by a significant margin on standard benchmarks that include patch matching, verification, and retrieval, as well as outperforming full end-to-end methods on 3D reconstruction tasks.