arXiv reaDer
通信プルーニングのための学習可能なモーションコヒーレンス
Learnable Motion Coherence for Correspondence Pruning
モーションコヒーレンスは、真の対応と偽の対応を区別するための重要な手がかりです。スパースな推定対応でモーションコヒーレンスをモデル化することは、その希薄性と不均一な分布のために困難です。モーションコヒーレンスに関する既存の作業は、パラメータ設定に敏感であり、複雑なモーションパターンを処理するのが困難です。本論文では、対応剪定のための運動コヒーレンス特性を学習するために、ラプラシアン運動コヒーレンスネットワーク(LMCNet)と呼ばれるネットワークを紹介します。対応のグラフ上で滑らかな関数を用いてコヒーレント運動をフィッティングする新しい定式化を提案し、この定式化がグラフラプラシアンによる閉形式の解を可能にすることを示します。この閉じた形式のソリューションにより、学習フレームワークで微分可能なレイヤーを設計して、推定上の対応からグローバルなモーションコヒーレンスをキャプチャできます。グローバルモーションコヒーレンスは、別のローカルレイヤーによって抽出されたローカルコヒーレンスとさらに組み合わされて、インライア対応を確実に検出します。実験は、LMCNetが、相対的なカメラポーズの推定と動的シーンの対応の剪定において、最先端のパフォーマンスよりも優れていることを示しています。
Motion coherence is an important clue for distinguishing true correspondences from false ones. Modeling motion coherence on sparse putative correspondences is challenging due to their sparsity and uneven distributions. Existing works on motion coherence are sensitive to parameter settings and have difficulty in dealing with complex motion patterns. In this paper, we introduce a network called Laplacian Motion Coherence Network (LMCNet) to learn motion coherence property for correspondence pruning. We propose a novel formulation of fitting coherent motions with a smooth function on a graph of correspondences and show that this formulation allows a closed-form solution by graph Laplacian. This closed-form solution enables us to design a differentiable layer in a learning framework to capture global motion coherence from putative correspondences. The global motion coherence is further combined with local coherence extracted by another local layer to robustly detect inlier correspondences. Experiments demonstrate that LMCNet has superior performances to the state of the art in relative camera pose estimation and correspondences pruning of dynamic scenes.
updated: Mon Nov 30 2020 05:57:25 GMT+0000 (UTC)
published: Mon Nov 30 2020 05:57:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト