arXiv reaDer
静止または動的シーンの教師なしディープエピポーラフロー
Unsupervised Deep Epipolar Flow for Stationary or Dynamic Scenes
オプティカルフロー計算のための教師なし深層学習は、有望な結果を達成しました。ほとんどの既存のディープネットベースの方法は、ネットワークをトレーニングするために画像の明るさの一貫性と局所的な滑らかさの制約に依存しています。テクスチャやオクルージョンが繰り返される領域では、パフォーマンスが低下します。本論文では、ネットワーク学習にグローバルな幾何学的制約を組み込んだ教師なしオプティカルフロー法であるディープエピポーラフローを提案します。特に、フロー推定でエピポーラ制約を適用する複数の方法を調査します。複数のモーションが存在する可能性のある動的シーンで発生する「鶏が先か卵が先か」タイプの問題を軽減するために、トレーニング用の低ランク制約と部分空間の結合制約を提案します。さまざまなベンチマークデータセットの実験結果は、私たちの方法が教師あり方法と比較して競争力のあるパフォーマンスを達成し、最先端の教師なし深層学習方法よりも優れていることを示しています。
Unsupervised deep learning for optical flow computation has achieved promising results. Most existing deep-net based methods rely on image brightness consistency and local smoothness constraint to train the networks. Their performance degrades at regions where repetitive textures or occlusions occur. In this paper, we propose Deep Epipolar Flow, an unsupervised optical flow method which incorporates global geometric constraints into network learning. In particular, we investigate multiple ways of enforcing the epipolar constraint in flow estimation. To alleviate a "chicken-and-egg" type of problem encountered in dynamic scenes where multiple motions may be present, we propose a low-rank constraint as well as a union-of-subspaces constraint for training. Experimental results on various benchmarking datasets show that our method achieves competitive performance compared with supervised methods and outperforms state-of-the-art unsupervised deep-learning methods.
updated: Thu Jul 14 2022 12:27:15 GMT+0000 (UTC)
published: Mon Apr 08 2019 05:41:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト