arXiv reaDer
CNN-based Patch Matching for Optical Flow with Thresholded Hinge Embedding Loss
 学習ベースのアプローチは、オプティカルフロー推定での潜在能力をまだ完全には達成しておらず、そのパフォーマンスは依然としてヒューリスティックなアプローチを踏襲しています。このペーパーでは、オプティカルフロー推定のためのCNNベースのパッチマッチングアプローチを示します。私たちのアプローチの重要な貢献は、シャムネットワークの新しいしきい値の損失です。私たちの損失は、既存の損失よりも明らかに優れています。また、テストでトレーニングを2倍高速化できます。さらに、既存の方法よりも優れたパフォーマンスを発揮する、さまざまな画像スケールのCNNベースの特徴を計算するための新しい方法を紹介します。また、オプティカルフローにパッチマッチングを適用するためのトレーニング済み機能の堅牢性を評価する新しい方法についても説明します。私たちの論文で興味深い発見は、特徴マップのローパスフィルタリングがCNNによって作成された特徴のロバスト性を向上できることです。 KITTI 2012、KITTI 2015、MPI-Sintel評価ポータルに提出することで、アプローチの競争力を証明し、3つのデータセットすべてで最新の結果を取得しました。
Learning based approaches have not yet achieved their full potential in optical flow estimation, where their performance still trails heuristic approaches. In this paper, we present a CNN based patch matching approach for optical flow estimation. An important contribution of our approach is a novel thresholded loss for Siamese networks. We demonstrate that our loss performs clearly better than existing losses. It also allows to speed up training by a factor of 2 in our tests. Furthermore, we present a novel way for calculating CNN based features for different image scales, which performs better than existing methods. We also discuss new ways of evaluating the robustness of trained features for the application of patch matching for optical flow. An interesting discovery in our paper is that low-pass filtering of feature maps can increase the robustness of features created by CNNs. We proved the competitive performance of our approach by submitting it to the KITTI 2012, KITTI 2015 and MPI-Sintel evaluation portals where we obtained state-of-the-art results on all three datasets.
updated: Mon May 25 2020 06:28:24 GMT+0000 (UTC)
published: Wed Jul 27 2016 12:41:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト