arXiv reaDer
AdaStereo:アダプティブステレオマッチングのためのシンプルで効率的なアプローチ
AdaStereo: A Simple and Efficient Approach for Adaptive Stereo Matching
最近、ステレオマッチングベンチマークの記録は、エンドツーエンドの視差ネットワークによって絶えず破られていますが、これらのディープモデルのドメイン適応能力はかなり劣っています。このような問題に対処するために、ディープステレオマッチングネットワークのマルチレベル表現を調整することを目的としたAdaStereoと呼ばれる新しいドメイン適応パイプラインを紹介します。アダプティブステレオマッチングの以前の方法と比較して、AdaStereoは、より標準的で完全かつ効果的なドメインアダプテーションパイプラインを実現します。まず、入力画像レベルの位置合わせのための非敵対的なプログレッシブカラー転送アルゴリズムを提案します。次に、内部の機能レベルの調整のために、パラメータを使用しない効率的なコスト正規化レイヤーを設計します。最後に、出力スペースのギャップを狭めるために、関連性の高い補助タスクである自己教師ありオクルージョン認識再構成が提示されます。ホイッスルやベルなしで、AdaStereoモデルは、KITTI、Middlebury、ETH3D、DrivingStereoなどの複数のステレオマッチングベンチマークで最先端のクロスドメインパフォーマンスを実現し、ターゲットで微調整された最先端の視差ネットワークよりも優れています。ドメインのグラウンドトゥルース。
Recently records on stereo matching benchmarks are constantly broken by end-to-end disparity networks, however the domain adaptation ability of these deep models is quite poor. Addressing such problem, we present a novel domain-adaptive pipeline called AdaStereo that aims to align multi-level representations for deep stereo matching networks. Compared to previous methods for adaptive stereo matching, our AdaStereo realizes a more standard, complete and effective domain adaptation pipeline. Firstly, we propose a non-adversarial progressive color transfer algorithm for input image-level alignment. Secondly, we design an efficient parameter-free cost normalization layer for internal feature-level alignment. Lastly, a highly-related auxiliary task, self-supervised occlusion-aware reconstruction is presented to narrow the gaps in output space. Without whistles and bells, our AdaStereo models achieve state-of-the-art cross-domain performance on multiple stereo matching benchmarks, including KITTI, Middlebury, ETH3D and DrivingStereo, even outperform state-of-the-art disparity networks finetuned with target-domain ground-truths.
updated: Fri Nov 27 2020 09:20:20 GMT+0000 (UTC)
published: Thu Apr 09 2020 16:15:13 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト