効率的なリアルタイムの視差推定は、さまざまな分野でのステレオビジョンシステムのアプリケーションにとって重要です。最近、粗密法に基づくステレオネットワークは、大規模ネットワークモデルのメモリの制約と速度の制限を大幅に緩和しました。それにもかかわらず、以前のすべての粗いものから細かいものへの設計は、一定のオフセットと3つ以上のステージを使用して、粗い視差マップを段階的に改良し、モバイルデバイスに展開したときに不十分な計算精度と推論時間をもたらします。この論文は、より正確な視差候補が提供されれば、粗いマッチングエラーはより少ない段階で効率的に修正できると主張している。したがって、さまざまなオブジェクトのさまざまな補正要件を満たし、効率的な2段階のフレームワークを設計するための動的オフセット予測モジュールを提案します。さらに、コンパクトコストボリュームのローカル統計特性との整合性が高いため、パフォーマンスをさらに向上させるために、視差に依存しない畳み込みを提案します。複数のデータセットとプラットフォームでの評価結果は、提案されたネットワークが、精度と速度の点で、特にモバイルデバイス向けの最先端の軽量モデルよりも優れていることを明確に示しています。コードが利用可能になります。
Efficient real-time disparity estimation is critical for the application of stereo vision systems in various areas. Recently, stereo network based on coarse-to-fine method has largely relieved the memory constraints and speed limitations of large-scale network models. Nevertheless, all of the previous coarse-to-fine designs employ constant offsets and three or more stages to progressively refine the coarse disparity map, still resulting in unsatisfactory computation accuracy and inference time when deployed on mobile devices. This paper claims that the coarse matching errors can be corrected efficiently with fewer stages as long as more accurate disparity candidates can be provided. Therefore, we propose a dynamic offset prediction module to meet different correction requirements of diverse objects and design an efficient two-stage framework. Besides, we propose a disparity-independent convolution to further improve the performance since it is more consistent with the local statistical characteristics of the compact cost volume. The evaluation results on multiple datasets and platforms clearly demonstrate that, the proposed network outperforms the state-of-the-art lightweight models especially for mobile devices in terms of accuracy and speed. Code will be made available.