既存の学習ベースのマルチビュー ステレオ (MVS) メソッドは、深度範囲に依存して 3D コスト ボリュームを構築し、範囲が大きすぎるか信頼できない場合に失敗する可能性があります。この問題に対処するために、2 つのビュー間のピクセル移動から深度情報を推測する、DispMVS と呼ばれるエピポーラ視差フロー (E-flow) に基づく視差ベースの MVS メソッドを提案します。 DispMVS のコアは、ピクセル マッチングのために各ペア間 (参照画像と複数のソース画像の間) のエピポーラ線に沿って画像平面上に 2D コスト ボリュームを構築し、マルチビュー ジオメトリによって各ペアから三角測量された数え切れない深さを融合することです。マルチビューの一貫性。堅牢にするために、DispMVS はランダムに初期化された深度マップから開始し、粗から微細への戦略を利用して反復的に深度マップを改良します。 DTUMVS および Tanks\&Temple データセットの実験では、DispMVS が深度範囲に敏感ではなく、より少ない GPU メモリで最先端の結果を達成することが示されています。
Existing learning-based multi-view stereo (MVS) methods rely on the depth range to build the 3D cost volume and may fail when the range is too large or unreliable. To address this problem, we propose a disparity-based MVS method based on the epipolar disparity flow (E-flow), called DispMVS, which infers the depth information from the pixel movement between two views. The core of DispMVS is to construct a 2D cost volume on the image plane along the epipolar line between each pair (between the reference image and several source images) for pixel matching and fuse uncountable depths triangulated from each pair by multi-view geometry to ensure multi-view consistency. To be robust, DispMVS starts from a randomly initialized depth map and iteratively refines the depth map with the help of the coarse-to-fine strategy. Experiments on DTUMVS and Tanks\&Temple datasets show that DispMVS is not sensitive to the depth range and achieves state-of-the-art results with lower GPU memory.