ステレオマッチングは、コンピュータビジョンにおける重要なタスクであり、何十年にもわたって多大な研究の注目を集めてきました。視差の精度、密度、データサイズの観点からは、パブリックステレオデータセットはモデルの要件を満たすのが困難です。この論文では、データセットとモデルの間の問題に対処し、PlantStereoという名前の高精度の視差グラウンドトゥルースを備えた大規模ステレオデータセットを提案することを目指しています。半自動の方法を使用してデータセットを構築しました。カメラのキャリブレーションと画像レジストレーションの後、深度画像から高精度の視差画像を取得できます。 PlantStereoには、ほうれん草、トマト、コショウ、カボチャなど、さまざまな植物のセットをカバーする812の画像ペアが含まれています。まず、PlantStereoデータセットを4つの異なるステレオマッチング方法で評価しました。さまざまなモデルや植物での広範な実験により、整数精度のグラウンドトゥルースと比較して、PlantStereoによって提供される高精度の視差画像は深層学習モデルのトレーニング効果を著しく改善できることが示されています。この論文は、植物表面の密な再構築を実現するための実行可能で信頼できる方法を提供した。 PlantStereoデータセットと相対コードは、https://www.github.com/wangqingyu985/PlantStereoで入手できます。
Stereo matching is an important task in computer vision which has drawn tremendous research attention for decades. While in terms of disparity accuracy, density and data size, public stereo datasets are difficult to meet the requirements of models. In this paper, we aim to address the issue between datasets and models and propose a large scale stereo dataset with high accuracy disparity ground truth named PlantStereo. We used a semi-automatic way to construct the dataset: after camera calibration and image registration, high accuracy disparity images can be obtained from the depth images. In total, PlantStereo contains 812 image pairs covering a diverse set of plants: spinach, tomato, pepper and pumpkin. We firstly evaluated our PlantStereo dataset on four different stereo matching methods. Extensive experiments on different models and plants show that compared with ground truth in integer accuracy, high accuracy disparity images provided by PlantStereo can remarkably improve the training effect of deep learning models. This paper provided a feasible and reliable method to realize plant surface dense reconstruction. The PlantStereo dataset and relative code are available at: https://www.github.com/wangqingyu985/PlantStereo