arXiv reaDer
Spring: シーン フロー、オプティカル フロー、ステレオの高解像度で詳細なデータセットとベンチマーク
Spring: A High-Resolution High-Detail Dataset and Benchmark for Scene Flow, Optical Flow and Stereo
モーションおよびステレオ推定の最近の方法は前例のない量の詳細を回復しますが、そのような非常に詳細な構造は、既存のベンチマークのデータにもその評価方法にも適切に反映されていません。したがって、シーン フロー、オプティカル フロー、およびステレオ用の大規模で高解像度、高詳細なコンピューター生成ベンチマークである Spring を紹介します。オープンソースの Blender 映画「Spring」からレンダリングされたシーンに基づいて、最先端の視覚効果とグラウンド トゥルース トレーニング データを備えた写真のようにリアルな HD データセットを提供します。さらに、結果をアップロード、分析、比較するための Web サイトも提供しています。超解像された UHD グラウンド トゥルースに基づく新しい評価方法を使用して、Spring ベンチマークは微細構造の品質を評価し、さまざまな画像領域でさらに詳細なパフォーマンス統計を提供できます。グラウンド トゥルース フレームの数に関しては、Spring は唯一のシーン フロー ベンチマークである KITTI 2015 よりも 60 倍大きく、確立された MPI Sintel オプティカル フロー ベンチマークよりも 15 倍大きいです。私たちのベンチマークでの最近の方法の最初の結果は、精度が改善の余地がかなりあるため、詳細を推定することは実際に困難であることを示しています. Spring ベンチマークと対応するデータセットは、http://spring-benchmark.org で入手できます。
While recent methods for motion and stereo estimation recover an unprecedented amount of details, such highly detailed structures are neither adequately reflected in the data of existing benchmarks nor their evaluation methodology. Hence, we introduce Spring - a large, high-resolution, high-detail, computer-generated benchmark for scene flow, optical flow, and stereo. Based on rendered scenes from the open-source Blender movie "Spring", it provides photo-realistic HD datasets with state-of-the-art visual effects and ground truth training data. Furthermore, we provide a website to upload, analyze and compare results. Using a novel evaluation methodology based on a super-resolved UHD ground truth, our Spring benchmark can assess the quality of fine structures and provides further detailed performance statistics on different image regions. Regarding the number of ground truth frames, Spring is 60× larger than the only scene flow benchmark, KITTI 2015, and 15× larger than the well-established MPI Sintel optical flow benchmark. Initial results for recent methods on our benchmark show that estimating fine details is indeed challenging, as their accuracy leaves significant room for improvement. The Spring benchmark and the corresponding datasets are available at http://spring-benchmark.org.
updated: Fri Mar 03 2023 14:15:48 GMT+0000 (UTC)
published: Fri Mar 03 2023 14:15:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト