arXiv reaDer
FlowStep3D:自己教師ありシーンフロー推定のためのモデル展開
FlowStep3D: Model Unrolling for Self-Supervised Scene Flow Estimation
シーンフローと呼ばれる、シーン内のポイントの3Dモーションを推定することは、コンピュータビジョンの中心的な問題です。エンドツーエンドの3Dフローを学習するように設計された従来の学習ベースの方法は、一般化が不十分であることがよくあります。ここでは、シーンフロー予測を洗練するための展開された反復アライメント手順の単一ステップを学習する反復アーキテクチャを提示します。古典的なアルゴリズムに触発されて、強力な正則化を使用してソリューションに向けた反復収束を示します。提案された方法は、かなりの時間的変形を処理でき、競合する全対全相関アプローチよりもスリムなアーキテクチャを提案します。 FlyingThings3D合成データのみでトレーニングされた当社のネットワークは、実際のスキャンへの一般化に成功し、KITTIの自己監視ベンチマークで既存のすべての方法を大幅に上回っています。
Estimating the 3D motion of points in a scene, known as scene flow, is a core problem in computer vision. Traditional learning-based methods designed to learn end-to-end 3D flow often suffer from poor generalization. Here we present a recurrent architecture that learns a single step of an unrolled iterative alignment procedure for refining scene flow predictions. Inspired by classical algorithms, we demonstrate iterative convergence toward the solution using strong regularization. The proposed method can handle sizeable temporal deformations and suggests a slimmer architecture than competitive all-to-all correlation approaches. Trained on FlyingThings3D synthetic data only, our network successfully generalizes to real scans, outperforming all existing methods by a large margin on the KITTI self-supervised benchmark.
updated: Sun Apr 04 2021 14:19:35 GMT+0000 (UTC)
published: Thu Nov 19 2020 23:23:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト