arXiv reaDer
SF2SE3: 提案と選択による SE(3) モーションへのシーン フローのクラスタリング
SF2SE3: Clustering Scene Flow into SE(3)-Motions via Proposal and Selection
SF2SE3 は、シーンのダイナミクスを独立して動く剛体オブジェクトとその SE(3) モーションへのセグメンテーションの形で推定する新しいアプローチです。 SF2SE3 は、2 つの連続するステレオまたは RGB-D 画像で動作します。まず、既存のオプティカル フローと深度推定アルゴリズムを適用して、ノイズの多いシーン フローを取得します。次に、SF2SE3 は (1) ピクセル セットをサンプリングして SE(3) モーション提案を計算し、(2) 最大カバレッジの定式化に関して最適な SE(3) モーション提案を選択します。最後に、オブジェクトは、入力シーン フローおよび空間的近接性との一貫性に基づいて、選択された SE(3) モーションにピクセルを一意に割り当てることによって形成されます。主な新機能は、モーション提案のサンプリングのためのより情報に基づいた戦略と、提案選択のための最大カバレッジの定式化です。 SF2SE3 のシーン フロー推定、オブジェクト セグメンテーション、ビジュアル オドメトリへの適用に関して、複数のデータセットの評価を行います。 SF2SE3 は、シーン フロー推定の最先端技術と同等のパフォーマンスを発揮し、セグメンテーションとオドメトリの精度が向上しています。
We propose SF2SE3, a novel approach to estimate scene dynamics in form of a segmentation into independently moving rigid objects and their SE(3)-motions. SF2SE3 operates on two consecutive stereo or RGB-D images. First, noisy scene flow is obtained by application of existing optical flow and depth estimation algorithms. SF2SE3 then iteratively (1) samples pixel sets to compute SE(3)-motion proposals, and (2) selects the best SE(3)-motion proposal with respect to a maximum coverage formulation. Finally, objects are formed by assigning pixels uniquely to the selected SE(3)-motions based on consistency with the input scene flow and spatial proximity. The main novelties are a more informed strategy for the sampling of motion proposals and a maximum coverage formulation for the proposal selection. We conduct evaluations on multiple datasets regarding application of SF2SE3 for scene flow estimation, object segmentation and visual odometry. SF2SE3 performs on par with the state of the art for scene flow estimation and is more accurate for segmentation and odometry.
updated: Mon Sep 26 2022 21:24:59 GMT+0000 (UTC)
published: Sun Sep 18 2022 10:54:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト