arXiv reaDer
レンダリングと比較による焦点距離とオブジェクトポーズの推定
Focal Length and Object Pose Estimation via Render and Compare
既知のオブジェクトを表す単一のRGB入力画像が与えられた場合に、カメラオブジェクトの6Dポーズとカメラの焦点距離を共同で推定するためのニューラルレンダリングと比較の方法であるFocalPoseを紹介します。この作業の貢献は2つあります。まず、既存の最先端のレンダリングと比較の6Dポーズ推定器を拡張して、共同推定タスクに対処する焦点距離更新ルールを導出します。次に、オブジェクトのポーズと焦点距離を共同で推定するためのいくつかの異なる損失関数を調査します。直接焦点距離回帰と、並進、回転、および焦点距離の寄与を解きほぐす再投影損失の組み合わせにより、結果が改善されることがわかります。制御されていない設定で既知の3Dモデルを表す3つの挑戦的なベンチマークデータセットの結果を示します。焦点距離と6Dポーズの推定値は、既存の最先端の方法よりも誤差が少ないことを示しています。
We introduce FocalPose, a neural render-and-compare method for jointly estimating the camera-object 6D pose and camera focal length given a single RGB input image depicting a known object. The contributions of this work are twofold. First, we derive a focal length update rule that extends an existing state-of-the-art render-and-compare 6D pose estimator to address the joint estimation task. Second, we investigate several different loss functions for jointly estimating the object pose and focal length. We find that a combination of direct focal length regression with a reprojection loss disentangling the contribution of translation, rotation, and focal length leads to improved results. We show results on three challenging benchmark datasets that depict known 3D models in uncontrolled settings. We demonstrate that our focal length and 6D pose estimates have lower error than the existing state-of-the-art methods.
updated: Mon Apr 11 2022 14:26:53 GMT+0000 (UTC)
published: Mon Apr 11 2022 14:26:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト