オブジェクトの姿勢推定は、ロボットの視覚とARの不可欠な部分です。以前の6Dポーズ検索パイプラインは、問題を回帰タスクとして扱うか、ポーズ空間を離散化して分類します。このパラダイムを変更し、問題をアクション決定プロセスとして再定式化します。アクション決定プロセスでは、初期ポーズが増分離散ステップで更新され、仮想3Dレンダリングが正しいソリューションに向かって順次移動します。ニューラルネットワークは、単一のRGB画像からの移動を繰り返し推定し、許容できる最終ポーズを決定します。オブジェクト固有のポーズモデルをトレーニングする他のアプローチと比較して、決定プロセスを学習します。これにより、軽量のアーキテクチャが可能になりますが、自然に見えないオブジェクトに一般化されます。プロセス終了のコヒーレントストップアクションにより、ビデオシーケンスにわずかな変更があった場合でも、計算コストを動的に削減できます。これにより、静的な推論時間の代わりに、オブジェクトの動きに応じてランタイムが自動的に増加します。アクション決定ネットワークの堅牢性と正確性は、最先端の技術を大幅に向上させたLavalおよびYCBのビデオシーンで評価されます。
Object pose estimation is an integral part of robot vision and AR. Previous 6D pose retrieval pipelines treat the problem either as a regression task or discretize the pose space to classify. We change this paradigm and reformulate the problem as an action decision process where an initial pose is updated in incremental discrete steps that sequentially move a virtual 3D rendering towards the correct solution. A neural network estimates likely moves from a single RGB image iteratively and determines so an acceptable final pose. In comparison to other approaches that train object-specific pose models, we learn a decision process. This allows for a lightweight architecture while it naturally generalizes to unseen objects. A coherent stop action for process termination enables dynamic reduction of the computation cost if there are insignificant changes in a video sequence. Instead of a static inference time, we thereby automatically increase the runtime depending on the object motion. Robustness and accuracy of our action decision network are evaluated on Laval and YCB video scenes where we significantly improve the state-of-the-art.