人間の監督なしで動作できる車両を構築するには、エージェントのポーズを決定する必要があります。 Visual Odometry(VO)アルゴリズムは、入力画像からの視覚的な変化のみを使用して自我運動を推定します。最新のVOメソッドは、畳み込みニューラルネットワーク(CNN)を広範囲に使用する深層学習手法を実装しているため、高解像度の画像を処理する際にかなりのコストがかかります。さらに、VOタスクでは、入力データが多いからといって予測が改善されるわけではありません。それどころか、アーキテクチャは役に立たない情報を除外する可能性があります。したがって、計算効率が高く軽量なアーキテクチャの実装が不可欠です。この作業では、視覚オドメトリタスク用の反復注意モデル(RAM)の拡張であるRAM-VOを提案します。 RAM-VOは、情報の視覚的および時間的表現を改善し、Proximal Policy Optimization(PPO)アルゴリズムを実装して、堅牢なポリシーを学習します。結果は、RAM-VOが約300万のパラメーターを使用して、単眼入力画像から6自由度で回帰を実行できることを示しています。さらに、KITTIデータセットでの実験は、RAM-VOが利用可能な視覚情報の5.7%のみを使用して競争力のある結果を達成することを示しています。
Building vehicles capable of operating without human supervision requires the determination of the agent's pose. Visual Odometry (VO) algorithms estimate the egomotion using only visual changes from the input images. The most recent VO methods implement deep-learning techniques using convolutional neural networks (CNN) extensively, which add a substantial cost when dealing with high-resolution images. Furthermore, in VO tasks, more input data does not mean a better prediction; on the contrary, the architecture may filter out useless information. Therefore, the implementation of computationally efficient and lightweight architectures is essential. In this work, we propose the RAM-VO, an extension of the Recurrent Attention Model (RAM) for visual odometry tasks. RAM-VO improves the visual and temporal representation of information and implements the Proximal Policy Optimization (PPO) algorithm to learn robust policies. The results indicate that RAM-VO can perform regressions with six degrees of freedom from monocular input images using approximately 3 million parameters. In addition, experiments on the KITTI dataset demonstrate that RAM-VO achieves competitive results using only 5.7% of the available visual information.