arXiv reaDer
How to Train a CAT: Learning Canonical Appearance Transformations for Direct Visual Localization Under Illumination Change
直接視覚的ローカリゼーションは、安価なモバイルコンピューティングパワーの利用可能性の増加に伴い、最近人気が復活しています。最先端の機能ベースの方法と比較したこれらのアルゴリズムの競争力のある精度と堅牢性、および高密度マップを生成する自然な能力により、さまざまなモバイルロボットアプリケーションにとって魅力的な選択肢となっています。ただし、直接的な方法は、実際には一般的に違反されている測光の一貫性の基本的な仮定のために、外観の変化に直面しても脆弱なままです。この論文では、以前に見られた標準的な外観に対応するようにシーンの画像を変換するために、深い畳み込みエンコーダ-デコーダモデルをトレーニングすることによって、この問題を軽減することを提案します。忠実度の高い合成RGB-Dデータセットを使用して、複数の環境と照明条件でメソッドを検証し、トレーニング済みモデルを直接視覚ローカリゼーションパイプラインに統合して、時間とともに変化する照明条件を通じて視覚オドメトリ(VO)の精度を向上させます。従来の方法では通常失敗する、照明の変化の下での改善されたメトリック再ローカリゼーションパフォーマンスとして。さらに、ローカリゼーションのコンテキストで合成環境から実際の環境への転移学習の予備調査を提供します。 PyTorchを使用したメソッドのオープンソース実装は、で入手できます。
Direct visual localization has recently enjoyed a resurgence in popularity with the increasing availability of cheap mobile computing power. The competitive accuracy and robustness of these algorithms compared to state-of-the-art feature-based methods, as well as their natural ability to yield dense maps, makes them an appealing choice for a variety of mobile robotics applications. However, direct methods remain brittle in the face of appearance change due to their underlying assumption of photometric consistency, which is commonly violated in practice. In this paper, we propose to mitigate this problem by training deep convolutional encoder-decoder models to transform images of a scene such that they correspond to a previously-seen canonical appearance. We validate our method in multiple environments and illumination conditions using high-fidelity synthetic RGB-D datasets, and integrate the trained models into a direct visual localization pipeline, yielding improvements in visual odometry (VO) accuracy through time-varying illumination conditions, as well as improved metric relocalization performance under illumination change, where conventional methods normally fail. We further provide a preliminary investigation of transfer learning from synthetic to real environments in a localization context. An open-source implementation of our method using PyTorch is available at
updated: Mon Jul 04 2022 03:22:46 GMT+0000 (UTC)
published: Sat Sep 09 2017 21:58:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト