3Dビジュアルトラッキングは、宇宙船がターゲットに柔軟に接近することを保証できる深宇宙探査プログラムにとって重要です。この論文では、3D追跡のために研究された正確でリアルタイムの方法に焦点を当てます。このトピックの公開データセットがほとんどないという事実を考慮して、新しい大規模な3D小惑星追跡データセットが提示されます。これには、両眼ビデオシーケンス、深度マップ、さまざまな形状とテクスチャを持つ多様な小惑星の点群が含まれます。シミュレーションプラットフォームのパワーと利便性の恩恵を受けて、すべての2Dおよび3D注釈が自動的に生成されます。一方、2D単眼トラッカーと新しい軽量の非モーダル軸整列バウンディングボックスネットワークA3BoxNetを含む、Track3Dという名前のディープラーニングベースの3Dトラッキングフレームワークを提案します。評価結果は、Track3Dがベースラインアルゴリズムと比較して、精度と精度の両方で最先端の3Dトラッキングパフォーマンスを達成していることを示しています。さらに、私たちのフレームワークは、2D単眼追跡パフォーマンスへの優れた一般化能力を備えています。
3D visual tracking is significant to deep space exploration programs, which can guarantee spacecraft to flexibly approach the target. In this paper, we focus on the studied accurate and real-time method for 3D tracking. Considering the fact that there are almost no public dataset for this topic, A new large-scale 3D asteroid tracking dataset is presented, including binocular video sequences, depth maps, and point clouds of diverse asteroids with various shapes and textures. Benefitting from the power and convenience of simulation platform, all the 2D and 3D annotations are automatically generated. Meanwhile, we propose a deep-learning based 3D tracking framework, named as Track3D, which involves 2D monocular tracker and a novel light-weight amodal axis-aligned bounding-box network, A3BoxNet. The evaluation results demonstrate that Track3D achieves state-of-the-art 3D tracking performance in both accuracy and precision, comparing to a baseline algorithm. Moreover, our framework has great generalization ability to 2D monocular tracking performance.