軌道を回る衛星の軌道と境界は、宇宙ロボットによる軌道上の修復と操作のための基本的な情報です。しかし、このタスクは、軌道上を周回する衛星の自由かつ迅速な動き、背景の急速な変化、照明条件の突然の変化により困難です。従来の追跡は通常、ターゲットオブジェクトの単一の境界ボックスに依存しますが、バイナリマスクなどの視覚的な追跡により詳細な情報を提供する必要があります。この論文では、注釈付きデータを必要とせずに、12フレーム/秒でターゲット衛星の境界ボックスとセグメンテーションバイナリマスクの両方を提供するSSLT(Saliency-based Semi-supervised Learning for Tracking)アルゴリズムを提案しました。私たちの方法であるSSLTは、追跡によって推定された初期バウンディングボックス内で、顕著性マップベースの半教師付きオンライン学習アプローチを生成することにより、セグメンテーションパフォーマンスを向上させます。カスタマイズされたセグメンテーションモデルがトレーニングされると、バイナリセグメンテーションの結果を使用して、バウンディングボックスと衛星の軌道が洗練されます。 NASA(Nation Aeronautics and Space Administration)からの実際の軌道上のランデブーおよびドッキングビデオ、ESA(欧州宇宙機関)からのシミュレートされた衛星アニメーションシーケンス、および3D印刷された衛星モデルの画像シーケンスを使用した実験により、堅牢性、汎用性、高速性が実証されました最先端の追跡およびセグメンテーション方法と比較した本方法の速度。私たちのデータセットは、将来的に学術利用のためにリリースされます。
The trajectory and boundary of an orbiting satellite are fundamental information for on-orbit repairing and manipulation by space robots. This task, however, is challenging owing to the freely and rapidly motion of on-orbiting satellites, the quickly varying background and the sudden change in illumination conditions. Traditional tracking usually relies on a single bounding box of the target object, however, more detailed information should be provided by visual tracking such as binary mask. In this paper, we proposed a SSLT (Saliency-based Semi-supervised Learning for Tracking) algorithm that provides both the bounding box and segmentation binary mask of target satellites at 12 frame per second without requirement of annotated data. Our method, SSLT, improves the segmentation performance by generating a saliency map based semi-supervised on-line learning approach within the initial bounding box estimated by tracking. Once a customized segmentation model has been trained, the bounding box and satellite trajectory will be refined using the binary segmentation result. Experiment using real on-orbit rendezvous and docking video from NASA (Nation Aeronautics and Space Administration), simulated satellite animation sequence from ESA (European Space Agency) and image sequences of 3D printed satellite model took in our laboratory demonstrate the robustness, versatility and fast speed of our method compared to state-of-the-art tracking and segmentation methods. Our dataset will be released for academic use in future.