海事部門では、特に混雑した港や水路において、安全な船舶の航行が非常に重要です。この作業の焦点は、コンパニオンUAVを使用して、関心のあるオブジェクトと潜在的な障害物との間の距離を推定することです。提案されたアプローチは、GPSデータを長距離航空画像と融合します。まず、生の画像データを使用して、関心のある血管、水、および潜在的な固体オブジェクトを識別するために、セマンティックセグメンテーションDNNを採用します。ネットワークは、現実的なAirSimシミュレーション環境から生成され、自動的にラベル付けされた実際の画像と画像の両方でトレーニングされます。次に、抽出された血管と非水障害物ブロブの間の距離が、新しいGSD推定アルゴリズムを使用して計算されます。私たちの知る限り、この作業は、従来のRGBカメラと補助絶対測位システム(GPSなど)でキャプチャされた長距離視覚データから未知のオブジェクトまでの距離を検出および推定する最初の試みです。シミュレーション結果は、UAVによって支援された船舶の視覚的に支援されたナビゲーションのための提案された方法の精度と有効性を示しています。
In the maritime sector, safe vessel navigation is of great importance, particularly in congested harbors and waterways. The focus of this work is to estimate the distance between an object of interest and potential obstacles using a companion UAV. The proposed approach fuses GPS data with long-range aerial images. First, we employ semantic segmentation DNN for discriminating the vessel of interest, water, and potential solid objects using raw image data. The network is trained with both real and images generated and automatically labeled from a realistic AirSim simulation environment. Then, the distances between the extracted vessel and non-water obstacle blobs are computed using a novel GSD estimation algorithm. To the best of our knowledge, this work is the first attempt to detect and estimate distances to unknown objects from long-range visual data captured with conventional RGB cameras and auxiliary absolute positioning systems (e.g. GPS). The simulation results illustrate the accuracy and efficacy of the proposed method for visually aided navigation of vessels assisted by UAV.