この論文では、農業航空画像のセマンティックセグメンテーションの問題を調査します。このタスクに使用される既存の方法は、空中データの2つの特性を考慮せずに設計されていることを確認します。(i)トップダウンの視点は、同じシーンがセンサーのさまざまな回転を経験しました。 (ii)シーンの関連するオブジェクトが非常に異なるスケールで表示される可能性があるため、セマンティッククラスの分布に大きな不均衡が生じる可能性があります(たとえば、作物の畑や小型車両)。 2つのアイデアに基づいて、これらの問題の解決策を提案します。(i)適切な拡張と一貫性の喪失のセットを一緒に使用して、トップダウンに典型的な測光および幾何学的シフトに不変な意味表現を学習するようにモデルをガイドします。パースペクティブ(拡張不変性); (ii)クラスのピクセル単位の分布と実際のネットワーク信頼度の測定値に基づいてトレーニング画像を選択するサンプリング方法(適応サンプリング)を使用します。 Agriculture-Visionデータセットで実施された一連の広範な実験により、提案された戦略が現在の最先端の方法のパフォーマンスを向上させることを示します。
In this paper, we investigate the problem of Semantic Segmentation for agricultural aerial imagery. We observe that the existing methods used for this task are designed without considering two characteristics of the aerial data: (i) the top-down perspective implies that the model cannot rely on a fixed semantic structure of the scene, because the same scene may be experienced with different rotations of the sensor; (ii) there can be a strong imbalance in the distribution of semantic classes because the relevant objects of the scene may appear at extremely different scales (e.g., a field of crops and a small vehicle). We propose a solution to these problems based on two ideas: (i) we use together a set of suitable augmentation and a consistency loss to guide the model to learn semantic representations that are invariant to the photometric and geometric shifts typical of the top-down perspective (Augmentation Invariance); (ii) we use a sampling method (Adaptive Sampling) that selects the training images based on a measure of pixel-wise distribution of classes and actual network confidence. With an extensive set of experiments conducted on the Agriculture-Vision dataset, we demonstrate that our proposed strategies improve the performance of the current state-of-the-art method.