arXiv reaDer
SaNet:複数の空間解像度の航空画像のセマンティックラベリングのためのスケール対応ニューラルネットワーク
SaNet: Scale-aware Neural Network for Semantic Labelling of Multiple Spatial Resolution Aerial Images
ピクセルレベルで特定のカテゴリを持つ航空画像の地理空間オブジェクトを割り当てることは、都市のシーンの解釈における基本的なタスクです。センサー技術の急速な発展に伴い、航空写真は複数の空間解像度(MSR)でキャプチャでき、情報コンテンツはさまざまなスケールで表示されます。これらのMSR航空写真から情報を抽出することは、機能の表現と特性評価を強化するための大きなチャンスを表しています。ただし、MSR画像には、1)地理空間オブジェクトのサイズの変動の増加、および2)粗い空間解像度での情報と有益な特徴の損失という2つの重大な問題があります。この論文では、これら2つの問題に対処するために、MSR航空画像のセマンティックラベリングのための新しいスケール認識ニューラルネットワーク(SaNet)を提案します。 SaNetは、高密度接続機能ネットワーク(DCFPN)モジュールを展開して、スケール変動の問題に対処し、大小両方のオブジェクトのセグメンテーションの品質を同時に向上させるなど、高品質のマルチスケールコンテキストをキャプチャします。空間機能再キャリブレーション(SFR)モジュールがさらにネットワークに組み込まれ、強化された空間関係を備えた完全なセマンティック機能を学習します。ここでは、情報の影響と有益な機能の損失に対処します。 DCFPNとSFRの組み合わせにより、提案されたSaNetはMSR航空画像からスケール対応機能を学習できます。 ISPRSセマンティックセグメンテーションデータセットで行われた広範な実験により、クロスレゾリューションセグメンテーションで提案されたSaNetの卓越した精度が実証され、Vaihingenデータセットでの平均OAは83.4%、Potsdamデータセットでの平均F1スコアは80.4%であり、 -FPN(80.2%および76.6%)、PSPNet(79.8%および76.2%)、Deeplabv3 +(80.8%および76.1%)、DDCM-Net(81.7%および77.6%)、EaNetなどの最先端のディープラーニングアプローチ(81.5%および78.3%)。
Assigning geospatial objects of aerial images with specific categories at the pixel level is a fundamental task in urban scene interpretation. Along with rapid developments in sensor technologies, aerial images can be captured at multiple spatial resolutions (MSR) with information content manifested at different scales. Extracting information from these MSR aerial images represents huge opportunities for enhanced feature representation and characterisation. However, MSR images suffer from two critical issues: 1) increased variation in the sizes of geospatial objects and 2) information and informative feature loss at coarse spatial resolutions. In this paper, we propose a novel scale-aware neural network (SaNet) for semantic labelling of MSR aerial images to address these two issues. SaNet deploys a densely connected feature network (DCFPN) module to capture high-quality multi-scale context, such as to address the scale variation issue and increase the quality of segmentation for both large and small objects simultaneously. A spatial feature recalibration (SFR) module is further incorporated into the network to learn complete semantic features with enhanced spatial relationships, where the effects of information and informative feature loss are addressed. The combination of DCFPN and SFR allows the proposed SaNet to learn scale-aware features from MSR aerial images. Extensive experiments undertaken on ISPRS semantic segmentation datasets demonstrated the outstanding accuracy of the proposed SaNet in cross-resolution segmentation, with an average OA of 83.4% on the Vaihingen dataset and an average F1 score of 80.4% on the Potsdam dataset, outperforming state-of-the-art deep learning approaches, including FPN (80.2% and 76.6%), PSPNet (79.8% and 76.2%) and Deeplabv3+ (80.8% and 76.1%) as well as DDCM-Net (81.7% and 77.6%) and EaNet (81.5% and 78.3%).
updated: Sat Apr 10 2021 12:51:16 GMT+0000 (UTC)
published: Sun Mar 14 2021 14:19:46 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト