arXiv reaDer
高解像度で意味的に一貫性のある画像から画像への変換
High-resolution semantically-consistent image-to-image translation
ディープ ラーニングは、近年、リモート センシング科学者にとって最も効率的なコンピューター ビジョン ツールの 1 つになりました。ただし、リモート センシング データセットのトレーニング ラベルがないことは、科学者がドメイン適応問題を解決して、衛星画像データセット間の不一致を狭める必要があることを意味します。その結果、トレーニングされた画像セグメンテーション モデルは、新しいラベルを必要とする代わりに、既存のラベル セットをより適切に一般化して使用することができます。この作業では、スタイル転送フェーズ中に画像のセマンティックな一貫性とピクセルごとの品質を維持する教師なしドメイン適応モデルを提案します。この論文の主な貢献は、SemI2I モデルの改善されたアーキテクチャを提案することです。これにより、提案されたモデルのパフォーマンスが大幅に向上し、最先端の CyCADA モデルと競合するようになります。 2 つ目の貢献は、WorldView-2 や SPOT-6 などのリモート センシング マルチバンド データセットで CyCADA モデルをテストすることです。提案されたモデルは、スタイル転送フェーズ中に画像のセマンティックな一貫性とピクセルごとの品質を維持します。したがって、適応画像でトレーニングされたセマンティック セグメンテーション モデルは、SemI2I モデルと比較して大幅なパフォーマンスの向上を示し、最先端の CyCADA モデルと同様の結果に達します。提案された方法の将来の開発には、生態学的ドメイン転送、データ分布に関するデータセット品質の事前評価、またはドメイン適応モデルの内部アーキテクチャの調査が含まれる可能性があります。
Deep learning has become one of remote sensing scientists' most efficient computer vision tools in recent years. However, the lack of training labels for the remote sensing datasets means that scientists need to solve the domain adaptation problem to narrow the discrepancy between satellite image datasets. As a result, image segmentation models that are then trained, could better generalize and use an existing set of labels instead of requiring new ones. This work proposes an unsupervised domain adaptation model that preserves semantic consistency and per-pixel quality for the images during the style-transferring phase. This paper's major contribution is proposing the improved architecture of the SemI2I model, which significantly boosts the proposed model's performance and makes it competitive with the state-of-the-art CyCADA model. A second contribution is testing the CyCADA model on the remote sensing multi-band datasets such as WorldView-2 and SPOT-6. The proposed model preserves semantic consistency and per-pixel quality for the images during the style-transferring phase. Thus, the semantic segmentation model, trained on the adapted images, shows substantial performance gain compared to the SemI2I model and reaches similar results as the state-of-the-art CyCADA model. The future development of the proposed method could include ecological domain transfer, a priori evaluation of dataset quality in terms of data distribution, or exploration of the inner architecture of the domain adaptation model.
updated: Tue Sep 13 2022 19:08:30 GMT+0000 (UTC)
published: Tue Sep 13 2022 19:08:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト