arXiv reaDer
マルチモーダルリモートセンシング画像の半教師ありマニホールドアライメント
Semisupervised Manifold Alignment of Multimodal Remote Sensing Images
リモートセンシング画像のさまざまなモダリティ(またはドメイン)のマニフォールドアライメントの方法を紹介します。この問題は、マルチテンポラル、マルチソース、マルチセンサー、マルチアングルの画像のセットが利用可能な場合に再発します。これらの状況では、画像は理想的には空間的に共レジスト化され、補正され、画像ドメインの違いを補正する必要があります。このような手順は、ユーザーの操作を必要とし、多くのパラメーターとヒューリスティックの調整を伴い、通常は個別に適用されます。センサーと取得条件の変更は、画像分布(またはマニフォールド)のシフト、ツイスト、ワープ、フォールディングに変換されます。提案された半教師ありマニフォールド位置合わせ(SS-MA)法は、マニフォールド上で直接機能する画像を位置合わせするため、スペクトルまたは空間の同じ解像度の画像に制限されません。 SS-MAは、同じクラスのサンプルを引き寄せながら、異なるクラスのサンプルを引き離します。同時に、変換に沿って各多様体の形状を保持します。この方法は、すべての画像が類似している潜在空間への線形可逆変換を構築し、中程度のサイズの一般化された固有問題を解くことになります。おもちゃの例と実際の多角度、多時間、およびマルチソースの画像分類問題でSS-MAのパフォーマンスを研究します。この方法は、強い変形に対してうまく機能し、すべてのドメインの正確な分類につながります。
We introduce a method for manifold alignment of different modalities (or domains) of remote sensing images. The problem is recurrent when a set of multitemporal, multisource, multisensor and multiangular images is available. In these situations, images should ideally be spatially coregistred, corrected and compensated for differences in the image domains. Such procedures require the interaction of the user, involve tuning of many parameters and heuristics, and are usually applied separately. Changes of sensors and acquisition conditions translate into shifts, twists, warps and foldings of the image distributions (or manifolds). The proposed semisupervised manifold alignment (SS-MA) method aligns the images working directly on their manifolds, and is thus not restricted to images of the same resolutions, either spectral or spatial. SS-MA pulls close together samples of the same class while pushing those of different classes apart. At the same time, it preserves the geometry of each manifold along the transformation. The method builds a linear invertible transformation to a latent space where all images are alike, and reduces to solving a generalized eigenproblem of moderate size. We study the performance of SS-MA in toy examples and in real multiangular, multitemporal, and multisource image classification problems. The method performs well for strong deformations and leads to accurate classification for all domains.
updated: Thu Apr 15 2021 22:20:31 GMT+0000 (UTC)
published: Thu Apr 15 2021 22:20:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト