合成開口レーダー(SAR)画像は、陸上および海洋の監視にさまざまな用途があります。電気光学(EO)システムとは異なり、これらのシステムは気象条件の影響を受けず、昼夜を問わず使用できます。 SAR画像の重要性が増すにつれて、広く利用可能なEOデータセットでトレーニングされたモデルをSAR画像にも使用できることが望ましいでしょう。この作業では、EO船のデータセットでトレーニングされたネットワークからの深い特徴を活用し、SAR画像で予測を生成するための転移学習を検討します。さらに、クラスアクティベーションマップ(CAM)の形式でネットワークアクティベーションを調査することにより、SAR画像への転送学習プロセスを視覚化し、ディープネットワークが新しいモダリティをどのように解釈するかについての洞察を得ることができます。
Synthetic Aperture Radar (SAR) imagery has diverse applications in land and marine surveillance. Unlike electro-optical (EO) systems, these systems are not affected by weather conditions and can be used in the day and night times. With the growing importance of SAR imagery, it would be desirable if models trained on widely available EO datasets can also be used for SAR images. In this work, we consider transfer learning to leverage deep features from a network trained on an EO ships dataset and generate predictions on SAR imagery. Furthermore, by exploring the network activations in the form of class-activation maps (CAMs), we visualize the transfer learning process to SAR imagery and gain insight on how a deep network interprets a new modality.