arXiv reaDer
PeaceGAN:ポーズ推定器と補助分類器を使用したSARターゲット画像生成のためのGANベースのマルチタスク学習方法
PeaceGAN: A GAN-based Multi-Task Learning Method for SAR Target Image Generation with a Pose Estimator and an Auxiliary Classifier
生成的敵対的ネットワーク(GAN)はさまざまな分野にうまく適用されていますが、合成開口レーダー(SAR)データでGANをトレーニングすることは、主にスペックルノイズのために困難な作業です。一方で、人間の知覚の学習の観点では、複数のソースからのさまざまな情報を使用してタスクを学習するのは自然なことです。ただし、以前のGANはSARターゲット画像の生成に取り組んでおり、ターゲットクラスに関する情報のみが使用されていました。 SAR画像信号の後方散乱特性により、SARターゲット画像の形状と構造はポーズ角度に強く依存します。それにもかかわらず、ポーズ角度情報は、SARターゲット画像のそのような生成モデルに組み込まれていません。本論文では、まず、ポーズ角とターゲットクラス情報の両方を使用するPeaceGANと呼ばれるSARターゲット画像生成のための新しいGANベースのマルチタスク学習(MTL)手法を提案します。これにより、目的のターゲットのSARターゲット画像を生成できます。意図したポーズ角度でのクラス。このため、PeaceGANには、ポーズとクラスの情報をより効率的に組み合わせるために、ディスクリミネーターの側面にポーズ推定器と補助分類器の2つの追加構造があります。さらに、PeaceGANは、ポーズ角度とターゲットクラス情報の両方を備えたMTLとしてエンドツーエンドで共同学習されるため、生成されるSARターゲット画像の多様性と品質が向上します。広範な実験により、両方のポーズ角度を利用することが示されています。提案されたポーズ推定器と補助分類器によるターゲットクラスの学習は、PeaceGANのジェネレータがMTLフレームワーク内のSARターゲット画像の分布を効果的に学習するのに役立ちます。これにより、目的のポーズ角度でSARターゲット画像をより柔軟かつ忠実に生成できます。最近の最先端の方法と比較したターゲットクラス。
Although Generative Adversarial Networks (GANs) are successfully applied to diverse fields, training GANs on synthetic aperture radar (SAR) data is a challenging task mostly due to speckle noise. On the one hands, in a learning perspective of human's perception, it is natural to learn a task by using various information from multiple sources. However, in the previous GAN works on SAR target image generation, the information on target classes has only been used. Due to the backscattering characteristics of SAR image signals, the shapes and structures of SAR target images are strongly dependent on their pose angles. Nevertheless, the pose angle information has not been incorporated into such generative models for SAR target images. In this paper, we firstly propose a novel GAN-based multi-task learning (MTL) method for SAR target image generation, called PeaceGAN that uses both pose angle and target class information, which makes it possible to produce SAR target images of desired target classes at intended pose angles. For this, the PeaceGAN has two additional structures, a pose estimator and an auxiliary classifier, at the side of its discriminator to combine the pose and class information more efficiently. In addition, the PeaceGAN is jointly learned in an end-to-end manner as MTL with both pose angle and target class information, thus enhancing the diversity and quality of generated SAR target images The extensive experiments show that taking an advantage of both pose angle and target class learning by the proposed pose estimator and auxiliary classifier can help the PeaceGAN's generator effectively learn the distributions of SAR target images in the MTL framework, so that it can better generate the SAR target images more flexibly and faithfully at intended pose angles for desired target classes compared to the recent state-of-the-art methods.
updated: Mon Mar 29 2021 10:03:09 GMT+0000 (UTC)
published: Mon Mar 29 2021 10:03:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト