arXiv reaDer
TurbuGAN: 空間的に変化するマルチフレーム ブラインド デコンボリューションへの敵対的学習アプローチと、乱気流によるイメージングへの応用
TurbuGAN: An Adversarial Learning Approach to Spatially-Varying Multiframe Blind Deconvolution with Applications to Imaging Through Turbulence
TurbuGAN と呼ばれる、大気乱流によるイメージングへの自己監視型および自己較正型マルチショット アプローチを提示します。私たちのアプローチは、ペアのトレーニング データを必要とせず、乱気流の分布に適応し、ドメイン固有の事前データを活用し、数万から数千の測定値を一般化できます。このような機能は、CryoGAN から適応された敵対的センシング フレームワークを通じて実現されます。このフレームワークは、識別ネットワークを使用して、キャプチャされた測定値とシミュレートされた測定値の分布を一致させます。私たちのフレームワークは、(1)順方向測定モデルを一般化して非等平面乱流を介した光伝搬の物理的に正確で計算効率の高いモデルを組み込むこと、(2)わずかに誤って指定された順方向モデルへの適応を可能にすること、(3)ドメイン固有の事前知識を活用することによって、CryoGAN に基づいています。利用可能な場合、事前学習済みの生成ネットワークを使用します。我々は、非等平面乱気流で歪んだ、計算によってシミュレートされた画像と実験的にキャプチャされた画像の両方でTurbuGANを検証します。
We present a self-supervised and self-calibrating multi-shot approach to imaging through atmospheric turbulence, called TurbuGAN. Our approach requires no paired training data, adapts itself to the distribution of the turbulence, leverages domain-specific data priors, and can generalize from tens to thousands of measurements. We achieve such functionality through an adversarial sensing framework adapted from CryoGAN, which uses a discriminator network to match the distributions of captured and simulated measurements. Our framework builds on CryoGAN by (1) generalizing the forward measurement model to incorporate physically accurate and computationally efficient models for light propagation through anisoplanatic turbulence, (2) enabling adaptation to slightly misspecified forward models, and (3) leveraging domain-specific prior knowledge using pretrained generative networks, when available. We validate TurbuGAN on both computationally simulated and experimentally captured images distorted with anisoplanatic turbulence.
updated: Mon Aug 22 2022 18:11:53 GMT+0000 (UTC)
published: Sun Mar 13 2022 21:32:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト