arXiv reaDer
高強度領域の自己学習戦略と注意メカニズムに基づく水中強化
Underwater enhancement based on a self-learning strategy and attention mechanism for high-intensity regions
水中活動中に取得された画像は、濁りや光の減衰など、水の環境特性の影響を受けます。これらの現象は、色の歪み、にじみ、およびコントラストの低下を引き起こします。さらに、不規則な周囲光の分布は、カラー チャネルの不均衡と高輝度ピクセルの領域を引き起こします。水中画像強調に関連する最近の研究は、ディープ ラーニング アプローチに基づいており、合成グラウンド トゥルースを生成するペア データセットの欠如に取り組んでいます。この論文では、ペアのデータセットを必要としない深層学習に基づく水中画像強調のための自己教師あり学習方法論を提示します。提案された方法は、水中画像に存在する劣化を推定します。さらに、オートエンコーダがこの画像を再構成し、推定された劣化情報を使用してその出力画像を劣化させます。したがって、戦略は、トレーニング フェーズ中に損失関数で出力イメージを劣化したバージョンに置き換えます。この手順は、追加の劣化を補正することを学習するニューラル ネットワークを誤解させます。その結果、再構成された画像は、入力画像の強化されたバージョンになります。また、このアルゴリズムは、カラー チャネルのアンバランスと外れ値領域によって強化された画像に生成される高輝度領域を削減するアテンション モジュールを提供します。さらに、提案された方法論はグラウンド トゥルースを必要としません。さらに、実際の水中画像のみを使用してニューラル ネットワークをトレーニングしました。結果は、色の保持、色かぶりの低減、およびコントラストの改善に関する方法の有効性を示しています。
Images acquired during underwater activities suffer from environmental properties of the water, such as turbidity and light attenuation. These phenomena cause color distortion, blurring, and contrast reduction. In addition, irregular ambient light distribution causes color channel unbalance and regions with high-intensity pixels. Recent works related to underwater image enhancement, and based on deep learning approaches, tackle the lack of paired datasets generating synthetic ground-truth. In this paper, we present a self-supervised learning methodology for underwater image enhancement based on deep learning that requires no paired datasets. The proposed method estimates the degradation present in underwater images. Besides, an autoencoder reconstructs this image, and its output image is degraded using the estimated degradation information. Therefore, the strategy replaces the output image with the degraded version in the loss function during the training phase. This procedure misleads the neural network that learns to compensate the additional degradation. As a result, the reconstructed image is an enhanced version of the input image. Also, the algorithm presents an attention module to reduce high-intensity areas generated in enhanced images by color channel unbalances and outlier regions. Furthermore, the proposed methodology requires no ground-truth. Besides, only real underwater images were used to train the neural network, and the results indicate the effectiveness of the method in terms of color preservation, color cast reduction, and contrast improvement.
updated: Thu Aug 04 2022 19:55:40 GMT+0000 (UTC)
published: Thu Aug 04 2022 19:55:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト