水中画像強調 (UIE) は有意義ではありますが、やりがいのあるタスクであり、近年、多くの学習ベースの UIE 手法が提案されています。多くの進歩が見られましたが、これらの方法にはまだ次の 2 つの問題が存在します。 (1) 水中イメージング プロセスにより、特にシーン深度が異なる領域では、単一の水中画像に領域ごとの品質の大きな違いが存在します。しかし、既存の方法では水中画像のこの内部特性が無視されているため、パフォーマンスが劣ります。 (2) 取得アプローチの独自性により、水中画像取得ツールは通常、同じまたは類似のシーンで複数の画像を取得します。このように、実用上補正対象となる水中画像は相関性が高い。しかし、単一の画像を処理する場合、既存の方法では、関連する画像によって提供される豊富な外部情報が考慮されていません。彼らのパフォーマンスにはまだ改善の余地があります。これら 2 つの側面を動機として、内部情報と外部情報を同時に使用して UIE タスクをより適切に実行するための新しい内部外部表現学習 (UIERL) ネットワークを提案します。内部表現の学習段階では、さまざまな品質レベルで領域を感知するためのシーンの深さに基づく領域セグメンテーションを含む、新しい深度ベースの領域特徴ガイダンス ネットワークが設計され、その後に領域ごとの空間エンコーダ モジュールが続きます。品質の異なる領域に対して領域ごとの特徴学習を個別に実行することで、ネットワークはグローバルな特徴に対する効果的なガイダンスを提供し、画像内の差別化された強調をガイドします。外部表現の学習段階では、まず、関連する画像内の豊富な外部情報をマイニングするための外部情報抽出ネットワークを提案します。次に、内部機能と外部機能は、提案された external-assist-internal モジュールと external-assist-e を介して相互作用します。
Underwater image enhancement (UIE) is a meaningful but challenging task, and many learning-based UIE methods have been proposed in recent years. Although much progress has been made, these methods still exist two issues: (1) There exists a significant region-wise quality difference in a single underwater image due to the underwater imaging process, especially in regions with different scene depths. However, existing methods neglect this internal characteristic of underwater images, resulting in inferior performance; (2) Due to the uniqueness of the acquisition approach, underwater image acquisition tools usually capture multiple images in the same or similar scenes. Thus, the underwater images to be enhanced in practical usage are highly correlated. However, when processing a single image, existing methods do not consider the rich external information provided by the related images. There is still room for improvement in their performance. Motivated by these two aspects, we propose a novel internal-external representation learning (UIERL) network to better perform UIE tasks with internal and external information, simultaneously. In the internal representation learning stage, a new depth-based region feature guidance network is designed, including a region segmentation based on scene depth to sense regions with different quality levels, followed by a region-wise space encoder module. With performing region-wise feature learning for regions with different quality separately, the network provides an effective guidance for global features and thus guides intra-image differentiated enhancement. In the external representation learning stage, we first propose an external information extraction network to mine the rich external information in the related images. Then, internal and external features interact with each other via the proposed external-assist-internal module and internal-assist-e