arXiv reaDer
協調的な低照度画像強調のための暗黙的神経表現
Implicit Neural Representation for Cooperative Low-light Image Enhancement
次の 3 つの要因により、既存の低照度画像強調方法の適用が制限されます。予測不可能な明るさの低下とノイズ、メトリックに有利なバージョンと視覚に適したバージョンとの間の固有のギャップ、および限られたペアのトレーニング データです。これらの制限に対処するために、NeRCo と呼ばれる協調的な低照度画像強調のための暗黙的なニューラル表現法を提案します。教師なしの方法で、知覚に適した結果を確実に回復します。具体的には、NeRCo は現実世界のさまざまな劣化要因を制御可能なフィッティング機能で統合し、ロバスト性を高めます。さらに、出力結果については、事前にトレーニングされた視覚言語モデルからの事前分布を使用したセマンティック指向の監視を導入します。参照画像を単に追うのではなく、結果が主観的な期待に応え、よりビジュアルに適した解決策を見つけるよう促します。さらに、ペアのデータへの依存を緩和し、ソリューション スペースを削減するために、デュアル クローズド ループの制約付き拡張モジュールを開発します。自己管理型の方法で、他の関連モジュールと協力してトレーニングされます。最後に、大規模な実験により、提案した NeRCo の堅牢性と優れた有効性が実証されました。コードは https://github.com/Ysz2022/NeRCo で入手できます。
The following three factors restrict the application of existing low-light image enhancement methods: unpredictable brightness degradation and noise, inherent gap between metric-favorable and visual-friendly versions, and the limited paired training data. To address these limitations, we propose an implicit Neural Representation method for Cooperative low-light image enhancement, dubbed NeRCo. It robustly recovers perceptual-friendly results in an unsupervised manner. Concretely, NeRCo unifies the diverse degradation factors of real-world scenes with a controllable fitting function, leading to better robustness. In addition, for the output results, we introduce semantic-orientated supervision with priors from the pre-trained vision-language model. Instead of merely following reference images, it encourages results to meet subjective expectations, finding more visual-friendly solutions. Further, to ease the reliance on paired data and reduce solution space, we develop a dual-closed-loop constrained enhancement module. It is trained cooperatively with other affiliated modules in a self-supervised manner. Finally, extensive experiments demonstrate the robustness and superior effectiveness of our proposed NeRCo. Our code is available at https://github.com/Ysz2022/NeRCo.
updated: Tue Aug 22 2023 11:01:57 GMT+0000 (UTC)
published: Tue Mar 21 2023 10:24:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト