arXiv reaDer
Retinexformer: 低照度画像強化用の 1 段階 Retinex ベースのトランスフォーマー
Retinexformer: One-stage Retinex-based Transformer for Low-light Image Enhancement
低照度の画像を強調する場合、多くの深層学習アルゴリズムは Retinex 理論に基づいています。ただし、Retinex モデルでは、暗闇に隠された破損やライトアップ プロセスによって導入された破損は考慮されていません。さらに、これらの方法は通常、退屈な多段階のトレーニング パイプラインを必要とし、畳み込みニューラル ネットワークに依存するため、長距離の依存関係を把握するのに限界があります。この論文では、シンプルだが原則に基づいた 1 段階 Retinex ベースのフレームワーク (ORF) を定式化します。 ORF は、まず照明情報を推定して低照度画像を明るくし、次に破損を復元して強化された画像を生成します。照明表現を利用して、異なる照明条件を持つ領域の非局所的相互作用のモデリングを指示する照明誘導トランスフォーマー (IGT) を設計します。 IGT を ORF に接続することで、アルゴリズム Retinexformer が得られます。包括的な定量的および定性的実験により、当社の Retinexformer が 13 のベンチマークで最先端の手法を大幅に上回ることが実証されました。低照度の物体検出に関するユーザーの研究と応用により、私たちの方法の潜在的な実用的価値も明らかになります。コード、モデル、結果は https://github.com/caiyuanhao1998/Retinexformer で入手できます。
When enhancing low-light images, many deep learning algorithms are based on the Retinex theory. However, the Retinex model does not consider the corruptions hidden in the dark or introduced by the light-up process. Besides, these methods usually require a tedious multi-stage training pipeline and rely on convolutional neural networks, showing limitations in capturing long-range dependencies. In this paper, we formulate a simple yet principled One-stage Retinex-based Framework (ORF). ORF first estimates the illumination information to light up the low-light image and then restores the corruption to produce the enhanced image. We design an Illumination-Guided Transformer (IGT) that utilizes illumination representations to direct the modeling of non-local interactions of regions with different lighting conditions. By plugging IGT into ORF, we obtain our algorithm, Retinexformer. Comprehensive quantitative and qualitative experiments demonstrate that our Retinexformer significantly outperforms state-of-the-art methods on thirteen benchmarks. The user study and application on low-light object detection also reveal the latent practical values of our method. Code, models, and results are available at https://github.com/caiyuanhao1998/Retinexformer
updated: Sat Aug 12 2023 13:23:05 GMT+0000 (UTC)
published: Sun Mar 12 2023 16:54:08 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト