arXiv reaDer
画像劣化の関係定量化
Relationship Quantification of Image Degradations
このホワイト ペーパーでは、画像復元における 2 つの挑戦的であまり触れられていない問題、つまり、i) さまざまな画像劣化間の関係を定量化する方法、および ii) 定量化された関係を使用して特定の劣化のパフォーマンスを改善する方法を研究します。最初の課題に取り組むために、劣化関係を測定する劣化関係指数 (DRI) が提案されています。これは、2 つのモデル間の検証損失の平均ドロップ率の差として定義されます。つまり、一方はアンカー劣化のみを使用してトレーニングされ、もう一方はアンカーと補助の劣化の両方に基づいてトレーニングされました。 DRI を使用してさまざまな劣化間の関係を定量化することにより、i) 劣化の組み合わせの割合が画像復元パフォーマンスにとって重要であることを経験的に観察します。換言すれば、適切な劣化比率のみを組み合わせることで、アンカー修復のパフォーマンスを向上させることができます。 ii) 正の DRI は、常に画像復元のパフォーマンスの向上を予測します。観察に基づいて、別の補助劣化の助けを借りてアンカー劣化のパフォーマンスを改善できる適応劣化比率決定戦略(DPD)を提案します。靄を錨の劣化とし、ノイズ、雨筋、雪を補助的な劣化とすることで、広範な実験結果により、この方法の有効性が検証されました。コードは承認後に公開されます。
In this paper, we study two challenging but less-touched problems in image restoration, namely, i) how to quantify the relationship between different image degradations and ii) how to improve the performance on a specific degradation using the quantified relationship. To tackle the first challenge, Degradation Relationship Index (DRI) is proposed to measure the degradation relationship, which is defined as the mean drop rate difference in the validation loss between two models, i.e., one is trained using the anchor degradation only and another is trained based on both the anchor and the auxiliary degradations. Through quantifying the relationship between different degradations using DRI, we empirically observe that i) the degradation combination proportion is crucial to the image restoration performance. In other words, the combinations with only appropriate degradation proportions could improve the performance of the anchor restoration; ii) a positive DRI always predicts the performance improvement of image restoration. Based on the observations, we propose an adaptive Degradation Proportion Determination strategy (DPD) which could improve the performance on the anchor degradation with the assist of another auxiliary degradation. Extensive experimental results verify the effective of our method by taking haze as the anchor degradation and noise, rain streak, and snow as the auxiliary degradations. The code will be released after acceptance.
updated: Wed Mar 08 2023 06:31:34 GMT+0000 (UTC)
published: Thu Dec 08 2022 09:05:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト