arXiv reaDer
画像劣化の関係の定量化
Relationship Quantification of Image Degradations
この論文では、画像修復における 2 つの挑戦的だがあまり触れられていない問題、つまり、i) 画像劣化間の関係を定量化する方法、および ii) 定量化された関係を使用して特定の修復タスクのパフォーマンスを向上させる方法を研究します。最初の課題に取り組むために、私たちは、アンカー劣化およびアンカーと補助劣化の混合を使用してそれぞれトレーニングされた 2 つのモデル間の検証損失の平均ドロップ率の差として定義される劣化関係指数 (DRI) を提案しました。 DRI を使用した劣化関係の定量化を通じて、i) ポジティブな DRI は、モデルをトレーニングするための補助として特定の劣化を使用することにより、常にパフォーマンスの向上を予測することを明らかにします。 ii) 劣化率は画像復元パフォーマンスにとって重要です。つまり、アンカーと補助劣化が適切な割合で混合されて初めて復元性能が向上するのです。観察に基づいて、与えられた劣化の組み合わせが補助劣化の助けを借りてアンカー劣化のパフォーマンスを向上させることができるかどうかを推定するための、シンプルだが効果的な方法(DPDと呼ばれる)をさらに提案します。広範な実験結果により、かすみ除去、騒音除去、水切り、除雪における当社の方法の有効性が検証されています。コードは承認後に公開されます。
In this paper, we study two challenging but less-touched problems in image restoration, namely, i) how to quantify the relationship between image degradations and ii) how to improve the performance of a specific restoration task using the quantified relationship. To tackle the first challenge, we proposed a Degradation Relationship Index (DRI) which is defined as the mean drop rate difference in the validation loss between two models which are respectively trained using the anchor degradation and the mixture of the anchor and the auxiliary degradations. Through quantifying the degradation relationship using DRI, we reveal that i) a positive DRI always predicts performance improvement by using the specific degradation as an auxiliary to train models; ii) the degradation proportion is crucial to the image restoration performance. In other words, the restoration performance is improved only if the anchor and the auxiliary degradations are mixed with an appropriate proportion. Based on the observations, we further propose a simple but effective method (dubbed DPD) to estimate whether the given degradation combinations could improve the performance on the anchor degradation with the assistance of the auxiliary degradation. Extensive experimental results verify the effectiveness of our method in dehazing, denoising, deraining, and desnowing. The code will be released after acceptance.
updated: Sat Aug 05 2023 13:43:18 GMT+0000 (UTC)
published: Thu Dec 08 2022 09:05:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト