arXiv reaDer
画像劣化の関係定量化
Relationship Quantification of Image Degradations
このホワイト ペーパーでは、画像復元における 2 つの挑戦的ではあるがあまり触れられていない問題、つまり、i) さまざまな画像劣化間の関係を定量化する方法、および ii) 定量化された関係を使用して特定の復元タスクのパフォーマンスを向上させる方法を研究します。最初の課題に取り組むために、劣化関係を測定する劣化関係指数 (DRI) が提案されています。これは、2 つのモデル間の検証損失の低下率の差として定義されます。つまり、一方はアンカー タスクのみを使用してトレーニングされ、もう一方はトレーニングされます。アンカーと補助タスクを使用します。 DRI を使用してさまざまな劣化間の関係を定量化することにより、i) 劣化の組み合わせの割合が画像復元パフォーマンスにとって重要であることを経験的に観察します。換言すれば、適切な劣化比率のみを組み合わせることで、アンカー修復のパフォーマンスを向上させることができます。 ii) 正の DRI は、常に画像復元のパフォーマンスの向上を予測します。観測に基づいて、別の復元タスクを補助として使用することにより、アンカー復元タスクのパフォーマンスを改善できる適応劣化割合決定戦略 (DPD) を提案します。広範な実験結果により、画像のかすみ除去をアンカータスクとして、ノイズ除去、スノー除去、およびデレインを補助タスクとして使用することにより、この方法の有効性が検証されます。コードは承認後に公開されます。
In this paper, we study two challenging but less-touched problems in image restoration, namely, i) how to quantify the relationship between different image degradations and ii) how to improve the performance of a specific restoration task using the quantified relationship. To tackle the first challenge, Degradation Relationship Index (DRI) is proposed to measure the degradation relationship, which is defined as the drop rate difference in the validation loss between two models, i.e., one is trained using the anchor task only and another is trained using the anchor and the auxiliary tasks. Through quantifying the relationship between different degradations using DRI, we empirically observe that i) the degradation combination proportion is crucial to the image restoration performance. In other words, the combinations with only appropriate degradation proportions could improve the performance of the anchor restoration; ii) a positive DRI always predicts the performance improvement of image restoration. Based on the observations, we propose an adaptive Degradation Proportion Determination strategy (DPD) which could improve the performance of the anchor restoration task by using another restoration task as auxiliary. Extensive experimental results verify the effective of our method by taking image dehazing as the anchor task and denoising, desnowing, and deraining as the auxiliary tasks. The code will be released after acceptance.
updated: Thu Dec 08 2022 09:05:19 GMT+0000 (UTC)
published: Thu Dec 08 2022 09:05:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト