ディープイメージプライア(DIP)は、さまざまな逆問題の優れた誘導バイアスとして機能します。その中でも、早期停止が必要なノイズフィッティングのため、ノイズ除去はDIPにとって特に困難であることが知られています。この問題に対処するために、まず、有効自由度(DF)の概念によってDIPを分析して最適化の進行状況を監視し、ガウスノイズのペアのグラウンドトゥルース画像にアクセスせずにノイズに適合させる前に、原理的な停止基準を提案します。また、ノイズ除去のためのDIPのパフォーマンスをさらに向上させる手法を組み込むための「確率的時間的アンサンブル(STE)」法を提案します。さらに、この方法をポアソンノイズに拡張します。私たちの経験的検証は、単一のノイズの多い画像が与えられた場合、私たちの方法は、豊富なテキストの詳細を保持しながら、画像のノイズを除去することを示しています。さらに、私たちのアプローチは、7つの異なるデータセットで同等のPSNRとSSIMを使用して、LPIPSの従来技術を大幅に上回っています。
Deep image prior (DIP) serves as a good inductive bias for diverse inverse problems. Among them, denoising is known to be particularly challenging for the DIP due to noise fitting with the requirement of an early stopping. To address the issue, we first analyze the DIP by the notion of effective degrees of freedom (DF) to monitor the optimization progress and propose a principled stopping criterion before fitting to noise without access of a paired ground truth image for Gaussian noise. We also propose the `stochastic temporal ensemble (STE)' method for incorporating techniques to further improve DIP's performance for denoising. We additionally extend our method to Poisson noise. Our empirical validations show that given a single noisy image, our method denoises the image while preserving rich textual details. Further, our approach outperforms prior arts in LPIPS by large margins with comparable PSNR and SSIM on seven different datasets.