画像修復で一般的に使用される補助損失は、欠落領域の事前知識を組み込むことにより、より良い再構成性能につながります。ただし、通常、補助損失の可能性を十分に活用するには多くの労力が必要です。そうでない場合、不適切に重み付けされた補助損失はモデルを修復タスクからそらし、補助損失の有効性はトレーニングプロセス中に変化する可能性があります。したがって、補助損失の設計には、強力な専門知識が必要です。この問題を軽減するために、この作業では、補助損失のパラメーターを動的に調整するための、画像修復のための補助損失適応(ALA)アルゴリズムを導入します。私たちの方法は、最良の補助損失は、勾配降下のいくつかのステップを通じて主損失のパフォーマンスを最も向上させるのに役立つものであるという原則に基づいています。次に、修復で一般的に使用される2つの補助損失を調べ、ALAを使用してそれらのパラメーターを適応させました。実験結果は、ALAが固定補助損失よりも競争力のある修復結果を誘発することを示しています。特に、補助損失とALAを組み合わせるだけで、既存の修復方法は、事前に繊細なネットワーク設計や構造の知識を明示的に組み込むことなく、パフォーマンスを向上させることができます。
Auxiliary losses commonly used in image inpainting lead to better reconstruction performance by incorporating prior knowledge of missing regions. However, it usually requires a lot of effort to fully exploit the potential of auxiliary losses, or otherwise, improperly weighted auxiliary losses would distract the model from the inpainting task, and the effectiveness of an auxiliary loss might vary during the training process. Hence the design of auxiliary losses takes strong domain expertise. To mitigate the problem, in this work, we introduce the Auxiliary Loss Adaptation for Image Inpainting (ALA) algorithm to dynamically adjust the parameters of the auxiliary loss. Our method is based on the principle that the best auxiliary loss is the one that helps increase the performance of the main loss most through several steps of gradient descent. We then examined two commonly used auxiliary losses in inpainting and used ALA to adapt their parameters. Experimental results show that ALA induces more competitive inpainting results than fixed auxiliary losses. In particular, simply combining auxiliary loss with ALA, existing inpainting methods can achieve increased performances without explicitly incorporating delicate network design or structure knowledge prior.