arXiv reaDer
Empirically Accelerating Scaled Gradient Projection Using Deep Neural Network For Inverse Problems In Image Processing
最近、ディープニューラルネットワーク(DNN)は、最適化アルゴリズムを加速する上で利点を示しています。 1つのアプローチは、従来の最適化アルゴリズムの有限数の反復を展開し、アルゴリズムのパラメーターを学習することです。ただし、これらは順方向の方法であり、実際には反復的でも収束的でもありません。ここでは、従来の最適化アルゴリズムを加速する新しいDNNベースの収束反復アルゴリズムを提示します。 DNNをトレーニングして、スケーリングされた勾配射影法でパラメーターを生成します。これまでのところ、これらのパラメーターはヒューリスティックに選択されていますが、優れた経験的パフォーマンスにとって重要であることが示されています。シミュレーション結果では、提案された方法は、画像処理におけるさまざまな大規模な逆問題に対して、従来の最適化方法よりも経験的な収束率を大幅に改善します。
Recently, deep neural networks (DNNs) have shown advantages in accelerating optimization algorithms. One approach is to unfold finite number of iterations of conventional optimization algorithms and to learn parameters in the algorithms. However, these are forward methods and are indeed neither iterative nor convergent. Here, we present a novel DNN-based convergent iterative algorithm that accelerates conventional optimization algorithms. We train a DNN to yield parameters in scaled gradient projection method. So far, these parameters have been chosen heuristically, but have shown to be crucial for good empirical performance. In simulation results, the proposed method significantly improves the empirical convergence rate over conventional optimization methods for various large-scale inverse problems in image processing.
updated: Thu Apr 22 2021 03:00:39 GMT+0000 (UTC)
published: Thu Feb 07 2019 02:19:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト