arXiv reaDer
画像再構成のためのマルチスケール畳み込み辞書の学習
Learning Multiscale Convolutional Dictionaries for Image Reconstruction
畳み込みニューラルネットワーク(CNN)は、イメージングの逆問題の解決に大成功を収めています。それらの成功を理解するための効果的な戦略は、CNNと重要な要素を共有する、より単純で数学的に扱いやすい畳み込みスパースコーディング(CSC)モデルを構築することです。ただし、既存のCSC手法は、逆問題に挑戦する際に主要なCNNを下回ります。パフォーマンスのギャップは、さまざまな空間スケールで画像を処理する方法に一部起因している可能性があると仮定します。多くのCNNはマルチスケールの特徴表現を使用しますが、既存のCSCモデルは主にシングルスケールの辞書に依存しています。したがって、パフォーマンスのギャップを埋めるために、マルチスケール畳み込み辞書構造を提案します。提案された辞書構造は、おそらく最も用途が広く、画像間の学習問題に広く使用されているCNNであるU-Netから派生しています。提案されたマルチスケール辞書を他の標準的なCSCフレームワークに組み込むと、CTやMRIの再構成など、さまざまな困難な逆問題にわたって最先端のCNNと競合するパフォーマンスが得られることを示します。したがって、私たちの仕事は、挑戦的な逆問題を解決する際のマルチスケールCSCアプローチの有効性とスケーラビリティを示しています。
Convolutional neural networks (CNNs) have been tremendously successful in solving imaging inverse problems. To understand their success, an effective strategy is to construct simpler and mathematically more tractable convolutional sparse coding (CSC) models that share essential ingredients with CNNs. Existing CSC methods, however, underperform leading CNNs in challenging inverse problems. We hypothesize that the performance gap may be attributed in part to how they process images at different spatial scales: While many CNNs use multiscale feature representations, existing CSC models mostly rely on single-scale dictionaries. To close the performance gap, we thus propose a multiscale convolutional dictionary structure. The proposed dictionary structure is derived from the U-Net, arguably the most versatile and widely used CNN for image-to-image learning problems. We show that incorporating the proposed multiscale dictionary in an otherwise standard CSC framework yields performance competitive with state-of-the-art CNNs across a range of challenging inverse problems including CT and MRI reconstruction. Our work thus demonstrates the effectiveness and scalability of the multiscale CSC approach in solving challenging inverse problems.
updated: Thu May 19 2022 08:06:59 GMT+0000 (UTC)
published: Wed Nov 25 2020 15:18:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト