目的:深層学習(DL)ベースの再構成における微細構造とテクスチャの再構成の忠実度を向上させること。方法:知覚の類似性と高次統計量を維持するために、新しいパッチベースの教師なし特徴損失(UFLoss)が提案され、DLベースの再構成フレームワークのトレーニングに組み込まれます。 UFLossは、類似のインスタンスを類似の低次元特徴ベクトルにマッピングすることでインスタンスレベルの識別を提供し、人間の注釈なしでトレーニングされます。トレーニング中に低次元の特徴空間に損失関数を追加することにより、アンダーサンプリングまたは破損したデータからの再構成フレームワークは、より細かいテクスチャ、よりシャープなエッジ、および改善された全体的な画質で、元の画像に近いよりリアルな画像を再現できます。提案されたUFLossのパフォーマンスは、遡及的アンダーサンプリングによる加速2Dおよび3D膝MRI再構成のための展開されたネットワークで実証されています。 NRMSE、SSIM、および提案されたUFLossを含む定量的メトリックを使用して、提案された方法のパフォーマンスを評価し、他の方法と比較しました。結果:生体内実験では、UFLossを追加すると、純粋なl2損失を伴う従来の学習ベースの方法と比較して、よりシャープなエッジとより忠実なコントラストが促進されることが示されています。より詳細なテクスチャは、2Dと3Dの両方の膝MR画像で見ることができます。定量的な結果は、UFLossを使用した再構築により、同等のNRMSEとより高いSSIMを提供しながら、はるかに低いUFLoss値を達成できることを示しています。結論:パッチベースの教師なし学習特徴損失であるUFLossを紹介します。これにより、DLベースの再構成のトレーニングにより、DLベースの再構成フレームワークの下で、より詳細なテクスチャ、より細かい特徴、よりシャープなエッジをより高い全体的な画質で取得できます。
Purpose: To improve reconstruction fidelity of fine structures and textures in deep learning (DL) based reconstructions. Methods: A novel patch-based Unsupervised Feature Loss (UFLoss) is proposed and incorporated into the training of DL-based reconstruction frameworks in order to preserve perceptual similarity and high-order statistics. The UFLoss provides instance-level discrimination by mapping similar instances to similar low-dimensional feature vectors and is trained without any human annotation. By adding an additional loss function on the low-dimensional feature space during training, the reconstruction frameworks from under-sampled or corrupted data can reproduce more realistic images that are closer to the original with finer textures, sharper edges, and improved overall image quality. The performance of the proposed UFLoss is demonstrated on unrolled networks for accelerated 2D and 3D knee MRI reconstruction with retrospective under-sampling. Quantitative metrics including NRMSE, SSIM, and our proposed UFLoss were used to evaluate the performance of the proposed method and compare it with others. Results: In-vivo experiments indicate that adding the UFLoss encourages sharper edges and more faithful contrasts compared to traditional and learning-based methods with pure l2 loss. More detailed textures can be seen in both 2D and 3D knee MR images. Quantitative results indicate that reconstruction with UFLoss can provide comparable NRMSE and a higher SSIM while achieving a much lower UFLoss value. Conclusion: We present UFLoss, a patch-based unsupervised learned feature loss, which allows the training of DL-based reconstruction to obtain more detailed texture, finer features, and sharper edges with higher overall image quality under DL-based reconstruction frameworks.