ディープラーニングベースの断層画像再構成は、近年多くの注目を集めています。スパースビューデータの再構成は、典型的な劣決定逆問題の1つであり、数十の投影から高品質のCT画像を再構成する方法は実際には依然として課題です。この課題に対処するために、この記事では、マルチドメイン統合Swin Transformerネットワーク(MIST-net)を提案しました。まず、提案されたMIST-netは、柔軟なネットワークアーキテクチャを使用して、データ、残余データ、画像、および残余画像からの豪華なドメイン機能を組み込みました。ここで、残余データと残余画像ドメインのネットワークコンポーネントは、残余データと画像ドメインの両方の補間エラーを排除し、画像の詳細をさらに保持するためのデータ整合性モジュールと見なすことができます。次に、画像の特徴を検出し、画像のエッジをさらに保護するために、トレーニング可能なSobel Filterがネットワークに組み込まれ、エンコードとデコードの機能が向上しました。第三に、古典的なSwinトランスを使用して、再構成のパフォーマンスを向上させるために、高品質の再構成トランス(つまり、Recformer)をさらに設計しました。 Recformerは、Swinトランスフォーマーのパワーを継承して、再構成された画像のグローバルおよびローカルの特徴をキャプチャしました。 48ビューの数値データセットでの実験は、提案されたMIST-netが、高度な展開ネットワークを含む他の競合他社よりも、小さな特徴の回復とエッジ保護でより高い再構成画像品質を提供することを示しました。定量的な結果は、私たちのMIST-netも最高のパフォーマンスを達成したことを示しています。トレーニングされたネットワークは、48ビューの実際の心臓CTデータセットに転送され、再構成の結果により、MIST-netの利点がさらに検証され、臨床アプリケーションにおけるMISTの優れた堅牢性がさらに実証されました。
The deep learning-based tomographic image reconstruction have been attracting much attention among these years. The sparse-view data reconstruction is one of typical underdetermined inverse problems, how to reconstruct high-quality CT images from dozens of projections is still a challenge in practice. To address this challenge, in this article we proposed a Multi-domain Integrative Swin Transformer network (MIST-net). First, the proposed MIST-net incorporated lavish domain features from data, residual-data, image, and residual-image using flexible network architectures. Here, the residual-data and residual-image domains network components can be considered as the data consistency module to eliminate interpolation errors in both residual data and image domains, and then further retain image details. Second, to detect the image features and further protect image edge, the trainable Sobel Filter was incorporated into the network to improve the encode-decode ability. Third, with the classical Swin transformer, we further designed the high-quality reconstruction transformer (i.e., Recformer) to improve the reconstruction performance. The Recformer inherited the power of Swin transformer to capture the global and local features of the reconstructed image. The experiments on the numerical datasets with 48 views demonstrated our proposed MIST-net provided higher reconstructed image quality with small feature recovery and edge protection than other competitors including the advanced unrolled networks. The quantitative results show that our MIST-net also obtained the best performance. The trained network was transferred to the real cardiac CT dataset with 48 views, the reconstruction results further validated the advantages of our MIST-net and further demonstrated the good robustness of our MIST in clinical applications.