arXiv reaDer
スパースビュートモグラフィック再構成のためのマルチドメイン統合SwinTransformerネットワーク
Multi-domain Integrative Swin Transformer network for Sparse-View Tomographic Reconstruction
深層学習に基づく断層画像再構成法は、近年大きな注目を集めています。スパースビューデータの再構成は、典型的な劣決定逆問題の1つであり、数十の投影から高品質のCT画像を再構成する方法は実際には依然として課題です。この課題に対処するために、この記事では、マルチドメイン統合Swin Transformerネットワーク(MIST-net)を提案しました。まず、提案されたMIST-netは、柔軟なネットワークアーキテクチャを使用して、データ、残余データ、画像、および残余画像からの豪華なドメイン機能を組み込みました。ここで、残余データと残余画像ドメインのネットワークコンポーネントは、残余データと画像ドメインの両方の補間エラーを排除し、画像の詳細をさらに保持するためのデータ整合性モジュールと見なすことができます。次に、画像の特徴を検出し、画像のエッジをさらに保護するために、トレーニング可能なエッジエンハンスメントフィルターがサブネットワークに組み込まれ、エンコードとデコードの機能が向上しました。第三に、従来のSwin Transformerを使用して、再構築のパフォーマンスを向上させるために、高品質の再構築トランス(つまり、Recformer)をさらに設計しました。 Recformerは、Swinトランスフォーマーの能力を継承して、再構成された画像のグローバルおよびローカルの特徴をキャプチャしました。 48ビューの数値データセットでの実験は、提案されたMIST-netが、高度な展開ネットワークを含む他の競合他社よりも、小さな機能回復とエッジ保護でより高い再構成画像品質を提供することを示しました。トレーニングされたネットワークは、実際の心臓CTデータセットに転送され、臨床アプリケーションにおけるMIST-netの利点と優れた堅牢性をさらに検証しました。
The deep learning-based tomographic image reconstruction methods have been attracting much attention among these years. The sparse-view data reconstruction is one of typical underdetermined inverse problems, how to reconstruct high-quality CT images from dozens of projections is still a challenge in practice. To address this challenge, in this article we proposed a Multi-domain Integrative Swin Transformer network (MIST-net). First, the proposed MIST-net incorporated lavish domain features from data, residual-data, image, and residual-image using flexible network architectures. Here, the residual-data and residual-image domains network components can be considered as data consistency module to eliminate interpolation errors in both residual data and image domains, and then further retain image details. Second, to detect image features and further protect image edge, the trainable edge enhancement filter was incorporated into sub-network to improve encode-decode ability. Third, with classical Swin Transformer, we further designed a high-quality reconstruction transformer (i.e., Recformer) to improve reconstruction performance. Recformer inherited the power of Swin transformer to capture global and local features of reconstructed image. The experiments on numerical datasets with 48 views demonstrated our proposed MIST-net provided higher reconstructed image quality with small feature recovery and edge protection than other competitors including advanced unrolled networks. The trained network was transferred to real cardiac CT dataset to further validate the advantages as well as good robustness of our MIST-net in clinical applications.
updated: Fri Dec 10 2021 12:04:52 GMT+0000 (UTC)
published: Sun Nov 28 2021 14:43:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト