arXiv reaDer
MRモダリティが欠落している脳腫瘍セグメンテーションのための機能強化生成およびマルチモダリティ融合ベースの深部神経ネットワーク
Feature-enhanced Generation and Multi-modality Fusion based Deep Neural Network for Brain Tumor Segmentation with Missing MR Modalities
正確な脳腫瘍のセグメンテーションには、マルチモーダル磁気共鳴画像法(MRI)の使用が必要です。主な問題は、すべてのタイプのMRIが臨床検査で常に利用できるわけではないということです。同じ患者のMRモダリティ間に強い相関関係があるという事実に基づいて、この作業では、1つ以上のモダリティが欠落している場合の新しい脳腫瘍セグメンテーションネットワークを提案します。提案されたネットワークは、機能拡張ジェネレータ、相関制約ブロック、およびセグメンテーションネットワークの3つのサブネットワークで構成されています。機能拡張ジェネレーターは、利用可能なモダリティを利用して、欠落しているモダリティを表す3D機能拡張画像を生成します。相関制約ブロックは、モダリティ間のマルチソース相関を活用し、ジェネレーターを制約して、使用可能なモダリティとの一貫した相関が必要な機能拡張モダリティを合成することもできます。セグメンテーションネットワークは、最終的な脳腫瘍のセグメンテーションを実現するためのマルチエンコーダベースのU-Netです。提案された方法は、BraTS2018データセットで評価されます。実験結果は、提案された方法の有効性を示しており、すべての状況で、腫瘍全体、腫瘍コア、および増強腫瘍でそれぞれ82.9、74.9、および59.1の平均ダイススコアを達成し、最良の方法を3.5%、17%、および18.2上回っています。 %。
Using multimodal Magnetic Resonance Imaging (MRI) is necessary for accurate brain tumor segmentation. The main problem is that not all types of MRIs are always available in clinical exams. Based on the fact that there is a strong correlation between MR modalities of the same patient, in this work, we propose a novel brain tumor segmentation network in the case of missing one or more modalities. The proposed network consists of three sub-networks: a feature-enhanced generator, a correlation constraint block and a segmentation network. The feature-enhanced generator utilizes the available modalities to generate 3D feature-enhanced image representing the missing modality. The correlation constraint block can exploit the multi-source correlation between the modalities and also constrain the generator to synthesize a feature-enhanced modality which must have a coherent correlation with the available modalities. The segmentation network is a multi-encoder based U-Net to achieve the final brain tumor segmentation. The proposed method is evaluated on BraTS 2018 dataset. Experimental results demonstrate the effectiveness of the proposed method which achieves the average Dice Score of 82.9, 74.9 and 59.1 on whole tumor, tumor core and enhancing tumor, respectively across all the situations, and outperforms the best method by 3.5%, 17% and 18.2%.
updated: Mon Nov 08 2021 10:59:40 GMT+0000 (UTC)
published: Mon Nov 08 2021 10:59:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト