ディープ ニューラル ネットワークを使用した自動医療画像セグメンテーションには、通常、十分な教師付きトレーニングが必要です。ただし、これらのモデルは、さまざまな画像モダリティにわたってうまく一般化できません。この欠点は、専門家が注釈を付けたデータの入手が限られていることでさらに増幅され、モダリティ全体でそのような手法を大規模に展開することを妨げています。これらの問題に対処するために、我々は、不対バイモーダルデータセット上でクロスモダリティ腫瘍セグメンテーションのための新しい半教師あり生成トレーニング戦略である M-GenSeg を提案します。既知の健康な画像を追加すると、教師なしの対物レンズにより、モデルが背景から腫瘍を解きほぐすことが促進され、これはセグメンテーション タスクと並行して行われます。次に、モダリティ間で画像を変換するようにモデルに学習させることで、ソース モダリティから利用可能なピクセルレベルのアノテーションを利用して、アノテーションのないターゲット モダリティでのセグメンテーションを可能にします。 BraTS 2020 の公開チャレンジ データからの 4 つの異なるコントラスト シーケンスで構成される脳腫瘍セグメンテーション データセットのパフォーマンスを評価しました。注釈のないターゲットモダリティにおいて、最先端のドメイン適応ベースラインと比較して、Dice スコアが一貫して向上していることを報告します。従来技術とは異なり、M-GenSeg では、部分的に注釈が付けられたソース モダリティを使用してトレーニングする機能も導入されています。
Automated medical image segmentation using deep neural networks typically requires substantial supervised training. However, these models fail to generalize well across different imaging modalities. This shortcoming, amplified by the limited availability of expert annotated data, has been hampering the deployment of such methods at a larger scale across modalities. To address these issues, we propose M-GenSeg, a new semi-supervised generative training strategy for cross-modality tumor segmentation on unpaired bi-modal datasets. With the addition of known healthy images, an unsupervised objective encourages the model to disentangling tumors from the background, which parallels the segmentation task. Then, by teaching the model to convert images across modalities, we leverage available pixel-level annotations from the source modality to enable segmentation in the unannotated target modality. We evaluated the performance on a brain tumor segmentation dataset composed of four different contrast sequences from the public BraTS 2020 challenge data. We report consistent improvement in Dice scores over state-of-the-art domain-adaptive baselines on the unannotated target modality. Unlike the prior art, M-GenSeg also introduces the ability to train with a partially annotated source modality.