arXiv reaDer
表現スタイルの転送と協調的一貫性学習を解きほぐすことによるクロスモダリティ網膜血管セグメンテーションのための教師なしドメイン適応
Unsupervised Domain Adaptation for Cross-Modality Retinal Vessel Segmentation via Disentangling Representation Style Transfer and Collaborative Consistency Learning
医用画像から解剖学的構造をセグメント化するためにさまざまな深層学習モデルが開発されていますが、データ分布が異なる別のターゲットドメインでテストすると、通常、パフォーマンスが低下します。最近、このいわゆるドメインシフトの問題を軽減するために教師なしドメイン適応方法が提案されていますが、それらのほとんどは、比較的小さなドメインシフトのシナリオ向けに設計されており、大きなドメインギャップに遭遇すると失敗する可能性があります。この論文では、DCDAを提案します。これは、OCTAおよびOCT画像から網膜血管をセグメント化するなど、大きなドメインシフトを伴うタスクのための新しいクロスモダリティ教師なしドメイン適応フレームワークです。 DCDAは主に、もつれを解く表現スタイル転送(DRST)モジュールと協調的整合性学習(CCL)モジュールで構成されています。 DRSTは、画像をコンテンツコンポーネントとスタイルコードに分解し、スタイル転送と画像再構成を実行します。 CCLには、2つのセグメンテーションモデルが含まれています。1つはソースドメイン用で、もう1つはターゲットドメイン用です。 2つのモデルは、教師あり学習に(対応する転送された画像とともに)ラベル付きデータを使用し、ラベルなしデータに対して協調的整合性学習を実行します。各モデルは、対応する単一ドメインに焦点を当てており、専門的なドメイン固有のセグメンテーションモデルを生成することを目的としています。網膜血管セグメンテーションに関する広範な実験を通じて、私たちのフレームワークは、OCTAからOCTおよびOCTからOCTAの両方で、ターゲットトレーニングされたオラクルに近いダイススコアを達成し、他の最先端の方法を大幅に上回ります。
Various deep learning models have been developed to segment anatomical structures from medical images, but they typically have poor performance when tested on another target domain with different data distribution. Recently, unsupervised domain adaptation methods have been proposed to alleviate this so-called domain shift issue, but most of them are designed for scenarios with relatively small domain shifts and are likely to fail when encountering a large domain gap. In this paper, we propose DCDA, a novel cross-modality unsupervised domain adaptation framework for tasks with large domain shifts, e.g., segmenting retinal vessels from OCTA and OCT images. DCDA mainly consists of a disentangling representation style transfer (DRST) module and a collaborative consistency learning (CCL) module. DRST decomposes images into content components and style codes and performs style transfer and image reconstruction. CCL contains two segmentation models, one for source domain and the other for target domain. The two models use labeled data (together with the corresponding transferred images) for supervised learning and perform collaborative consistency learning on unlabeled data. Each model focuses on the corresponding single domain and aims to yield an expertized domain-specific segmentation model. Through extensive experiments on retinal vessel segmentation, our framework achieves Dice scores close to target-trained oracle both from OCTA to OCT and from OCT to OCTA, significantly outperforming other state-of-the-art methods.
updated: Sat Jan 15 2022 00:14:01 GMT+0000 (UTC)
published: Thu Jan 13 2022 07:03:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト