arXiv reaDer
Joint Semi-supervised 3D Super-Resolution and Segmentation with Mixed Adversarial Gaussian Domain Adaptation
心臓の構造と機能の分析を最適化するには、形状と動きの正確な3D表現が必要です。しかしながら、心臓磁気共鳴画像法などの技術は、従来、低い面貫通解像度および潜在的なスライス間空間的不整合を伴う連続した断面スライスの取得に限定されていた。医用画像の超解像は、画像の解像度を上げることを目的としていますが、従来は低解像度のデータセットからの特徴で訓練されており、対応するセグメンテーションを超解像しません。ここでは、高解像度3Dシネとセグメンテーションのグラウンドトゥルースを使用して画像とそのラベルの共同超解像を実行し、教師なし変分敵対的混合オートエンコーダー( V-AMA)は、継続的なドメイン適応に使用されます。私たちの提案するアプローチは、それぞれ1,331人と205人の成人の2つの多民族の多民族集団で広く評価されており、ダイスインデックス、ピーク信号対雑音比、および構造的類似性インデックスの測定に関して最先端の方法を改善しています。このフレームワークは、外部検証における最先端の生成ドメイン適応モデルのパフォーマンスも上回っています(左心室のダイスインデックス0.81対0.74)。これは、クロスドメイン一般化を使用して3Dグラウンドトゥルースデータでトレーニングされた共同超解像とセグメンテーションが、多様な母集団で堅牢な精度の表現型を可能にする方法を示しています。
Optimising the analysis of cardiac structure and function requires accurate 3D representations of shape and motion. However, techniques such as cardiac magnetic resonance imaging are conventionally limited to acquiring contiguous cross-sectional slices with low through-plane resolution and potential inter-slice spatial misalignment. Super-resolution in medical imaging aims to increase the resolution of images but is conventionally trained on features from low resolution datasets and does not super-resolve corresponding segmentations. Here we propose a semi-supervised multi-task generative adversarial network (Gemini-GAN) that performs joint super-resolution of the images and their labels using a ground truth of high resolution 3D cines and segmentations, while an unsupervised variational adversarial mixture autoencoder (V-AMA) is used for continuous domain adaptation. Our proposed approach is extensively evaluated on two transnational multi-ethnic populations of 1,331 and 205 adults respectively, delivering an improvement on state of the art methods in terms of Dice index, peak signal to noise ratio, and structural similarity index measure. This framework also exceeds the performance of state of the art generative domain adaptation models on external validation (Dice index 0.81 vs 0.74 for the left ventricle). This demonstrates how joint super-resolution and segmentation, trained on 3D ground-truth data with cross-domain generalization, enables robust precision phenotyping in diverse populations.
updated: Fri Jul 16 2021 15:42:39 GMT+0000 (UTC)
published: Fri Jul 16 2021 15:42:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト