arXiv reaDer
Multi-modal segmentation with missing MR sequences using pre-trained fusion networks
  欠落データは、機械学習の一般的な問題であり、レトロスペクティブイメージング研究では、欠落したイメージングモダリティの形でしばしば遭遇します。複数の画像が利用できない場合でも、可能な限り最良の予測を提供できるように、ニューラルネットワークの設計とトレーニングで欠落しているモダリティを考慮することを提案します。提案されたネットワークは、標準の3D UNetアーキテクチャに3つの変更を組み合わせています。モダリティのドロップアウトを伴うトレーニングスキーム、最終段階で融合層を備えたマルチパスアーキテクチャ、およびこれらのパスの個別の事前トレーニングです。これらの変更は、BraTSマルチモーダルセグメンテーションチャレンジを使用して、完全および欠落データのパフォーマンスに関して段階的に評価されます。最終モデルは、欠落データに関する最新技術に関して大幅な改善を示しており、トレーニング中に必要なメモリが少なくて済みます。
Missing data is a common problem in machine learning and in retrospective imaging research it is often encountered in the form of missing imaging modalities. We propose to take into account missing modalities in the design and training of neural networks, to ensure that they are capable of providing the best possible prediction even when multiple images are not available. The proposed network combines three modifications to the standard 3D UNet architecture: a training scheme with dropout of modalities, a multi-pathway architecture with fusion layer in the final stage, and the separate pre-training of these pathways. These modifications are evaluated incrementally in terms of performance on full and missing data, using the BraTS multi-modal segmentation challenge. The final model shows significant improvement with respect to the state of the art on missing data and requires less memory during training.
updated: Wed Sep 25 2019 13:04:28 GMT+0000 (UTC)
published: Wed Sep 25 2019 13:04:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト