シックスライススキャンの性質により、3D医療画像の深刻なスライス間不連続性が発生し、バニラ2D / 3D畳み込みニューラルネットワーク(CNN)は、スパーススライス間情報と高密度スライス内情報をバランスの取れた方法で表現できず、スライス間機能への深刻なアンダーフィット(バニラ2D CNNの場合)および長距離スライスからのノイズへのオーバーフィット(バニラ3D CNNの場合)。この作業では、学習を介して軸間の空間表現のバランスをとるために、新しいメッシュネットワーク(MNet)を提案します。 1)私たちのMNetは、多次元の畳み込みを基本モジュールに深く埋め込むことで、多くの表現プロセスを潜在的に融合し、表現プロセスの選択を柔軟にし、疎なスライス間情報と密なスライス内情報の表現のバランスを適応的に調整します。 2)MNetは、各基本モジュール内の多次元機能を潜在的に融合し、2D(2Dビューで簡単に認識できる領域の高いセグメンテーション精度)と3D(3D臓器輪郭の高い滑らかさ)表現の利点を同時に利用して、より正確なものを取得しますターゲット領域のモデリング。包括的な実験が4つの公開データセット(CT \&MR)で実行され、その結果は、提案されたMNetが他の方法よりも優れていることを一貫して示しています。コードとデータセットは、https://github.com/zfdong-code/MNetで入手できます。
The nature of thick-slice scanning causes severe inter-slice discontinuities of 3D medical images, and the vanilla 2D/3D convolutional neural networks (CNNs) fail to represent sparse inter-slice information and dense intra-slice information in a balanced way, leading to severe underfitting to inter-slice features (for vanilla 2D CNNs) and overfitting to noise from long-range slices (for vanilla 3D CNNs). In this work, a novel mesh network (MNet) is proposed to balance the spatial representation inter axes via learning. 1) Our MNet latently fuses plenty of representation processes by embedding multi-dimensional convolutions deeply into basic modules, making the selections of representation processes flexible, thus balancing representation for sparse inter-slice information and dense intra-slice information adaptively. 2) Our MNet latently fuses multi-dimensional features inside each basic module, simultaneously taking the advantages of 2D (high segmentation accuracy of the easily recognized regions in 2D view) and 3D (high smoothness of 3D organ contour) representations, thus obtaining more accurate modeling for target regions. Comprehensive experiments are performed on four public datasets (CT\&MR), the results consistently demonstrate the proposed MNet outperforms the other methods. The code and datasets are available at: https://github.com/zfdong-code/MNet