arXiv reaDer
FetusMap: Fetal Pose Estimation in 3D Ultrasound
  3D超音波(米国)の入り口は、多数の出生前自動検査を刺激します。ただし、3D USでの胎児全体の構造化された記述に関する研究はまだまれです。この論文では、米国のボリュームで胎児の3Dポーズを推定し、グローバルおよびローカルスケールでの定量分析を促進することを提案します。 3D USでの大きな課題、高ボリュームディメンション、画質の低さ、解剖学的構造の対称性のあいまいさ、胎児の姿勢の大きなバリエーションなど、大きな課題を考えると、私たちの貢献は3つあります。 (i)これは、文献における胎児の3D姿勢推定に関する最初の研究です。胎児全体の骨格を抽出し、異なる胴体/関節に正しい胴体/手足のラベルを割り当てることを目指しています。 (ii)自己監視学習(SSL)フレームワークを提案して、深いネットワークを微調整し、視覚的にもっともらしいポーズ予測を形成します。具体的には、ランドマークベースの登録を活用して、ケースに対応する解剖学的事前分布を効果的にエンコードし、監視のために進化するラベルプロキシを生成します。 (iii)3Dネットワークが限られたコンピューティングリソースの下でより高い解像度の入力でより良いコンテキストキューを認識できるように、GPUメモリを節約し、予測を改善するために、勾配チェックポイント(GCP)戦略をさらに採用します。米国の大規模な3Dデータセットで広範囲に検証されたこの方法は、さまざまな胎児の姿勢に取り組み、有望な結果を達成します。胎児の3D姿勢推定は、多くの高度な研究のナビゲーションを提供するマップとして機能する可能性があります。
The 3D ultrasound (US) entrance inspires a multitude of automated prenatal examinations. However, studies about the structuralized description of the whole fetus in 3D US are still rare. In this paper, we propose to estimate the 3D pose of fetus in US volumes to facilitate its quantitative analyses in global and local scales. Given the great challenges in 3D US, including the high volume dimension, poor image quality, symmetric ambiguity in anatomical structures and large variations of fetal pose, our contribution is three-fold. (i) This is the first work about 3D pose estimation of fetus in the literature. We aim to extract the skeleton of whole fetus and assign different segments/joints with correct torso/limb labels. (ii) We propose a self-supervised learning (SSL) framework to finetune the deep network to form visually plausible pose predictions. Specifically, we leverage the landmark-based registration to effectively encode case-adaptive anatomical priors and generate evolving label proxy for supervision. (iii) To enable our 3D network perceive better contextual cues with higher resolution input under limited computing resource, we further adopt the gradient check-pointing (GCP) strategy to save GPU memory and improve the prediction. Extensively validated on a large 3D US dataset, our method tackles varying fetal poses and achieves promising results. 3D pose estimation of fetus has potentials in serving as a map to provide navigation for many advanced studies.
updated: Fri Oct 11 2019 01:45:09 GMT+0000 (UTC)
published: Fri Oct 11 2019 01:45:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト