arXiv reaDer
Searching Collaborative Agents for Multi-plane Localization in 3D Ultrasound
3D超音波(US)は、2D USに含まれていない豊富な空間情報と診断情報により、普及しています。さらに、3D USには、1つのショットに複数の標準平面(SP)を含めることができます。したがって、3D USでSPを自動的にローカライズすると、ユーザーの独立性とスキャン効率が向上する可能性があります。ただし、3D USでの手動SPローカリゼーションは、画質が低く、検索スペースが大きく、解剖学的変動が大きいため、困難です。この作業では、3D USで複数のSPを同時にローカライズするための新しいマルチエージェント強化学習(MARL)フレームワークを提案します。私たちの貢献は4つあります。まず、提案された方法は一般的であり、さまざまな挑戦的な米国のデータセット内の複数のSPを正確にローカライズできます。次に、MARLシステムにリカレントニューラルネットワーク(RNN)ベースのコラボレーションモジュールを装備します。これにより、エージェント間の通信を強化し、平面間の空間的関係を効果的に学習できます。第3に、エージェントとコラボレーションモジュールの両方のネットワークアーキテクチャを自動的に設計するために、ニューラルアーキテクチャ検索(NAS)を採用することを検討します。最後に、私たちは骨盤の米国のボリュームで自動SPローカリゼーションを実現した最初の人であると信じており、私たちのアプローチは正常な子宮と異常な子宮の両方のケースを処理できることに注意してください。子宮と胎児の脳の2つの挑戦的なデータセットで広範囲に検証され、提案された方法は、7.03度/1.59mmと9.75度/1.19mmの平均位置特定精度を達成します。実験結果は、私たちの軽量MARLモデルが最先端の方法よりも高い精度を持っていることを示しています。
3D ultrasound (US) has become prevalent due to its rich spatial and diagnostic information not contained in 2D US. Moreover, 3D US can contain multiple standard planes (SPs) in one shot. Thus, automatically localizing SPs in 3D US has the potential to improve user-independence and scanning-efficiency. However, manual SP localization in 3D US is challenging because of the low image quality, huge search space and large anatomical variability. In this work, we propose a novel multi-agent reinforcement learning (MARL) framework to simultaneously localize multiple SPs in 3D US. Our contribution is four-fold. First, our proposed method is general and it can accurately localize multiple SPs in different challenging US datasets. Second, we equip the MARL system with a recurrent neural network (RNN) based collaborative module, which can strengthen the communication among agents and learn the spatial relationship among planes effectively. Third, we explore to adopt the neural architecture search (NAS) to automatically design the network architecture of both the agents and the collaborative module. Last, we believe we are the first to realize automatic SP localization in pelvic US volumes, and note that our approach can handle both normal and abnormal uterus cases. Extensively validated on two challenging datasets of the uterus and fetal brain, our proposed method achieves the average localization accuracy of 7.03 degrees/1.59mm and 9.75 degrees/1.19mm. Experimental results show that our light-weight MARL model has higher accuracy than state-of-the-art methods.
updated: Sat May 22 2021 02:48:23 GMT+0000 (UTC)
published: Sat May 22 2021 02:48:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト