arXiv reaDer
ScribbleVC: Vision-Class 埋め込みによる Scribble 監視付き医用画像セグメンテーション
ScribbleVC: Scribble-supervised Medical Image Segmentation with Vision-Class Embedding
医療画像のセグメンテーションは、臨床上の意思決定、治療計画、疾患のモニタリングにおいて重要な役割を果たします。ただし、高品質のアノテーションの欠如、画像ノイズ、患者間の解剖学的差異など、いくつかの要因により、医療画像の正確なセグメンテーションは困難です。さらに、既存のラベル効率の良い方法と完全に監視された方法との間には、パフォーマンスに依然としてかなりのギャップがあります。上記の課題に対処するために、マルチモーダル情報強化メカニズムを介してビジョンとクラスの埋め込みを活用する、落書き教師付き医療画像セグメンテーションのための新しいフレームワークである ScribbleVC を提案します。さらに、ScribbleVC は CNN 機能と Transformer 機能を均一に利用して、より優れた視覚的特徴抽出を実現します。提案された方法は、落書きベースのアプローチとセグメンテーション ネットワークおよびクラス埋め込みモジュールを組み合わせて、正確なセグメンテーション マスクを生成します。 3 つのベンチマーク データセットで ScribbleVC を評価し、最先端の手法と比較します。実験結果は、私たちの方法が精度、堅牢性、効率の点で既存のアプローチよりも優れていることを示しています。データセットとコードは GitHub で公開されています。
Medical image segmentation plays a critical role in clinical decision-making, treatment planning, and disease monitoring. However, accurate segmentation of medical images is challenging due to several factors, such as the lack of high-quality annotation, imaging noise, and anatomical differences across patients. In addition, there is still a considerable gap in performance between the existing label-efficient methods and fully-supervised methods. To address the above challenges, we propose ScribbleVC, a novel framework for scribble-supervised medical image segmentation that leverages vision and class embeddings via the multimodal information enhancement mechanism. In addition, ScribbleVC uniformly utilizes the CNN features and Transformer features to achieve better visual feature extraction. The proposed method combines a scribble-based approach with a segmentation network and a class-embedding module to produce accurate segmentation masks. We evaluate ScribbleVC on three benchmark datasets and compare it with state-of-the-art methods. The experimental results demonstrate that our method outperforms existing approaches in terms of accuracy, robustness, and efficiency. The datasets and code are released on GitHub.
updated: Sun Jul 30 2023 13:38:52 GMT+0000 (UTC)
published: Sun Jul 30 2023 13:38:52 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト