Segment Anything Model (SAM) は、画像セグメンテーション用に最近開発された全範囲の基礎モデルです。バウンディングボックスなどのまばらな手動プロンプトを使用して、自然画像ではピクセルレベルのセグメンテーションを生成できますが、低コントラストでノイズの多い超音波画像などの医療画像では困難です。私たちは、医療画像セグメンテーションにおける SAM のパフォーマンスを向上させるために設計された、洗練されたテスト段階のプロンプト拡張技術を提案します。この方法では、マルチボックス プロンプト拡張と、偶然の不確実性に基づく偽陰性 (FN) および偽陽性 (FP) 補正 (FNPC) 戦略が結合されます。 2 つの超音波データセットでこの方法を評価し、さらなるトレーニングや調整を必要とせずに、SAM のパフォーマンスと不正確なプロンプトに対する堅牢性が向上していることを示しました。さらに、単一の 2D スライスからのバウンディング ボックスの注釈のみを使用して 3D ピクセル レベルのセグメンテーションを可能にする、Single-Slice-to- Volume (SS2V) メソッドを紹介します。私たちの結果により、ノイズが多くコントラストの低い医療画像でも SAM を効率的に使用できるようになります。ソースコードは近日公開される予定です。
The Segment Anything Model (SAM) is a recently developed all-range foundation model for image segmentation. It can use sparse manual prompts such as bounding boxes to generate pixel-level segmentation in natural images but struggles in medical images such as low-contrast, noisy ultrasound images. We propose a refined test-phase prompt augmentation technique designed to improve SAM's performance in medical image segmentation. The method couples multi-box prompt augmentation and an aleatoric uncertainty-based false-negative (FN) and false-positive (FP) correction (FNPC) strategy. We evaluate the method on two ultrasound datasets and show improvement in SAM's performance and robustness to inaccurate prompts, without the necessity for further training or tuning. Moreover, we present the Single-Slice-to-Volume (SS2V) method, enabling 3D pixel-level segmentation using only the bounding box annotation from a single 2D slice. Our results allow efficient use of SAM in even noisy, low-contrast medical images. The source code will be released soon.